(Gorodenkoff/Shutterstock)
As organizações estão afogadas em dados, mas lutam para converter esses dados em inteligência acionável. Construir a última milha de conectividade entre dados brutos e informações úteis é o objetivo de uma jovem empresa chamada Fashionable Knowledge Firm.
Antes de co-fundar Empresa de dados moderna em 2018, Srujan Akula e Animesh Kumar ajudaram a construir sistemas de gerenciamento de dados para diversas empresas, incluindo empresas de jogos e empresas de adtech e martech, e viram semelhanças entre os desafios.
“Percebemos que todo mundo está tentando controlar o gerenciamento de dados de maneira semelhante”, disse Akula. “Todo mundo parece estar lutando do outro lado para extrair valor dos dados.”
Os engenheiros de dados, em explicit, estavam batendo cabeça tentando trabalhar com todos os diferentes sistemas necessários para moldar os dados. Eles tiveram que navegar por um pântano de integração, transformação, linhagem, governança e outras ferramentas de dados para colocar os dados em um formato que pudesse ser prontamente consumido por seus colegas de linha de negócios.
Foi então que a lâmpada coletiva se acendeu em suas cabeças.
Os cofundadores da Fashionable Knowledge Firm
“Nossa visão é, como qualquer outro gerenciamento de produtos, se os dados forem tratados como produtos, se você realmente entender qual é o resultado que está tentando gerar, qual precisa ser exatamente o formato dos dados, a governança e se isso podem ser capturados e podemos fornecer maneiras simples para os engenheiros de dados facilitarem isso, isso pode ser uma vitória”, diz Akula BigDATAwire em uma entrevista recente.
A ideia deles period construir um sistema operacional de dados – ou um DataOS, se preferir – para dados que pudessem servir de base para um conjunto de componentes que fornecessem os recursos específicos necessários para servir os dados como um produto, qualquer que fosse o caso de uso. Por exemplo, se uma equipe de advertising estiver construindo um sistema 360 para o cliente, a Fashionable Knowledge Firm poderá apoiar isso apresentando os dados de uma forma que faça sentido para aquele caso de uso.
“Portanto, tudo começa com a discussão com a equipe de negócios para capturar a intenção e, em seguida, o DataOS fornece todos os recursos para garantir que o formato dos dados, a semântica dos dados, a maneira como o negócio precisa deles”, Akula diz. “Temos uma construção de contrato de dados onde capturamos qualidade, atualização, integridade e validações de esquema para ferramentas de governança. Tudo isso é capturado nessa construção singular.”
Em vez de se preocupar com os detalhes essenciais da infraestrutura de gerenciamento de dados, a Fashionable Knowledge Co. fornecerá uma oferta completa, à la a knowledge cloth ou information mesh. Seu DataOS Knowledge Product Hub, que foi lançado em 31 de outubrofornece uma gama completa de recursos de gerenciamento de dados, como um catálogo de dados, criação de perfil estatístico para qualidade de dados, auditoria e registro em log para governança e conformidade, observabilidade para desvios de esquema e uma camada semântica para compreensão. Se os clientes já possuem algumas dessas ferramentas, eles podem construir o DataOS em torno delas.
“Na maioria das vezes, os clientes já possuem uma infraestrutura existente”, diz Akula. “Todas essas empresas investiram em Blocos de dados, Floco de neveou Drêmio. Mas eles ainda estão vendo valor em nossa capacidade de preencher a lacuna de dados do último quilômetro. Como posso tornar o consumo de dados muito mais simples do que é hoje? Essa tem sido a nossa história.”
O DataOS Product Knowledge Hub (imagem cortesia da Fashionable Knowledge Co.)
Mas não se trata apenas de expor dados de alta qualidade em um formato supreme para usuários empresariais (a empresa segue as recomendações da Linux Basis Produto de dados abertos (ODP), bem como Apache Iceberg para evitar dependência de fornecedor). Trata-se também de criar um produto de dados completo com todos os recursos que o cliente espera – um contrato de dados, objetivos de nível de serviço (SLOs), and so on.
“Minha visão e a nossa visão como empresa tem sido se você tratar os dados como um produto, eles podem ser um verdadeiro ativo de negócios onde você não precisa ter equipes de tecnologia envolvidas”, diz ele. “Coloque a infraestrutura subjacente em uma caixa preta e forneça a esse conjunto de dados com curadoria, aprovação pela governança e fonte única de produtos de dados verdadeiros que estão alimentando todos os seus casos de uso.”
Em vez de incomodar os engenheiros de dados durante semanas para obter dados específicos, a Fashionable Knowledge Co. pretende capacitar a linha de negócios para simplesmente procurar o produto de dados certo. Se eles tiverem permissão para usá-lo, o provisionamento dos dados por meio de uma API (REST, GraphQL and so on.) está a apenas alguns cliques de distância, de acordo com Akula.
Servindo como uma espécie de lente através da qual os usuários podem acessar produtos de dados, Fashionable Knowledge. Co. funciona como uma forma de virtualização de dados. Akula não esconde sua intenção de substituir Denodoum dos líderes estabelecidos no espaço de virtualização de dados. Embora a Fashionable Knowledge Co. não tenha uma presença tão grande quanto a Denodo, atualmente está chamando a atenção de alguns clientes consideráveis. Akula diz que tem como alvo o segmento empresarial, ou empresas com receitas de US$ 10 bilhões ou mais.
De acordo com Akula, a empresa implantou com sucesso sua tecnologia em uma empresa de distribuição de US$ 27 bilhões que estava lutando para construir e implantar um hub de dados para alimentar uma solução 360 do cliente. Depois de implementar o hub de dados em apenas três semanas, cinco outras equipes de negócios buscaram acesso aos dados selecionados, diz ele.
“Levamos um foco de quase cinco anos e meio para amadurecer a plataforma e fornecer esse tipo de gerenciamento do ciclo de vida”, diz ele. “Porque não se trata apenas de construir produtos de dados e criar uma visualização ou armazenamento de dados como a expansão de visualizações que você tem hoje. Mas como você gerencia o ciclo de vida? Como você entende quanto está gastando? Qual é o ROI? Fizemos muito em relação ao ciclo de vida do produto de dados para torná-lo pronto para a empresa.”
Depois de ficar de cabeça baixa no modo de engenharia durante anos, a empresa agora está pronta para começar a realmente mostrar ao mundo o que tem. Isso trouxe algum sucesso de mercado, pois de acordo com GetLakta, a empresa de San Mateo, Califórnia, gerou US$ 18,4 milhões em receitas em 2023.
Mas a Fashionable Knowledge Co. claramente tem objetivos maiores. A empresa deseja continuar expandindo os casos de uso do DataOS e tornando os produtos de dados mais fáceis de construir e consumir.
“Isso está tornando a vida de um engenheiro de dados muito mais simples”, diz ele. “Os engenheiros de dados estão trabalhando com resultados claros, em vez de clichês e minúcias, porque o DataOS cuida de tudo isso por meio de nossas construções de programação declarativa. Estou entusiasmado com o fato de que isso está tornando o engenheiro de dados muito mais eficiente, mas as equipes de negócios conseguem avançar 90% mais rápido em qualquer caso de uso. E isso é importante para mim, é o quão bem as equipes de negócios são capazes de colaborar e trabalhar fora deste hub.”
Itens relacionados:
Dominando a modelagem de dados: insights de um desenvolvedor de produtos de dados
Por que uma camada semântica common é a chave para desbloquear valor de seus dados
Produtos de dados: a solução para a armadilha do silo de dados