Databricks anunciou o lançamento do OpenSharing, um novo protocolo de código aberto projetado para mudar a forma como as organizações compartilham ativos e dados de inteligência synthetic. Desenvolvido como a próxima versão do protocolo Delta Sharing, o OpenSharing é agora um projeto da Linux Basis.
Delta Sharing, lançado pela Databricks em 2021, focado no compartilhamento aberto de dados entre plataformas. O OpenSharing amplia essa base para cobrir ativos da period da IA, como habilidades de agentes e modelos de IA, adiciona suporte para clientes de IRC Apache Iceberg e permite que fontes de dados locais e de nuvem privada se conectem diretamente a plataformas de nuvem sem movimentação de dados.
O protocolo chega durante uma mudança em direção à IA de agência, onde sistemas autônomos exigem fácil acesso a ferramentas e informações. Ao tornar o protocolo de código aberto, a Databricks pretende criar um padrão common para a indústria.
“A Delta Sharing provou que a indústria escolheria a abertura em vez do bloqueio”, disse Matei Zaharia, cofundador e CTO da Databricks. “O OpenSharing estende esse princípio para toda a pilha de IA, ao mesmo tempo em que expande o ecossistema multiplataforma para destinatários Iceberg e provedores locais. A period da agência merece uma base aberta, e o OpenSharing oferece isso.”
Compartilhando ativos de IA entre organizações
Uma característica importante do OpenSharing é sua capacidade de lidar com modelos de IA e habilidades dos agentes. Anteriormente, as empresas tinham que criar integrações personalizadas ou usar mercados específicos para compartilhar essas ferramentas. Isto muitas vezes levou a custos elevados e barreiras técnicas.
Com o OpenSharing, as empresas podem publicar as habilidades dos agentes por meio de um único protocolo. Os parceiros podem então descobrir e acessar esses ativos usando APIs padrão. Essa abordagem de “cópia zero” significa que os dados e modelos não precisam ser movidos ou copiados manualmente, o que melhora a segurança e a eficiência.
O OpenSharing também aborda a questão da dependência de fornecedor para dados estruturados. Embora o protocolo Delta Sharing unique permitisse a colaboração em várias plataformas como Spark, Oracle e Snowflake, o OpenSharing adiciona suporte para APIs Apache Iceberg.
Essa expansão permite que os provedores de dados alcancem um público mais amplo. As empresas que usam ferramentas nativas do Iceberg agora podem receber dados compartilhados por meio do mesmo protocolo usado pelo restante do ecossistema. Isso torna mais fácil para os provedores publicarem seus dados uma vez e alcançarem usuários em diferentes plataformas.
“Acreditamos em ecossistemas abertos de IA e estamos entusiasmados em colaborar com a Databricks no fornecimento de uma maneira padrão e segura de descobrir e autorizar o acesso a ativos de IA”, disse Alexander Embiricos, chefe de produtos empresariais da OpenAI.
Conectando Cloud AI a dados locais
Para muitas organizações, mover dados confidenciais para a nuvem não é uma opção devido a regulamentações ou questões de segurança. OpenSharing apresenta integrações nativas com parceiros de armazenamento native como MinIO e Qumulo.
Essas integrações permitem que plataformas de análise e IA baseadas em nuvem se conectem diretamente aos dados armazenados no native. Isso dá às empresas a capacidade de usar ferramentas modernas de IA sem mover suas informações. Espera-se que vários outros parceiros, incluindo NetApp e Dell, adicionem suporte no futuro.
O projeto está atualmente disponível ao público. Desenvolvedores e organizações interessadas podem acessar o protocolo OpenSharing no GitHub ou visitar o website oficial do projeto para saber mais sobre a implementação.