Em agosto, nós escrevemos sobre como, em um futuro onde as arquiteturas de dados distribuídas são inevitáveis, unificar e gerenciar metadados operacionais e de negócios é elementary para maximizar com sucesso o valor dos dados, análises e IA. Uma das inovações mais importantes no gerenciamento de dados são os formatos de tabelas abertas, especificamente Iceberg Apacheque transforma fundamentalmente a forma como as equipes de dados gerenciam metadados operacionais no knowledge lake. Ao manter metadados operacionais dentro da própria tabela, as tabelas Iceberg permitem a interoperabilidade com muitos sistemas e mecanismos diferentes.
A especificação do catálogo Iceberg REST é um componente chave para disponibilizar tabelas Iceberg e detectá-las por muitas ferramentas e mecanismos de execução diferentes. Ele permite fácil integração e interação com metadados da tabela Iceberg por meio de uma API e também separa o gerenciamento de metadados do armazenamento subjacente. É um recurso crítico para fornecer acesso unificado a dados em arquiteturas distribuídas e com vários mecanismos.
É por isso Cloudera adicionou suporte para o catálogo REST: para tornar os metadados abertos uma prioridade para nossos clientes e garantir que as equipes de dados possam realmente aproveitar a melhor ferramenta para cada carga de trabalho – seja ingestão, geração de relatórios, engenharia de dados ou construção, treinamento e implantação de modelos de IA.
Snowflake e Cloudera: melhores juntos
No espírito de dados abertos e liberdade de mecanismo, a Cloudera está entusiasmada com a parceria com Floco de neve para trazer o lakehouse de dados abertos mais abrangente e a liberdade que ele oferece a todos os nossos clientes.
Snowflake é uma das plataformas mais populares para compartilhamento de dados, enterprise intelligence (BI), relatórios e painéis devido à sua facilidade de uso, recursos de autoatendimento e desempenho de seu mecanismo de execução. Snowflake é um contribuidor proeminente do projeto Iceberg, entendendo o valor que ele traz aos seus clientes em termos de interoperabilidade, gerenciamento de dados e governança de dados.
Ao aproveitar o Cloudera para criar e gerenciar tabelas Iceberg, os clientes da Snowflake podem disponibilizar uma visão única, consistente e precisa de seus dados para seus usuários de BI sem mover ou copiar dados para outros sistemas. Eles podem aproveitar a verdadeira arquitetura híbrida da Cloudera e até mesmo fornecer acesso fácil a fontes de dados locais, aproveitando o Apache Ozone.
Eles também podem aproveitar uma visualização única de seus dados para qualquer outro mecanismo da Cloudera ou de terceiros para outras cargas de trabalho analíticas, incluindo streaming, análises avançadas e IA/ML.
Com o mecanismo do Snowflake, os clientes da Cloudera obtêm acesso fácil de autoatendimento aos seus dados para BI e painéis interativos em qualquer lugar em que seus dados residam, incluindo várias nuvens públicas e locais.
A vantagem Cloudera + floco de neve
A parceria entre Cloudera e Snowflake oferece diversas vantagens aos clientes conjuntos:
- Menor custo whole de propriedade: reduzir as cópias e a movimentação de dados e, ao mesmo tempo, garantir a liberdade do mecanismo e da infraestrutura, permite que os clientes reduzam os custos de armazenamento, computação e operacionais de manutenção de sua pilha de análises.
- Escolha a melhor ferramenta para o trabalho: Ao manter os dados em formatos abertos, os clientes podem escolher o ambiente e as ferramentas que fornecem o equilíbrio supreme entre custo e desempenho, carga de trabalho por carga de trabalho. Os clientes têm acesso a diversas nuvens públicas e privadas e armazenamentos de dados locais, e podem usar qualquer mecanismo que possa ler ou gravar em tabelas Iceberg.
- Verdadeiro híbrido: Os clientes têm acesso whole aos armazenamentos de dados locais e em todas as nuvens, sem realizar um projeto de migração caro e complexo. Eles são livres para escolher a infraestrutura mais adequada para cada carga de trabalho. O Cloudera Shared Knowledge Expertise (SDX) permite que os clientes apliquem políticas consistentes de segurança e governança em todos os seus ambientes, mesmo que os dados sejam transferidos entre nuvens.
Experimente Cloudera e Snowflake hoje
Juntas, Cloudera e Snowflake oferecem o lakehouse híbrido de dados abertos mais abrangente. Ele permite que os clientes abordem com segurança praticamente qualquer caso de uso analítico, desde BI de autoatendimento, que fornece inteligência acionável aos usuários de negócios, até IA, que transforma processos de negócios e potencializa experiências diferenciadas para os clientes.
Ambas as plataformas podem ser testadas gratuitamente hoje. Experimente o open knowledge lakehouse da Cloudera na AWS por 5 dias gratuitamente aquiou experimente o Snowflake gratuitamente por 30 dias aqui.