Estamos empolgados em anunciar a disponibilidade geral da Federação Lakehouse para o Google BigQuery e a prévia do Oracle e Teradata. Agora, você pode conectar, descobrir, governar e consultar dados dessas fontes através do catálogo da unidade – sem migração ou ETL. Isso facilita o acesso dos dados, garantindo uma arquitetura lakehouse aberta e interoperável.
Unificar seus dados e governança em plataformas distribuídas com a Federação Lakehouse
A Federação Lakehouse permite que os usuários consultem e analisem dados em bancos de dados díspares, knowledge warehouses e catálogos sem duplicar ou transferir dados. Ao integrar fontes de dados externas diretamente no catálogo da unidade, as organizações podem:
- Obtenha uma visão unificada de toda a sua propriedade de dados: Classifique e descubra automaticamente dados estruturados e não estruturados em uma única plataforma, capacitando sua organização a acessar e explorar com segurança todos os dados disponíveis – onde quer que residam.
- Consulte e analise os dados perfeitamente com um único motor: Ativar análise e prototipagem rápidas, advert hoc em todos os seus dados, análises e cargas de trabalho de IA sem a necessidade de ingestão. Um mecanismo unificado otimiza o desempenho da consulta com planejamento avançado de consulta, cache e execução de fontes cruzadas, permitindo que você mix dados com eficiência de várias plataformas em uma única consulta.
- Garanta segurança e governança consistente de dados: Aplique um modelo de permissão unificado para aplicar regras de acesso em todas as fontes de dados. Implementar segurança no nível da linha e coluna, políticas baseadas em tags e auditoria centralizada, mantendo a visibilidade whole no uso de dados. Atenda aos requisitos de conformidade sem esforço com a linhagem de dados e auditabilidade interna.
A Federação Lakehouse suporta um conjunto diversificado de plataformas, incluindo MySQL, PostgreSQL, Teradata, Oracle, Amazon Redshift, Salesforce Knowledge Cloud, Snowflake, Microsoft SQL Server, Azure Synapse (SQL Knowledge Warehouse), Google BigQuery e Hive Metastore, com mais conectores em breve.
Disponibilidade geral da Federação Lakehouse para BigQuery
Com o lançamento do GA da Lakehouse Federation for Google BigQuery, os usuários agora podem conectar dados BigQuery a Databricks sem a necessidade de movimento ou duplicação de dados. Isso lhes permite executar cargas de trabalho diretamente em dados do BigQuery de seu ambiente de banco de dados no GCP, Azure ou AWS, enquanto alavancam a governança de granulação fina do Catálogo da Unidade para gerenciamento de dados seguro e eficiente.
Esta integração permite:
- Gerenciamento de dados unificado: Descubra e governam perfeitamente os dados do BigQuery, juntamente com outras fontes do catálogo da unidade, garantindo controle e governança de acesso consistente.
- Desempenho de consulta otimizado: Make the most of o poder de computação da BigQuery e se beneficia da otimização avançada de consulta do Databricks para insights mais rápidos.
- Colaboração aprimorada: Capacite as equipes a trabalhar em ambientes em nuvem com eficiência com uma interface unificada para consultar e analisar dados em várias plataformas.
A Federação Lakehouse para BigQuery conectou perfeitamente nossos ambientes do Google Cloud e Azure. Sem a necessidade de movimento de dados ou duplicação, agora podemos aproveitar os bancos de dados no Azure para executar cargas de trabalho em Python e SQL diretamente em dados de bigQuery, ao mesmo tempo em que se beneficia da governança fina do Unity Catalog. É um divisor de águas para nossa estratégia multicloud, simplificando operações e melhorando a análise
– Lisa Fiege, engenheiro de ciência de dados, Taylor Farms
O conector do Google BigQuery agora está geralmente disponível Começando com o DBR versão 16.1 e em breve estará disponível no Databricks SQL.
Visualização pública para conectores Teradata e Oracle
Além do anúncio da GA para o BigQuery, o Databricks também está apresentando os conectores Teradata e Oracle na visualização pública. Esses novos conectores permitirão que os usuários estendam o alcance da Federação Lakehouse a ainda mais fontes de dados, unificando ainda mais as propriedades de dados.
Comece
Leia nossa documentação para começar com os conectores da Federação Lakehouse para o Google BigQuery, Oracle e Teradata: