 |
Todos os anos em 14 de março (3,14), O AWS Pi Day destaca as inovações da AWS que ajudam você a gerenciar e trabalhar com seus dados. O que começou em 2021 como uma maneira de comemorar o décimo quinto aniversário de lançamento de Amazon Easy Storage Service (Amazon S3) Agora se tornou um evento que destaca como as tecnologias em nuvem estão transformando o gerenciamento de dados, análises e IA.
Este ano, o AWS Pi Day retorna com foco na aceleração de análises e inovação de IA com uma fundação de dados unificada na AWS. O cenário de dados está passando por uma profunda transformação à medida que a IA surge na maioria das estratégias corporativas, com as cargas de trabalho de análise e IA cada vez mais convergindo em torno de muitos dos mesmos dados e fluxos de trabalho. Você precisa de uma maneira fácil de acessar todos os seus dados e usar todas as suas ferramentas de análise e IA preferidas em uma única experiência integrada. Neste dia do AWS Pi, estamos apresentando uma lista de novos recursos que ajudam a criar experiências de dados unificadas e integradas.
A próxima geração do Amazon Sagemaker: o centro de todos os seus dados, análises e AI
Em Re: Invent 2024, Introduzimos a próxima geração do Amazon Sagemakero centro de todos os seus dados, análises e IA. Sagemaker Inclui praticamente todos os componentes necessários para exploração de dados, preparação e integração, processamento de massive knowledge, análise rápida do SQL, aprendizado de máquina (ML) Desenvolvimento e treinamento de modelos e AI generativa Desenvolvimento de aplicativos. Com esta nova geração de sagema do Amazon, Sagemaker Lakehouse fornece acesso unificado aos seus dados e Catálogo de Sagemaker Ajuda você a atender aos seus requisitos de governança e segurança. Você pode ler a postagem do weblog de lançamento escrita pelo meu colega Antje para aprender mais detalhes.
Núcleo para a próxima geração de sagemaker da Amazon é Sagemaker Unified Studioum único ambiente de desenvolvimento de dados e IA, onde você pode usar todos os seus dados e ferramentas para análise e IA. O Sagemaker Unified Studio agora está geralmente disponível.
O Sagemaker Unified Studio facilita a colaboração entre cientistas de dados, analistas, engenheiros e desenvolvedores enquanto trabalham em dados, análises, fluxos de trabalho e aplicativos de IA. Ele fornece ferramentas familiares da AWS Analytics e Inteligência synthetic e aprendizado de máquina (AI/ml) Serviços, incluindo processamento de dados, análise SQL, desenvolvimento de modelos ML e desenvolvimento generativo de aplicativos de IA, em uma única experiência do usuário.
O Sagemaker Unified Studio também traz recursos selecionados de Amazon Bedrock em Sagemaker. Agora você pode prototipar, personalizar e compartilhar rapidamente aplicativos de IA generativos usando Modelos de fundação (FMS) e recursos avançados, como Bases de conhecimento da Amazon BedrockAssim, Amazon Bedrock GuardrailsAssim, Agentes da Amazon Bedrocke Amazon Bedrock flui Para criar soluções personalizadas alinhadas com seus requisitos e diretrizes de IA responsáveis, todas dentro do Sagemaker.
Por último, mas não menos importante, Desenvolvedor da Amazon Q. é agora Geralmente disponível no Sagemaker Unified Studio. O desenvolvedor da Amazon Q fornece assistência generativa de IA para o desenvolvimento de dados e IA. Ajuda você com tarefas como escrever consultas SQL, criar extrato, transformar e carregar trabalhos (ETL) e solucionar problemas, e está disponível em o nível livre e o nível profissional para assinantes existentes.
Você pode aprender Mais sobre o Sagemaker Unified Studio Nesta postagem recente do weblog, escrita por minha colega Donnie.
Durante Re: Invent 2024, também lançamos Amazon Sagemaker Lakehouse Como parte da próxima geração de Sagemaker. O Sagemaker Lakehouse unifica todos os seus dados nos lagos de dados da Amazon S3, Amazon Redshift Knowledge Warehouses e fontes de dados de terceiros e federadas. Ajuda a criar análises poderosas e aplicativos AI/ML em uma única cópia de seus dados. Sagemaker Lakehouse oferece a flexibilidade de acessar e consultar seus dados no native com Apache iceberg–Moldes e motores compatíveis. Além disso, as integrações zero-ETL automatizam o processo de trazer dados para o Sagemaker Lakehouse de fontes de dados da AWS, como Amazon Aurora ou Amazon DynamoDB e de aplicações como SalesforceAssim, Anúncios do FbAssim, Anúncios do InstagramAssim, ServiceNowAssim, SEIVAAssim, Zendeske Zoho CRM. A lista completa de integrações está disponível no Sagemaker Lakehouse FAQ.
Construindo uma base de dados com a Amazon S3
Construir uma fundação de dados é a pedra angular da aceleração de análises e cargas de trabalho de IA, permitindo que as organizações gerenciem, descubram e utilizem perfeitamente seus ativos de dados em qualquer escala. A Amazon S3 é o melhor lugar do mundo para construir um Knowledge Lake, com escala praticamente ilimitada, e fornece a base essencial para essa transformação.
Estou sempre surpreso ao aprender sobre a escala em que operamos a Amazon S3: atualmente possui mais de 400 trilhões de objetos, exabytes de dados e processa 150 milhões de solicitações alucinantes por segundo. Apenas uma década atrás, nem 100 clientes estavam armazenando mais do que um petabyte (PB) de dados no S3. Hoje, milhares de clientes superaram o marco de 1 PB.
A Amazon S3 armazena exabytes de dados tabulares e calcula a média de mais de 15 milhões de solicitações para dados tabulares por segundo. Para ajudá -lo a reduzir o levantamento pesado indiferenciado ao gerenciar seus dados tabulares em baldes S3, Anunciamos as tabelas da Amazon S3 na AWS Re: Invent 2024. As tabelas S3 são o primeiro armazenamento de objetos em nuvem com suporte embutido para o Apache Iceberg. As tabelas S3 são otimizadas especificamente para cargas de trabalho de análise, resultando em até três vezes mais rápida taxa de consulta e até dez vezes mais transações por segundo em comparação com tabelas auto-gerenciadas.
Hoje, Estamos anunciando o disponibilidade geral de Tabelas Amazon S3 integração com Amazon Sagemaker Lakehouse As tabelas Amazon S3 agora se integram ao Amazon Sagemaker Lakehousefacilitando o acesso às tabelas S3 de serviços de análise da AWS, como o Amazon Redshift, Amazon AthenaAssim, Amazon emrAssim, Aws colae motores compatíveis com Apache Iceberg, como Apache Spark ou Pyiceberg. O Sagemaker Lakehouse permite o gerenciamento centralizado de permissões de acesso de dados de grãos finos para tabelas S3 e outras fontes e as aplica consistentemente em todos os motores.
Para aqueles que usam um catálogo de terceiros, têm uma implementação de catálogo personalizada ou só precisam de leitura básica e gravar acesso a dados tabulares em um único balde de tabela, Nós adicionamos Novas APIs que são compatíveis com o Padrão de catálogo de descanso de iceberg. Isso permite que qualquer aplicativo compatível com iceberg crie, atualize, liste e exclua perfeitamente as tabelas em um balde de tabela S3. Para gerenciamento de dados unificado em todos os seus dados tabulares, governança de dados e controles de acesso de granulação fina, você também pode usar mesas S3 com a Sagemaker Lakehouse.
Para ajudá -lo a acessar Mesas S3, Lançamos atualizações no Console de gerenciamento da AWS. Agora você pode criar uma tabela, preencher -a com dados e consultar diretamente do console S3 usando a Amazon Athena, facilitando o início e analisar dados em baldes de tabela S3.
A captura de tela a seguir mostra como acessar a Athena diretamente do console S3.
Quando eu selecionar Tabelas de consulta com Athena ou Crie a tabela com AthenaEle abre o console Athena na fonte de dados correta, catálogo e banco de dados.
Desde Re: Invent 2024, continuamos a adicionar novos recursos às mesas S3 em ritmo acelerado. Por exemplo, Adicionamos suporte de definição de esquema ao CreateTable API e Agora você pode criar até 10.000 tabelas em um balde de mesa S3. Também lançamos tabelas S3 em oito Regiões da AWScom o mais recente da Ásia -Pacífico (Seul, Cingapura, Sydney) em 4 de março, com mais por vir. Você pode se referir ao Tabelas S3 Regiões da AWS Página da documentação para obter a lista das onze regiões onde as tabelas S3 estão disponíveis hoje.
Amazon S3 Metadados–Anunciado durante Re: Invent 2024– foi Geralmente disponível desde 27 de janeiro. É a maneira mais rápida e fácil de ajudá-lo a descobrir e entender seus dados S3 com metadados automatizados e sem esforço que atualizam em tempo actual. Os metadados S3 trabalham com tags de objeto S3. As tags ajudam a agrupar logicamente os dados por vários motivos, como aplicar as políticas do IAM para fornecer acesso de granulação fina, especificar filtros baseados em tags para gerenciar regras do ciclo de vida do objeto e replicar seletivamente dados em outra região. Em regiões onde os metadados S3 estão disponíveis, você pode capturar e consultar metadados personalizados que são armazenados como tags de objeto. Para reduzir o custo associado a tags de objeto ao usar metadados S3, Amazon S3 reduziu os preços para a marcação de objetos S3 em 35 % Em todas as regiões, tornando mais barato usar metadados personalizados.
AWS PI DIA 2025
Ao longo dos anos, o AWS Pi Day apresentou grandes marcos em armazenamento em nuvem e análise de dados. Este ano, o evento digital do AWS Pi Day apresentará uma gama de tópicos projetados para desenvolvedores e tomadores de decisão técnicos, engenheiros de dados, profissionais de IA/ML e líderes de TI. Os principais destaques incluem mergulhos profundos, demos ao vivo e sessões especializadas em todos os serviços e recursos que discuti nesta postagem.
Ao participar deste evento, você aprenderá como pode acelerar suas análises e inovação de IA. Você aprenderá como pode usar as tabelas S3 com suporte nativo do Apache Iceberg e metadados S3 para criar lagos de dados escaláveis que atendem a análises tradicionais e cargas de trabalho emergentes de IA/ML. Você também descobrirá a próxima geração do Amazon Sagemaker, o Centro de todos os seus dados, análises e IA, para ajudar suas equipes a colaborar e construir mais rápido a partir de um estúdio unificado, usando ferramentas familiares da AWS com acesso a todos os seus dados, seja armazenado em lagos de dados, knowledge warehouses ou terceiros ou fontes de dados federados.
Para aqueles que desejam ficar à frente das últimas tendências da nuvem, AWS Pi Day 2025 é um evento que você não pode perder. Esteja você criando dados de dados, treinando modelos de IA, criando aplicativos generativos de IA ou otimizando cargas de trabalho de análise, as idéias compartilhadas ajudarão você a maximizar o valor dos seus dados.
Sintonize hoje e explorar o mais recente inovação de dados em nuvem. Não perca a oportunidade de se envolver com especialistas, parceiros e clientes da AWS, moldando o futuro dos dados, análises e IA.
Se você perdeu o evento digital em 14 de março, você pode visitar a página do evento A qualquer momento-manteremos todo o conteúdo disponível sob demanda lá!
Como está o weblog de notícias? Pegue isso 1 minuto de pesquisa!
(Esse enquete é hospedado por uma empresa externa. AWS lida com suas informações conforme descrito no Aviso de privacidade da AWS. A AWS possuirá os dados coletados por meio desta pesquisa e não compartilharão as informações coletadas com os entrevistados.)