Afogando-se em dados? Veja por que você precisa trocar o barco a remo por um porta-aviões

(Doremi/Shutterstock)

Muitos líderes de TI hoje não gerenciam apenas dados. Eles estão se afogando nisso.

O quantity, a velocidade e a complexidade dos dados empresariais explodiram e a infraestrutura tradicional simplesmente não consegue acompanhar. As equipes estão remando mais rápido, trabalhando por mais tempo e consertando sistemas desatualizados apenas para se manterem à tona. Mas a enchente só está aumentando.

Think about um barco a remo em meio a uma tempestade. A água está entrando mais rápido do que pode ser retirada. A tripulação está exausta. Os buracos estão se multiplicando. E, ao mesmo tempo, o mar de dados ao seu redor continua aumentando. Esta é a realidade das organizações que se apegam a ferramentas legadas e arquiteturas de nuvem construídas para uma fração da escala atual.

De acordo com pesquisa recentequase metade dos líderes de TI afirma que seus dados estão “crescendo rápido demais para serem gerenciados”. Outros 64% apontam para custos imprevisíveis da nuvem, enquanto 53% citam o aumento da procura de energia como uma preocupação crescente. A pressão está a aumentar de todos os lados: custos, complexidade e clima.

E as ondas estão cada vez maiores. ​​De acordo com o Agência Internacional de Energiaprevê-se que a procura de eletricidade dos centros de dados em todo o mundo mais do que duplique até 2030, atingindo cerca de 945 terawatts-hora, um pouco mais do que todo o consumo de eletricidade do Japão atualmente. Nessa escala, a ineficiência não é mais um incômodo. É uma responsabilidade.

O barco a remo está afundando

Em um esforço para se manterem à tona, muitas empresas estão tentando corrigir seus sistemas com atualizações incrementais. Eles adicionam mais instâncias de nuvem. Eles se sobrepõem a ferramentas externas. Eles criam novas equipes para gerenciar pilhas cada vez mais fragmentadas.

Mas ampliar um sistema frágil não o torna forte. Isso apenas aumenta as rachaduras.

Adaptar sistemas legados para lidar com cargas de trabalho modernas é como aparafusar um motor ao seu barco a remo e esperar que ele se torne um navio de guerra. Em vez de abordar a incompatibilidade elementary entre arquitetura e demanda, as organizações estão acumulando custos, complexidade e consumo de energia. E com a ascensão da IA, as coisas só estão piorando.

(Dabarti CGI/Shutterstock)

A IA prospera com base na análise, mas também amplifica o problema subjacente. Um ser humano pode escrever algumas consultas por dia. Um mecanismo de IA pode executar milhares por segundo. Se você está lutando com desempenho e custo agora, a IA irá esticar seus sistemas além do ponto de ruptura.

A questão mais profunda é esta: a arquitetura dominante na qual a maioria das empresas ainda depende foi projetada há mais de uma década. Serviu a um mundo onde as cargas de trabalho operavam em gigabytes ou terabytes de um dígito. Hoje, as empresas navegam por centenas de petabytes, mas muitas ainda utilizam infraestrutura construída para uma escala muito menor. Não é de admirar que os sistemas estejam cedendo sob o peso.

O resultado? Tempo limite de consultas críticas. As cargas de trabalho param. E as equipes passam mais tempo solucionando problemas do que inovando. O que antes period “bom o suficiente” agora está desacelerando ativamente os negócios.

O que você precisa é de um porta-aviões

Então, qual é a alternativa?

Você não precisa de mais baldes. Você precisa de um novo tipo de barco. Um projetado para escala. Aquele que transforma a tempestade em vantagem. Um porta-aviões.

Nesta metáfora, o “porta-aviões” reflete uma mudança na tecnologia… e no pensamento. Ele aponta para uma nova abordagem de infraestrutura projetada desde o início para lidar com dados em hiperescala, suportar análises em tempo actual e acomodar as demandas crescentes de cargas de trabalho de IA.

À medida que as organizações reavaliam as suas arquiteturas de dados, diversas prioridades ganham destaque:

• Reduzir a fragmentação avançando para ambientes mais unificados, onde os sistemas funcionam em conjunto e não em silos.
• Melhorando o desempenho e a economia não apenas por meio de {hardware}, mas por meio de uma arquitetura mais inteligente e otimização da carga de trabalho.
• Reduzindo a latência para cargas de trabalho de alta demanda, como geoespacial, IA e análises em tempo actual, onde a velocidade afeta diretamente a tomada de decisões.
• Gerenciando o gargalo no consumo de energia de maneiras que se alinhem com as metas financeiras e de sustentabilidade.

Em última análise, esta mudança visa permitir que as equipes deixem de jogar na defesa (mantendo sistemas e contendo custos) e passem a jogar no ataque com insights mais rápidos e acionáveis.

Por que a maioria das equipes fica presa

Chris Gladwin é o cofundador e CEO da Ocient

Muitos líderes de dados sabem que mudanças são necessárias. Mas eles ficam presos à beira da transformação. Eles estão limitados pelo orçamento, pelo talento ou pela inércia institucional. Ou eles são simplesmente sobrecarregado por uma crescente conta de nuvem que penaliza a experimentação.

São equipes inteligentes, lideradas por tecnólogos experientes. Mas quando os problemas de infra-estruturas se tornam culturais (por exemplo, quando a agilidade dá lugar à ansiedade) a dinâmica desaparece rapidamente.

Algumas organizações recorrem mesmo ao racionamento da inovação. Uma líder de análise compartilhou recentemente que sua equipe recebe uma fatura semanal da nuvem, dividida por consulta. Se uma consulta custar muito caro, a pessoa responsável será repreendida, mesmo que a consulta seja necessária para uma visão crítica do negócio.

Essa é a desvantagem que muitas equipes enfrentam. Eles são forçados a escolher entre testar novas ideias inovadoras ou cumprir restrições orçamentárias. É uma limitação estrutural, não apenas uma rubrica orçamental. Se o custo da nuvem se tornar o fator decisivo para fazer perguntas importantes, a inovação será sufocada pela burocracia.

Isso não é inovação. Esse é o modo de sobrevivência. E ninguém voa remando com mais força.

O custo da inação

O maior risco não é apenas a dívida técnica. É cegueira futura. À medida que as novas aplicações baseadas em IA exigem insights mais rápidos, mais granularidade e contexto mais profundo, as empresas ligadas à infraestrutura legada ficarão para trás.

(Imagem de IA do Shutterstock)

Pior, eles nem saberão o que estão perdendo.

Em muitos casos, os conjuntos de dados necessários para impulsionar a próxima geração de produtos, serviços e decisões já são internos. Eles simplesmente não são acessíveis em tempo, escala e a um custo que faça sentido.

Da sobrevivência à estratégia

A inundação de dados não está diminuindo. Mas não é o quantity de água que determina quem sobrevive. É o navio.

Em vez de tentar contornar um information lake crescente, mudar para uma nova arquitetura projetada para desafios de dados atuais e futuros permitirá que você manobre rapidamente seu oceano de dados como se tivesse um porta-aviões moderno.

Para muitas empresas, esta mudança começa com um novo pensamento. Seus sistemas foram projetados para se adaptar às mudanças ou apenas para manter as luzes acesas? Suas equipes estão capacitadas para inovar ou estão presas no combate a incêndios na infraestrutura de ontem?

Pare de corrigir. Comece a planejar a decolagem.

Sobre o autor: Chris é CEO e cofundador da Ocient, uma empresa que fornece a plataforma de software program para os maiores sistemas de análise de dados do mundo. Ele também é presidente e cofundador da P33, uma organização que está ajudando a transformar Chicago em uma região tecnológica de alto nível international. E Chris é o presidente e cofundador da The Forge, que oferece experiências recreativas e ambientais incríveis, juntamente com a revitalização do ecossistema.