Alibaba Cloud integrou sua solução de grande modelo multimodal (LMM) com a plataforma automotiva da Nvidia para aprimorar experiências de mobilidade inteligente para montadoras baseadas na China.
A colaboração, que também envolve o fornecedor de soluções de cockpit inteligente da Alibaba, Banma, visa revolucionar as interações no carro e as capacidades de condução autônoma.
A colaboração foi seguida pelo lançamento de uma solução de grande modelo multimodal (LMM) pela Alibaba Group Holding’s unidade de serviços de computação em nuvem. A solução LLM é adaptada para aplicações automotivas que a Alibaba Cloud co-desenvolveu com a Nvidia e a start-up Banma Community Expertise, fornecedora de soluções de cockpit inteligente da Alibaba.
A parceria também vê o modelo de linguagem grande proprietário Qwen da Alibaba Cloud, incluindo o modelo de linguagem de visão Qwen2-7B e Qwen2-VL, incorporado à plataforma NVIDIA DRIVE AGX Orin para veículos autônomos. Essa integração, aliada à tecnologia de aceleração de modelos da NVIDIA, promete reduzir custos computacionais e minimizar a latência no processamento em tempo actual de tarefas complexas.
Isto marca a primeira integração dos grandes modelos de IA do Alibaba Cloud no Potência de semicondutores sediada nos EUA Dirija a plataforma automotiva. Os principais fabricantes chineses de veículos elétricos (EV) – incluindo Li Auto, Nice Wall Motors, Geely Auto’s Zeekr Clever Expertise e a unidade EV da Xiaomi – usam esta plataforma para alimentar suas frotas de próxima geração.
Aproveitar os recursos avançados do Qwen permite que a assistência de voz no carro participe de conversas dinâmicas e com várias voltas e ofereça recomendações. Eles vão desde fornecer informações sobre pontos de referência próximos até sugerir quando acender os faróis em condições climáticas adversas.
A solução LMM também inclui o Cell Agent da Alibaba Cloud, um agente multimodal de IA para dispositivos de ponta. Esta tecnologia foi criada para expandir as capacidades dos assistentes de voz no carro, permitindo aos usuários executar comandos de voz complexos, como pedir comida através de aplicativos de entrega, enquanto estão em movimento.
O envolvimento da NVIDIA traz benefícios substanciais para a parceria. A experiência da empresa em IA e processamento gráfico tem sido basic para otimizar o desempenho dos modelos do Alibaba Cloud em {hardware} automotivo. Essa otimização garante que os recursos orientados por IA possam operar de forma eficiente dentro das restrições dos sistemas de computação veiculares.
No geral, espera-se que a colaboração entre Alibaba Cloud e Nvidia tenha implicações para a indústria automotiva mais ampla na China. Ao disponibilizar esta solução para os fabricantes de automóveis baseados na China, a Alibaba Cloud e a NVIDIA estão potencialmente a acelerar a adoção de tecnologias baseadas em IA em veículos num dos maiores mercados automóveis do mundo.
Olhando para o futuro, a Alibaba Cloud tem planos de ampliar sua colaboração com a NVIDIA. As empresas pretendem adaptar os modelos Qwen para NVIDIA DRIVE Thor, a plataforma de computação automotiva centralizada de próxima geração da NVIDIA. Esta plataforma combina assistência avançada ao motorista, direção autônoma e recursos de cockpit de IA em um sistema seguro.
Separadamente, a Nvidia também está trabalhando com a Alibaba Cloud em infraestrutura “para atender à extrema demanda das pessoas por poder de computação”, de acordo com o vice-presidente world da Nvidia, He Tao, em um subfórum organizado pela empresa norte-americana no Conferência Apsara.
De acordo com a Nvidia, a Nvidia e a Alibaba Cloud estão buscando uma série de iniciativas relacionadas ao LLM para computação acelerada. Estas iniciativas utilizam processamento paralelo para acelerar o trabalho e aumentar a eficiência energética em aplicações exigentes. Ambas as empresas também estão trabalhando para criar soluções personalizadas para ajudar “empresas tradicionais” a migrar suas operações de LLM para a nuvem.

Sustentável compartilharão mais de seus conhecimentos na edição deste ano Segurança Cibernética e Cloud Expo Europa. Passe pelo estande da Tenable no estande 144 para saber mais sobre como manter sua empresa segura.
Discover outros futuros eventos de tecnologia empresarial e webinars desenvolvidos pela TechForge aqui.