NVIDIA troca lógica de Spark por GPU e IA para acelerar UDFs

A NVIDIA troca a lógica de processamento de UDFs em Spark por uma arquitetura que integra GPU e agentes de IA. A nova abordagem reduz latência e melhora throughput em aplicações distribuídas. A solução depende de infraestrutura compatível com PCIe 5.0.

A NVIDIA apresenta uma solução para acelerar UDFs de Spark com GPU e agentes de IA. A empresa também está desenvolvendo soluções para acelerar processos de dados com GPU e agentes de IA, respondendo à demanda crescente por eficiência e desempenho em aplicações empresariais. A Intel, por sua vez, lança a D270, uma GPU de inferência otimizada para o novo era de IA agente.

A D27, que oferece até 480 GB de memória LPDDR5X, 350 W de potência, 32 núcleos Xᵉ3P e 256 motores XMX, conta com a versão do GPT-6 Astra Ultrafast, disponível no OpenAI API e para usuários elegíveis do ChatGPT Work e Codex. A versão oferece até 8x mais velocidade na geração de tokens do que o modo Astra Standard. A NVIDIA AI infrastructure ajuda OpenAI a servir mais respostas úteis. A solução foi revelada pela NVIDIA e Intel, mostrando a importância do setor em ambientes de produção e SaaS.

A nova abordagem reduz a complexidade de gerenciar dados e redes, deixando mais recursos disponíveis para a lógica de processamento das UDFs. A integração com a plataforma NVIDIA também amplia as possibilidades de escala e otimização em ambientes distribuídos. A NVIDIA e a Intel estão redefinindo a forma como as aplicações de IA e processamento de dados trabalham com redes e movimento de dados. A NVIDIA apresenta uma nova abordagem para acelerar UDFs de Spark usando GPU e agentes de IA, integrando a tecnologia cuDF e a DOCA GPUNetIO. A DOCA GPUNetIO permite que aplicações de GPU gerenciem networking e movimento de dados como operações de primeira classe, com suporte a infraestrutura existente via PCIe 5.0.

A Intel, por sua vez, lança uma GPU otimizada para IA agente, como a D270, que suporta até 480 GB de memória LPDDR5X e está preparada para lidar com contextos longos e workflows complexos. A Intel também está se posicionando no setor com uma nova GPU que pode escalar agentic IA para milhares de passos e sessões simultâneas. Philippe Tillet, inference lead da OpenAI, diz que a solução ganha em velocidade ao escrever código e trabalhar com ferramentas complexas A colaboração entre as empresas otimiza a infraestrutura de inferência para IA agente.

A NVIDIA troca a lógica de processamento de UDFs em Spark por uma arquitetura que integra GPU e agentes de IA. A tecnologia cuDF permite que aplicações empresariais processem mais dados por segundo, reduzindo o tempo de processamento em tarefas de transformação massiva. A solução foi apresentada pela NVIDIA e Intel e está disponível via OpenAI API e ChatGPT Work e Codex. A disponibilidade no Brasil não foi confirmada.

Texto escrito com IA a partir das fontes listadas e revisado por regras automáticas da redação. Como trabalhamos

• #hardware
• #software