NVIDIA cambia la lógica de Spark por GPU e IA para acelerar las UDF

NVIDIA cambia la lógica de procesamiento de UDF en Spark por una arquitectura que integra GPU y agentes de IA. El nuevo enfoque reduce la latencia y mejora el throughput en aplicaciones distribuidas. La solución depende de una infraestructura compatible con PCIe 5.0.

NVIDIA presenta una solución para acelerar las UDF de Spark con GPU y agentes de IA. La empresa también está desarrollando soluciones para acelerar procesos de datos con GPU y agentes de IA, en respuesta a la creciente demanda de eficiencia y rendimiento en aplicaciones empresariales. Intel, por su parte, lanza la D270, una GPU de inferencia optimizada para la nueva era de la IA agéntica.

La D27, que ofrece hasta 480 GB de memoria LPDDR5X, 350 W de potencia, 32 núcleos Xᵉ3P y 256 motores XMX, cuenta con la versión de GPT-6 Astra Ultrafast, disponible en la API de OpenAI y para usuarios elegibles de ChatGPT Work y Codex. La versión ofrece hasta 8x más velocidad en la generación de tokens que el modo Astra Standard. La NVIDIA AI infrastructure ayuda a OpenAI a servir más respuestas útiles. La solución fue presentada por NVIDIA e Intel, y muestra la importancia del sector en entornos de producción y SaaS.

El nuevo enfoque reduce la complejidad de gestionar datos y redes, y deja más recursos disponibles para la lógica de procesamiento de las UDF. La integración con la plataforma NVIDIA también amplía las posibilidades de escala y optimización en entornos distribuidos. NVIDIA e Intel están redefiniendo la forma en que las aplicaciones de IA y procesamiento de datos trabajan con redes y movimiento de datos. NVIDIA presenta un nuevo enfoque para acelerar las UDF de Spark usando GPU y agentes de IA, que integra la tecnología cuDF y DOCA GPUNetIO. DOCA GPUNetIO permite que las aplicaciones de GPU gestionen el networking y el movimiento de datos como operaciones de primera clase, con soporte para la infraestructura existente mediante PCIe 5.0.

Intel, por su parte, lanza una GPU optimizada para la IA agéntica, como la D270, que admite hasta 480 GB de memoria LPDDR5X y está preparada para manejar contextos largos y flujos de trabajo complejos. Intel también se posiciona en el sector con una nueva GPU que puede escalar la IA agéntica a miles de pasos y sesiones simultáneas. Philippe Tillet, inference lead de OpenAI, dice que la solución gana velocidad al escribir código y trabajar con herramientas complejas. La colaboración entre las empresas optimiza la infraestructura de inferencia para la IA agéntica.

NVIDIA cambia la lógica de procesamiento de UDF en Spark por una arquitectura que integra GPU y agentes de IA. La tecnología cuDF permite que las aplicaciones empresariales procesen más datos por segundo y reduce el tiempo de procesamiento en tareas de transformación masiva. La solución fue presentada por NVIDIA e Intel y está disponible a través de OpenAI API y ChatGPT Work y Codex. La disponibilidad en Brasil no fue confirmada.

Texto escrito con IA a partir de las fuentes citadas y revisado por las reglas automáticas de la redacción. Cómo trabajamos

• #hardware
• #software