Las tecnologías RTX de NVIDIA están profundamente integradas en Unreal Engine 5 a través de la NVIDIA RTX Branch of Unreal Engine y el plugin DLSS Unreal Engine. Esto entrega a los desarrolladores acceso directo a renderizado avanzado, generación de frames y ray-traced lighting. NVIDIA expandió esa integración con nuevas herramientas para construir personajes y gameplay con IA on-device, anunciadas en Unreal Fest 2026.
Los lanzamientos clave:
- El nuevo NVIDIA ACE Game Agent SDK para construir companions con IA on-device
- Plugins NVIDIA ACE Unreal Engine 5 para ASR, LLM y TTS con soporte Blueprint y C++
- Un webinar Level Up with NVIDIA en vivo el 30 de junio cubriendo los nuevos plugins ACE
- Cómo empezar con DLSS 4.5 en Unreal Engine
¿Por qué importan los NPCs con IA on-device?
La IA está destrabando NPCs de próxima generación que entregan experiencias antes imposibles. KRAFTON mostró Ally, un compañero IA en PUBG: BATTLEGROUNDS que usa interacción de voz natural para entender la intención del jugador, interpretar el gameplay y responder dinámicamente en tiempo real. En lugar de seguir scripts rígidos, Ally coopera, se adapta al combate o al looting, y conversa con naturalidad. Y corre completamente on-device sobre GeForce RTX. PUBG Ally llegará pronto en beta abierta.
Construir NPCs con IA on-device exige no solo elegir los modelos correctos, sino integrarlos en un pipeline de alta performance sin costuras. Los desarrolladores deben superar varios obstáculos: minimizar la latencia conversacional para respuestas instantáneas, sincronizar estados de juego globales y dinámicos, y prevenir que los NPCs caigan en bucles infinitos.
Con el ACE Game Agent SDK Beta y los plugins UE5, los game developers e ISVs pueden construir y desplegar companions on-device altamente reactivos.
¿Qué es exactamente el ACE Game Agent SDK?
El NVIDIA ACE Game Agent SDK es un framework agentic ligero en C/C++ diseñado para integración nativa dentro del juego. Es una solución open source totalmente customizable, optimizada para modelos pequeños y acelerada por hardware sobre NVIDIA RTX.
Los desarrolladores interactúan con el SDK a través de tres categorías de API:
- Agent API: API con estado que maneja el historial de chat y dirige autónomamente razonamiento multi-paso asistido por tools con código mínimo
- Chat API: API sin estado que da control directo sobre la inferencia
- RAG API: API que habilita recuperación de conocimiento semántica, léxica e híbrida desde bases creadas por el desarrollador, anclando las respuestas del modelo a información actualizada
Juntas, estas herramientas habilitan que los NPCs perciban, razonen y actúen dinámicamente sobre el mundo del juego con base en input del jugador en tiempo real. El stack ya recibió pruebas reales: el advisor in-game experimental de Total War: PHARAOH, renderizado como un faraón egipcio, entrega consejos contextuales como recomendar acciones de la corte o construcciones para suprimir rebeliones. Usa una arquitectura RAG que consulta más de 1.200 tablas interconectadas de data del juego para responder preguntas de estrategia en tiempo real. El programa de playtest comienza en 2026.
¿Qué trae la nueva suite de plugins ACE para Unreal Engine 5?
Para desarrolladores y artistas técnicos de Unreal Engine 5, una nueva suite de plugins NVIDIA ACE está disponible. Estos modelos IA locales en runtime soportan integración por Blueprint y C++ de fábrica, cubriendo tres pilares:
- Automatic Speech Recognition (ASR): incluye un modelo de inglés listo para usar, nemo-conformer-ctc-120m, con opciones de descarga para siete idiomas adicionales, un sample level y ejemplos en Blueprint para setup rápido.
- Small Language Models (SLM): soporte local de GGUF para generación de texto de baja latencia y function calling, optimizado para diálogo de personajes y toma de decisiones inmediata, incluyendo un modelo Qwen 3.5 4B listo para usar.
- Text-to-Speech (TTS): incluye el modelo TTS Chatterbox Turbo 350M de alta calidad, voces de ejemplo, un sample level y contenido dedicado del plugin para dar vida a personajes al instante.
Los plugins permiten implementar transcripción en vivo, diálogo dinámico de personajes, comandos de voz y respuestas de acción contextual directamente en la lógica del juego.
A diferencia de los servicios cloud que sufren de alta latencia y costos operativos impredecibles, estos plugins ofrecen workflows locales optimizados para RTX bundled con modelos listos. Entregan un pipeline IA-NPC end-to-end directo al proyecto Unreal Engine 5.
¿Qué cambió en el plugin DLSS 4.5?
El nuevo plugin DLSS 4.5 para Unreal Engine suma soporte para Dynamic Multi Frame Generation, Multi Frame Generation 6X Mode y el segundo transformer de resolución para Super Resolution. Construido sobre Streamline, el plugin ofrece un camino de integración consistente entre features DLSS, lo que permite a los desarrolladores adoptar selectivamente capacidades como Ray Reconstruction o Dynamic Multi Frame Generation. APIs actualizadas, documentación y código de muestra ayudan a reducir el tiempo de integración.
Comparativa rápida: ACE local vs servicios IA cloud para NPCs
| Dimensión | NVIDIA ACE on-device | Servicios cloud (LLM remoto) |
|---|---|---|
| Latencia conversacional | ~100-200 ms | 500-1.500 ms |
| Costo operativo por sesión | USD 0 (hardware ya pagado) | USD 0,05-0,30 por hora aprox. |
| Privacidad del jugador | Local | Datos viajan a la nube |
| Dependencia de red | Ninguna | Crítica |
| Soporte | GeForce RTX 30/40/50 | Cualquier endpoint |
La diferencia de latencia es la que vuelve viable un NPC conversacional dentro de un FPS competitivo.
NPCs autónomos: el caso MetaHuman + LoRA
La sesión del 17 de junio en Unreal Fest 2026 mostró un workflow nuevo para construir personajes autónomos que separa el rol de un NPC de su performer. Usando data sintética generada por modelos teacher grandes, los desarrolladores pueden destilar comportamientos de personaje en performances ligeras alimentadas por LoRA que corren localmente sobre hardware GeForce RTX. El stack incluye plugins ACE de Speech (Riva Parakeet ASR para reconocimiento de voz, Chatterbox TTS para síntesis expresiva) y Audio2Face para animación facial y delivery de performance.
Kimodo: movimiento humano promptable, ahora en UE5
NVIDIA liberó NVIDIA Kimodo, un proyecto open source para movimiento humano controlable y promptable. Describí un movimiento en lenguaje natural ("una persona camina hacia adelante feliz, luego salta") o fijá keyframes específicos para dirección artística precisa, y generá movimiento humano complejo en segundos.
Animotive Kimodo, construido sobre Kimodo, es un plugin que trae el motor directamente a Unreal Engine: los animadores pueden refinar, capear y key-framear a mano el movimiento generado por IA sobre sus propios rigs sin salir del editor. El movimiento IA queda como punto de partida, no como output cerrado que reemplace el oficio.
¿Por qué importa para devs en Chile y LatAm?
Para estudios independientes y desarrolladores chilenos, el ACE Game Agent SDK abre una puerta que hasta hoy estaba reservada a estudios AAA con presupuesto de cloud millonario. Los plugins ASR (siete idiomas además del inglés), SLM y TTS bajan el costo de implementar un NPC conversacional a una integración de Blueprint y un workstation con una GeForce RTX. Los modelos ya empaquetados (nemo-conformer-ctc-120m, Qwen 3.5 4B, Chatterbox Turbo 350M) evitan el trabajo de fine-tuning desde cero. Para integradores locales que arman workstations para estudios indie chilenos, este lanzamiento cambia las preguntas de la propuesta de valor: ya no se trata de cuánto cloud necesitás, sino de qué GPU comprás.
