NVIDIA y Streamlabs presentan un asistente de streaming con IA: avatares 3D, producción automática y soporte técnico en tiempo real

El mundo del streaming evoluciona a gran velocidad y, con él, las herramientas que necesitan los creadores para mantener el ritmo. En Logitech G PLAY 2025, Streamlabs —en colaboración con NVIDIA e InWorld— presentó su Intelligent Streaming Agent, un asistente impulsado por IA y tecnologías RTX diseñado para acompañar al streamer en directo como copresentador, productor y soporte técnico.


Del streamer multitarea al asistente inteligente

Hasta ahora, un creador debía ser al mismo tiempo jugador, comentarista, realizador y moderador, además de lidiar con problemas técnicos. El nuevo Streaming Agent busca cambiar ese modelo, actuando como un colaborador en tiempo real capaz de:

  • Copresentar el directo con un avatar 3D animado mediante NVIDIA ACE Audio2Face y optimizado con DLSS. Este avatar puede responder al chat o mantener la conversación activa cuando el público guarda silencio.
  • Producir la transmisión, cambiando escenas, activando sonidos o clips, y ejecutando señales predefinidas. Todo ello con triggers configurables que el streamer puede personalizar.
  • Dar soporte técnico, respondiendo dudas sobre el propio Streamlabs y ayudando a resolver errores sin que el creador tenga que interrumpir el directo.

“Con la integración de ACE Audio2Face en Streamlabs, los creadores pueden llevar avatares realistas e inteligencia en tiempo real a sus emisiones, generando experiencias más atractivas directamente desde sus PC con NVIDIA GeForce RTX AI”, explicó Jason Paul, vicepresidente de tecnología de la plataforma GeForce en NVIDIA.


Streaming profesional al alcance de todos

Hace pocos años, un set de streaming requería dos ordenadores, cámaras DSLR y micrófonos XLR. NVIDIA ha trabajado para democratizar esta actividad con varias innovaciones:

  • Codificación eficiente: el encoder de NVIDIA permite transmitir en alta calidad con un solo PC equipado con GPU RTX.
  • Mejora de audio y vídeo: gracias a NVIDIA Broadcast, incluso micrófonos y webcams asequibles ofrecen un sonido e imagen de nivel profesional.
  • Distribución optimizada: funciones como Enhanced Broadcast de Twitch y OBS facilitan que incluso los canales pequeños puedan emitir en varias calidades sin depender de la infraestructura de la plataforma.

El nuevo asistente de Streamlabs aprovecha estos avances y añade una capa de IA agentic, facilitando que incluso los streamers novatos puedan producir transmisiones dinámicas, con overlays reactivos, avatares personalizados y soporte de producción automatizada.


Reconocimiento en tiempo real y modelos de visión acelerados

Una de las capacidades más llamativas es su uso de modelos de visión en tiempo real, acelerados por NVIDIA RTX, capaces de detectar eventos de juego como eliminaciones, victorias o bajadas críticas de salud. Esta información permite activar efectos o cambios de escena automáticos, aportando fluidez y dinamismo sin intervención manual.

Todo el procesamiento ocurre localmente en la GPU RTX, garantizando baja latencia y evitando la dependencia de la nube, algo crucial en emisiones en vivo.


Ecosistema creativo más allá del streaming

La presentación se enmarca en un contexto más amplio: NVIDIA impulsa un ecosistema de IA generativa y herramientas de creación para PCs con RTX. Entre las novedades recientes destacan:

  • ComfyUI v3.57: mejoras de hasta un 40 % en rendimiento para modelos generativos gracias a RTX, y soporte para nuevos modelos como Wan 2.2 (vídeo), Qwen-Image (texto e imagen), FLUX.1 Krea [dev] y Hunyuan3D 2.1 (generación de activos 3D).
  • TensorRT y microservicios NIM: modelos optimizados como Stable Diffusion 3.5 o FLUX.1 Kontext se ejecutan hasta 3 veces más rápido y con un 50 % menos de VRAM en RTX.
  • RTX Remix actualizado: un nuevo sistema de partículas con path tracing que permite a modders dar vida a juegos clásicos con efectos visuales realistas e interactivos.

Estas herramientas, combinadas con el Streaming Agent, consolidan a las GPU RTX como el centro de la creación digital, desde el streaming en directo hasta la producción de contenidos 3D o la edición avanzada de imágenes y vídeos.


Conclusión

El Intelligent Streaming Agent de Streamlabs, acelerado por NVIDIA RTX, representa un paso hacia la automatización inteligente del streaming. No sustituye al creador, sino que actúa como un copiloto digital que libera tiempo y atención para lo que realmente importa: jugar y conectar con la audiencia.

Con la suma de avatares 3D interactivos, producción en tiempo real, soporte técnico embebido y detección de eventos de juego, la herramienta inaugura una nueva etapa en la que la IA no es un añadido, sino un integrante activo en la experiencia de transmisión.


Preguntas frecuentes

¿Qué es el Streamlabs Intelligent Streaming Agent?
Es un asistente basado en IA que ayuda a los streamers actuando como copresentador, productor y técnico en tiempo real, integrado en Streamlabs Desktop y acelerado por GPU NVIDIA RTX.

¿Cómo funcionan los avatares 3D en los directos?
Gracias al SDK NVIDIA ACE Audio2Face y al escalado de rendimiento con DLSS, los avatares pueden animarse en tiempo real y responder a la audiencia sin necesidad de que el streamer interrumpa el juego.

¿El asistente requiere conexión a la nube?
No. Los modelos de visión y las funciones principales se ejecutan de forma local en la GPU RTX, lo que asegura baja latencia y una experiencia fluida.

¿Qué otras herramientas de NVIDIA complementan el asistente?
Se apoya en el encoder RTX para streaming, NVIDIA Broadcast para audio/vídeo mejorado y nuevas integraciones con ComfyUI, TensorRT, NIM y RTX Remix, ampliando el ecosistema creativo alrededor de los PC con GPU RTX.


vía: blogs.nvidia

encuentra artículos

newsletter

Recibe toda la actualidad del sector tech y cloud en tu email de la mano de RevistaCloud.com.

Suscripción boletín

LO ÚLTIMO

×