NVIDIA Capacita a Desarrolladores para Construir Simulaciones Avanzadas Usando Agentes de IA Frontier y Bibliotecas Omniverse

Image: Illustrative image · Amusements.global · CC BY-SA 4.0 · Source

NVIDIA muestra cómo los desarrolladores combinan modelos de IA frontier como GPT-6 Astra con bibliotecas Omniverse para crear simulaciones sofisticadas, facilitando robótica, vehículos autónomos, gemelos digitales y más con guía de IA en lenguaje natural.

NVIDIA destaca usos innovadores de modelos de IA frontier integrados con sus bibliotecas Omniverse para transformar el desarrollo de simulaciones. Los desarrolladores dirigen agentes de IA, como GPT-6 Astra, mediante comandos en lenguaje natural para ensamblar recursos, conectar motores físicos, módulos de renderizado y simulaciones de sensores, culminando en aplicaciones de simulación totalmente funcionales. Este enfoque simplifica la creación de entornos para pruebas de robótica, conducción autónoma, validación de gemelos digitales y modelado espacial.

Proyectos de demostración clave revelan la amplitud de esta tecnología. Para preparar la automatización en almacenes, se generó una simulación de robot humanoide con vistas en primera y tercera persona usando Astra para orquestar la física (usando ovphysx), renderizado (ovrtx), gestión de escenas (ovstage) y interfaces de usuario (ovui). Flujos de trabajo de simulación de vehículos autónomos en entornos como Market Street en San Francisco se crearon para probar sensores y modelos de conducción mediante integración de recursos en etapas y pruebas de variabilidad ambiental.

Para mejorar gemelos digitales, agentes de IA compararon salidas simuladas de sensores con datos reales registrados de cámaras y lidar, refinando iterativamente la precisión de la escena modificando recursos OpenUSD y verificando resultados contra métricas clave de rendimiento. La investigación en robótica aprovechó simulaciones para probar movimientos complejos y tareas de desarme, combinando modelos CAD, motores físicos y diseños de herramientas generados por IA.

Un ejemplo notable incluye ensamblar un modelo OpenUSD de la Estación Espacial Internacional integrado con telemetría en vivo, renderizado y transmitido a través de aplicaciones basadas en navegador desarrolladas completamente mediante indicaciones de IA. De forma similar, capturas estereoscópicas de cámara se convirtieron en estudios OpenUSD editables para pruebas de interacción, permitiendo análisis detallados de comportamiento físico.

El soporte de este ecosistema es ovstage, una biblioteca de alto rendimiento en C y Python que proporciona un sustrato de datos de escena en tiempo de ejecución acelerado por GPU compartido compatible con las bibliotecas Omniverse. ovstage permite manipulación eficiente y compartida de datos de escenas USD entre múltiples componentes de simulación sin análisis redundante o sobrecarga de memoria.

El enfoque de NVIDIA ofrece un flujo de trabajo potente donde los desarrolladores guían a agentes de IA para crear, refinar y validar aplicaciones de simulación integrales usando capacidades avanzadas de física, renderizado y simulación de sensores integradas sin problemas. Esta fusión de modelos de codificación IA frontier con bibliotecas Omniverse representa un salto importante en eficiencia y complejidad de simulación, apoyando la investigación y desarrollo en robótica, vehículos autónomos, gemelos digitales y más allá.