Para acelerar el desarrollo de humanoides a escala global, NVIDIA anunció que está proporcionando a los principales fabricantes de robots, desarrolladores de modelos de IA y fabricantes de software un conjunto de servicios, modelos y plataformas informáticas para desarrollar, entrenar y construir la próxima generación de robótica humanoide.
Entre las ofertas se encuentran los nuevos microservicios y marcos NVIDIA NIM para la simulación y el aprendizaje de robots, el servicio de orquestación NVIDIA OSMO para ejecutar cargas de trabajo robóticas de varias etapas y un flujo de trabajo de teleoperación habilitado para IA y simulación que permite a los desarrolladores entrenar robots utilizando pequeñas cantidades de datos de demostración humanos.
«La próxima ola de IA es la robótica y uno de los desarrollos más emocionantes son los robots humanoides», dijo Jensen Huang, fundador y CEO de NVIDIA. «Estamos avanzando en toda la pila robótica de NVIDIA, abriendo el acceso para que los desarrolladores y empresas de humanoides de todo el mundo utilicen las plataformas, las bibliotecas de aceleración y los modelos de IA que mejor se adapten a sus necesidades».
Aceleración del desarrollo con NVIDIA NIM y OSMO
Los microservicios de NIM proporcionan contenedores prediseñados, con tecnología de software de inferencia de NVIDIA, que permiten a los desarrolladores reducir los tiempos de implementación de semanas a minutos. Dos nuevos microservicios de IA permitirán a los expertos en robótica mejorar los flujos de trabajo de simulación para la IA física generativa en NVIDIA Isaac Sim, una aplicación de referencia para la simulación robótica basada en la plataforma NVIDIA Omniverse.
El microservicio MimicGen NIM genera datos de movimiento sintéticos basados en datos teleoperados registrados de dispositivos de computación espacial como Apple Vision Pro. El microservicio NIM de Robocasa genera tareas robóticas y entornos listos para la simulación en OpenUSD, un marco universal para desarrollar y colaborar dentro de mundos 3D.
NVIDIA OSMO, ya disponible, es un servicio gestionado nativo de la nube que permite a los usuarios orquestar y escalar flujos de trabajo complejos de desarrollo robótico a través de recursos informáticos distribuidos, ya sea en las instalaciones o en la nube.
OSMO simplifica enormemente los flujos de trabajo de entrenamiento y simulación de robots, reduciendo los tiempos de ciclo de implementación y desarrollo de meses a menos de una semana. Los usuarios pueden visualizar y gestionar una amplia gama de tareas, como la generación de datos sintéticos, el entrenamiento de modelos, la realización de aprendizaje por refuerzo y la implementación de pruebas de software a escala para humanoides, robots móviles autónomos y manipuladores industriales.
Avances en los flujos de trabajo de captura de datos para desarrolladores de robots humanoides
El entrenamiento de modelos básicos para robots humanoides requiere una cantidad increíble de datos. Una forma de capturar datos de demostración humana es mediante el uso de la teleoperación, pero este se está convirtiendo en un proceso cada vez más costoso y largo.
Un flujo de trabajo de referencia de teleoperación habilitado para NVIDIA AI y Omniverse, demostrado en la conferencia de gráficos por computadora SIGGRAPH, permite a los investigadores y desarrolladores de IA generar cantidades masivas de datos sintéticos de movimiento y percepción a partir de una cantidad mínima de demostraciones humanas capturadas de forma remota.
En primer lugar, los desarrolladores utilizan Apple Vision Pro para capturar un pequeño número de demostraciones teleoperadas. A continuación, simulan las grabaciones en NVIDIA Isaac Sim y utilizan el microservicio MimicGen NIM para generar conjuntos de datos sintéticos a partir de las grabaciones.
Los desarrolladores entrenan el modelo de base humanoide del Proyecto GR00T con datos reales y sintéticos, lo que permite a los desarrolladores ahorrar tiempo y reducir costos. A continuación, utilizan el microservicio NIM de Robocasa en Isaac Lab, un marco para el aprendizaje de robots, para generar experiencias que permitan reentrenar el modelo de robot. A lo largo del flujo de trabajo, NVIDIA OSMO asigna sin problemas trabajos informáticos a diferentes recursos, lo que ahorra a los desarrolladores semanas de tareas administrativas.
Fourier, una empresa de plataformas robóticas de propósito general, ve el beneficio de usar la tecnología de simulación para generar datos de entrenamiento de manera sintética.
«El desarrollo de robots humanoides es extremadamente complejo, ya que requiere una cantidad increíble de datos reales, capturados tediosamente del mundo real», dijo Alex Gu, CEO de Fourier. «Las nuevas herramientas de simulación y desarrollo de IA generativa de NVIDIA ayudarán a impulsar y acelerar nuestros flujos de trabajo de desarrollo de modelos».
Ampliación del acceso a las tecnologías de desarrollo humanoide de NVIDIA
NVIDIA proporciona tres plataformas informáticas para facilitar el desarrollo de la robótica humanoide: supercomputadoras NVIDIA AI para entrenar los modelos; NVIDIA Isaac Sim se basó en Omniverse, donde los robots pueden aprender y perfeccionar sus habilidades en mundos simulados; y computadoras robóticas humanoides NVIDIA Jetson Thor para ejecutar los modelos. Los desarrolladores pueden acceder y utilizar todas las plataformas, o parte de ellas, para sus necesidades específicas.
A través de un nuevo Programa de Desarrolladores de Robots Humanoides de NVIDIA, los desarrolladores pueden obtener acceso anticipado a las nuevas ofertas, así como a las últimas versiones de los modelos de base humanoide de propósito general NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor y Project GR00T.
1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra y Skild AI se encuentran entre los primeros en unirse al programa de acceso anticipado.
«Boston Dynamics y NVIDIA tienen una larga historia de estrecha colaboración para ampliar los límites de lo que es posible en robótica», dijo Aaron Saunders, director de tecnología de Boston Dynamics. «Estamos muy emocionados de ver los frutos de este trabajo acelerando la industria en general, y el programa de acceso temprano es una forma fantástica de acceder a la mejor tecnología de su clase».
DisponibilidadLos desarrolladores pueden unirse al Programa de Desarrolladores de Robots Humanoides de NVIDIA ahora para obtener acceso a NVIDIA OSMO e Isaac Lab, y pronto tendrán acceso a los microservicios de NVIDIA NAM.
