NVIDIA imprime aceleración al desarrollo de la robótica humanoide

Entre las ofertas de la organización, se encuentran los microservicios y entornos de trabajo NVIDIA NIM para la simulación y el aprendizaje de robots, el servicio de orquestación NVIDIA OSMO para ejecutar cargas de trabajo de robótica de múltiples etapas y un flujo de trabajo de tele operación habilitado para IA y simulación que permite a los desarrolladores entrenar robots utilizando pequeñas cantidades de datos de demostración humana. Esta información ha sido publicada recientemente en el portal roboticstomorrow.com.

“La próxima ola de IA es la robótica y uno de los desarrollos más emocionantes son los robots humanoides”, dijo Jensen Huang, fundador y director ejecutivo de NVIDIA. “Estamos avanzando en todo el marco de robótica de NVIDIA, abriendo el acceso para que los desarrolladores y las empresas de todo el mundo utilicen las plataformas, las bibliotecas de aceleración y los modelos de IA que mejor se adapten a sus necesidades”.

Innovación con NVIDIA NIM y OSMO

Los microservicios NIM proporcionan contenedores prediseñados, impulsados ​​por el software de inferencia de NVIDIA, que permiten a los desarrolladores reducir los tiempos de implementación de semanas a minutos. Dos nuevos microservicios de IA permitirán a los especialistas en robótica mejorar los flujos de trabajo de simulación para la IA física generativa en NVIDIA Isaac Sim, una aplicación de referencia para la simulación robótica creada en la plataforma NVIDIA Omniverse.

El microservicio NIM MimicGen genera datos de movimiento sintéticos basados ​​en datos teleoperados registrados desde dispositivos de computación espacial como Apple Vision Pro. El microservicio NIM Robocasa genera tareas de robot y entornos listos para simulación en OpenUSD, un marco universal para desarrollar y colaborar dentro de mundos 3D.

Por su parte, NVIDIA OSMO, disponible ahora, es un servicio administrado nativo de la nube que permite a los usuarios orquestar y escalar flujos de trabajo de desarrollo de robótica complejos en recursos informáticos distribuidos, ya sea en las instalaciones o en la nube.

OSMO simplifica enormemente los flujos de trabajo de simulación y entrenamiento de robots, reduciendo los tiempos de ciclo de implementación y desarrollo de meses a menos de una semana. Los usuarios pueden visualizar y gestionar una variedad de tareas, como generar datos sintéticos, entrenar modelos, realizar aprendizaje de refuerzo e implementar pruebas de software en el circuito a escala para humanoides, robots móviles autónomos y manipuladores industriales.

Flujos de trabajo de captura de datos avanzados para desarrolladores de robots humanoides

El entrenamiento de modelos básicos para robots humanoides requiere una increíble cantidad de datos. Una forma de capturar datos de demostración humana es mediante la teleoperación, pero este se está convirtiendo en un proceso cada vez más costoso.

Un flujo de trabajo de referencia de tele operación habilitado por NVIDIA AI y Omniverse, demostrado en la conferencia SIGGRAPH, permite a los investigadores y desarrolladores de IA generar cantidades masivas de datos sintéticos de movimiento y percepción a partir de una cantidad mínima de demostraciones humanas capturadas de forma remota.

Primero, los desarrolladores usan Apple Vision Pro para capturar una pequeña cantidad de demostraciones teleoperadas. Luego, simulan las grabaciones en NVIDIA Isaac Sim y usan el microservicio MimicGen NIM para generar conjuntos de datos sintéticos a partir de las grabaciones.

Los desarrolladores entrenan el modelo básico humanoide Project GR00T con datos reales y sintéticos, lo que les permite ahorrar tiempo y reducir costes. Luego, usan el microservicio Robocasa NIM en Isaac Lab, un marco para el aprendizaje de robots, para generar experiencias y para volver a entrenar el modelo de robot. Durante todo el flujo de trabajo, NVIDIA OSMO asigna sin problemas tareas informáticas a diferentes recursos, lo que permite a los desarrolladores ahorrar semanas de tareas administrativas.

Fourier, una empresa de plataformas robóticas de uso general, ve el beneficio de utilizar tecnología de simulación para generar datos de entrenamiento de forma sintética.

“El desarrollo de robots humanoides es extremadamente complejo: requiere una increíble cantidad de datos reales, capturados de forma tediosa del mundo real”, afirmó Alex Gu, director ejecutivo de Fourier. “Las nuevas herramientas de simulación y desarrollo de IA generativa de NVIDIA ayudarán a impulsar y acelerar nuestros flujos de trabajo de desarrollo de modelos”.

Ampliación del acceso a las tecnologías de NVIDIA para desarrolladores de humanoides

NVIDIA ofrece tres plataformas informáticas para facilitar el desarrollo de robótica humanoide: las supercomputadoras de IA de NVIDIA para entrenar los modelos; NVIDIA Isaac Sim, construida sobre Omniverse, donde los robots pueden aprender y refinar sus habilidades en mundos simulados y las computadoras de robots humanoides NVIDIA Jetson Thor para ejecutar los modelos. Los desarrolladores pueden acceder y utilizar todas las plataformas (o parte de ellas) para sus necesidades específicas.

A través de un nuevo programa para desarrolladores de robots humanoides de NVIDIA, los desarrolladores pueden obtener acceso anticipado a las nuevas ofertas, así como a los últimos lanzamientos de los modelos humanoides básicos de uso general NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor y Project GR00T.

1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra y Skild AI se encuentran entre los primeros en unirse al programa de acceso anticipado.

“Boston Dynamics y NVIDIA tienen una larga historia de estrecha colaboración para ampliar los límites de lo que es posible en robótica”, dijo Aaron Saunders, director de tecnología de Boston Dynamics. “Estamos encantados de ver los frutos de este trabajo que acelera la industria en general, y el programa de acceso anticipado es una manera fantástica de acceder a la mejor tecnología de su clase”.