NVIDIA presentó la plataforma Jetson como un entorno integrado para construir aplicaciones de inteligencia artificial y robótica en el mundo real, con módulos y kits de desarrollo que pueden trasladarse y utilizarse en aulas, laboratorios y espacios de innovación. La presentación apareció en un video en el que Sarah Guo, fundadora de la empresa de capital de riesgo Conviction y copresentadora del pódcast de inteligencia artificial No Priors, explicó cómo la plataforma combina capacidad computacional y portabilidad.
NVIDIA afirma que los módulos y kits de desarrollo Jetson están destinados a ejecutar robots, máquinas autónomas y proyectos de inteligencia artificial en el borde, con compatibilidad con modelos abiertos avanzados. Además, las herramientas Jetson Device Skills y Jetson BSP Skills permiten a estudiantes, investigadores y desarrolladores utilizar agentes de software para ayudar a escribir y optimizar código, así como a desplegar aplicaciones en el borde.
Jetson Orin Nano Super para los primeros proyectos
NVIDIA presenta la unidad Jetson Orin Nano Super como una vía práctica para los nuevos desarrolladores de robótica, ya que reúne en un pequeño kit de desarrollo capacidades para la inteligencia artificial generativa, la visión por computador, la creación de agentes y la creación de prototipos. Su capacidad de rendimiento de inteligencia artificial alcanza los 67 billones de operaciones por segundo (TOPS).
La publicación muestra varios ejemplos de su uso, entre ellos el modelo SidewalkPilot, que realiza maniobras de forma autónoma en un coche eléctrico diseñado para niños, y el asistente de voz y visión Reachy Mini Jetson Assistant, que funciona localmente en el robot Reachy Mini Lite sin utilizar la nube, claves de interfaces de programación de aplicaciones ni conexión a Internet durante la operación. Otro ejemplo muestra la construcción de un robot basado en inteligencia artificial utilizando el modelo de pesos abiertos Mistral.
Jetson AGX Orin para trabajos más complejos
La capacidad de Jetson AGX Orin alcanza los 275 billones de operaciones de inteligencia artificial por segundo, y está dirigida a proyectos avanzados de robótica, máquinas autónomas e investigación aplicada. Según NVIDIA, puede utilizarse en visión por computador, inteligencia artificial generativa, navegación autónoma y automatización industrial.
Entre los ejemplos mencionados por la empresa se encuentra una interfaz web para transmitir en tiempo real la inferencia de un modelo de visión y lenguaje mediante una señal de cámara, además del sistema SMoRes, desarrollado por un equipo de robótica de la Universidad Carnegie Mellon para crear un mapa tridimensional del entorno y buscar supervivientes en escenarios de rescate en los que el tiempo es crítico.
Jetson AGX Thor para cargas de trabajo mayores
Jetson AGX Thor está dirigida a la próxima generación de robots humanoides y sistemas autónomos que necesitan inferencia avanzada en tiempo real en el borde. La unidad ofrece hasta 2070 teraflops de capacidad de inteligencia artificial según el estándar FP4, además de 128 gigabytes de memoria.
NVIDIA presenta la experiencia Matcha Bot, realizada por el equipo SIGRobotics de la Universidad de Illinois Urbana-Champaign, utilizando dos brazos robóticos que ejecutan el modelo NVIDIA Isaac GR00T N1.5 para preparar matcha de forma autónoma. También presenta la experiencia Multimodal AI Studio, un entorno de desarrollo que combina entradas de visión, audio y lenguaje para realizar experimentos de inteligencia artificial multimodal en el borde.
La empresa señala una serie de tres transmisiones en directo de carácter educativo para ejecutar inteligencia artificial generativa, construir agentes de control de brazos y utilizar modelos de visión y lenguaje, así como modelos de visión, lenguaje y acción, en aplicaciones de inteligencia artificial física sobre Jetson.