NVIDIA amplía su plataforma de robótica para enfrentar el aumento de la IA generativa

NVIDIA expande su plataforma de robótica para hacer frente al creciente panorama de la IA generativa

Modelos generativos de IA potentes y API y microservicios nativos de la nube están llegando al límite.

La IA generativa está llevando el poder de los modelos transformadores y los grandes modelos de lenguaje a prácticamente todas las industrias. Ese alcance incluye ahora áreas que tocan el límite, la robótica y los sistemas logísticos: detección de defectos, seguimiento de activos en tiempo real, planificación y navegación autónomas, interacciones humano-robot y más.

NVIDIA anunció hoy importantes expansiones a dos frameworks en la plataforma NVIDIA Jetson para IA en el límite y robótica: el framework de robótica NVIDIA Isaac ROS ha entrado en disponibilidad general, y la expansión NVIDIA Metropolis en Jetson está por venir.

Para acelerar el desarrollo despliegues de aplicaciones de IA en el límite, NVIDIA también ha creado un Laboratorio de IA generativa Jetson para que desarrolladores lo utilicen con los últimos modelos de IA generativa de código abierto.

• La mano biónica se integra con los nervios, huesos y músculos de la mujer
• Microsoft redefine los 7 TB de ‘Project Silica’ como solución de almacenamiento en la nube usando vidrio como medio
• Métodos de Ciencia de Datos Impulsan el Éxito Empresarial

Más de 1.2 millones de desarrolladores y más de 10,000 clientes han elegido la IA de NVIDIA y la plataforma Jetson, incluyendo Amazon Web Services, Cisco, John Deere, Medtronic, Pepsico y Siemens.

Con el rápidamente en evolución panorama de la IA que aborda escenarios cada vez más complicados, los desarrolladores se enfrentan a ciclos de desarrollo más largos para construir aplicaciones de IA para el límite. Reprogramar robots y sistemas de IA sobre la marcha para satisfacer los entornos cambiantes, líneas de fabricación y necesidades de automatización de los clientes lleva tiempo y requiere habilidades expertas.

La IA generativa ofrece aprendizaje sin ejemplos, la capacidad de un modelo de reconocer cosas específicamente no vistas antes en el entrenamiento, con una interfaz de lenguaje natural para simplificar el desarrollo, despliegue y gestión de la IA en el límite.

Transformando el panorama de la IA

La IA generativa mejora drásticamente la facilidad de uso al comprender las indicaciones del lenguaje humano para realizar cambios en el modelo. Esos modelos de IA son más flexibles para detectar, segmentar, rastrear, buscar e incluso reprogramar, y ayudan a superar a los modelos tradicionales basados en redes neuronales convolucionales.

Se espera que la IA generativa añada $10.5 mil millones en ingresos para operaciones de fabricación en todo el mundo para 2033, según ABI Research.

“La IA generativa acelerará significativamente los despliegues de IA en el límite con una mejor generalización, facilidad de uso y mayor precisión de lo que era posible anteriormente”, dijo Deepu Talla, vicepresidente de computación embebida y de límite en NVIDIA. “Esta expansión de software más grande jamás realizada de nuestros frameworks Metropolis e Isaac en Jetson, combinada con el poder de los modelos transformadores y la IA generativa, aborda esta necesidad”.

Desarrollando con IA generativa en el límite

El Laboratorio de IA generativa Jetson proporciona a los desarrolladores acceso a herramientas optimizadas y tutoriales para implementar LLMs de código abierto, modelos de difusión para generar imágenes interactivas sorprendentes, modelos de lenguaje visual (VLMs) y transformadores visuales (ViTs) que combinan IA visual y procesamiento de lenguaje natural para proporcionar una comprensión integral de la escena.

Los desarrolladores también pueden usar el Kit de herramientas TAO de NVIDIA para crear modelos de IA eficientes y precisos para aplicaciones en el límite. TAO proporciona una interfaz de baja codificación para ajustar y optimizar modelos de IA visual, incluyendo ViT y modelos fundamentales de visión. También pueden personalizar y ajustar modelos fundamentales como NVIDIA NV-DINOv2 o modelos públicos como OpenCLIP para crear modelos de IA visual altamente precisos con muy pocos datos. TAO ahora también incluye VisualChangeNet, un nuevo modelo basado en transformadores para inspección de defectos.

Aprovechando los nuevos frameworks de Metropolis e Isaac

NVIDIA Metropolis facilita y abarata la adopción de soluciones de primer nivel habilitadas por IA visual para mejorar problemas críticos de eficiencia operativa y seguridad. La plataforma ofrece una colección de potentes interfaces de programación de aplicaciones y microservicios para que los desarrolladores desarrollen rápidamente aplicaciones complejas basadas en visión.

Más de 1,000 empresas, incluyendo BMW Group, Pepsico, Kroger, Tyson Foods, Infosys y Siemens, están utilizando las herramientas para desarrolladores de NVIDIA Metropolis para resolver desafíos de Internet de las cosas, procesamiento de sensores y operativos con IA de visión, y la tasa de adopción se está acelerando. Las herramientas han sido descargadas más de 1 millón de veces por aquellos que buscan construir aplicaciones de IA de visión.

Para ayudar a los desarrolladores a construir y desplegar rápidamente aplicaciones de IA de visión escalables, un conjunto expandido de APIs y microservicios de Metropolis en NVIDIA Jetson estará disponible antes de fin de año.

Cientos de clientes utilizan la plataforma NVIDIA Isaac para desarrollar soluciones de robótica de alto rendimiento en diversos campos, incluyendo agricultura, automatización de almacenes, entrega de última milla y robótica de servicio, entre otros.

En ROSCon 2023, NVIDIA anunció importantes mejoras en las capacidades de percepción y simulación con las nuevas versiones del software Isaac ROS e Isaac Sim. Basado en el ampliamente adoptado Robot Operating System (ROS) de código abierto, Isaac ROS brinda percepción a la automatización, proporcionando ojos y oídos a las cosas que se mueven. Al aprovechar el poder de los GEMs acelerados por GPU, incluyendo odometría visual, percepción de profundidad, reconstrucción de escenas en 3D, localización y planificación, los desarrolladores de robótica obtienen las herramientas necesarias para diseñar rápidamente soluciones robóticas adaptadas para una amplia gama de aplicaciones.

Isaac ROS ha alcanzado el estado de producción con el último lanzamiento de Isaac ROS 2.0, permitiendo a los desarrolladores crear y llevar soluciones de robótica de alto rendimiento al mercado con Jetson.

“ROS sigue creciendo y evolucionando para proporcionar software de código abierto para toda la comunidad de robótica”, dijo Geoff Biggs, CTO de la Open Source Robotics Foundation. “Los nuevos paquetes precompilados ROS 2 de NVIDIA, lanzados con esta versión, acelerarán ese crecimiento al hacer que ROS 2 esté disponible para la vasta comunidad de desarrolladores de NVIDIA Jetson”.

Entregando Nuevos Flujos de Trabajo de IA de Referencia

Desarrollar una solución de IA lista para producción implica optimizar el desarrollo y entrenamiento de modelos de IA adaptados a casos de uso específicos, implementar características robustas de seguridad en la plataforma, orquestar la aplicación, gestionar flotas, establecer una comunicación fluida entre el borde y la nube, entre otras cosas.

NVIDIA anunció una colección curada de flujos de trabajo de referencia de IA basados en los marcos Metropolis e Isaac que permiten a los desarrolladores adoptar rápidamente todo el flujo de trabajo o integrar selectivamente componentes individuales, lo que resulta en reducciones sustanciales tanto en el tiempo de desarrollo como en los costos. Los tres flujos de trabajo de IA distintos incluyen: grabación de video en red, inspección óptica automática y robot móvil autónomo.

“NVIDIA Jetson, con su amplia y diversa base de usuarios y ecosistema de socios, ha ayudado a impulsar una revolución en la robótica e IA en el borde”, dijo Jim McGregor, analista principal de Tirias Research. “A medida que los requisitos de las aplicaciones se vuelven cada vez más complejos, necesitamos un cambio fundamental hacia plataformas que simplifiquen y aceleren la creación de implementaciones en el borde. Esta importante expansión de software por parte de NVIDIA brinda a los desarrolladores acceso a nuevos modelos multi-sensoriales y capacidades de IA generativa”.

Más Novedades en el Horizonte

NVIDIA anunció una colección de servicios del sistema que son capacidades fundamentales que todo desarrollador requiere al construir soluciones de IA en el borde. Estos servicios simplificarán la integración en flujos de trabajo y evitarán a los desarrolladores la ardua tarea de construirlos desde cero.

Se espera que el nuevo NVIDIA JetPack 6, esté disponible antes de fin de año, empodere a los desarrolladores de IA para mantenerse a la vanguardia de la computación sin necesidad de una actualización completa de Jetson Linux, acelerando sustancialmente los plazos de desarrollo y liberándolos de las dependencias de Jetson Linux. JetPack 6 también utilizará los esfuerzos colaborativos con socios de distribución de Linux para expandir el horizonte de opciones de distribuciones basadas en Linux, incluyendo Ubuntu Optimizado y Certificado de Canonical, Wind River Linux, Concurrent Real-Time Redhawk Linux y varias distribuciones basadas en Yocto.

Ecosistema de Socios se Beneficia de la Expansión de la Plataforma

El ecosistema de socios de Jetson brinda una amplia gama de soporte, desde hardware, software de IA y servicios de diseño de aplicaciones hasta sensores, conectividad y herramientas de desarrollo. Estos innovadores del NVIDIA Partner Network desempeñan un papel vital en proporcionar los componentes y subsistemas para muchos productos que se venden en el mercado.

El último lanzamiento permite a los socios de Jetson acelerar su tiempo al mercado y ampliar su base de clientes adoptando IA con mayor rendimiento y capacidades.

Los socios proveedores de software independientes también podrán ampliar sus ofertas para Jetson.

Únete a nosotros el martes 7 de noviembre a las 9 a.m. PT para el seminario web Bringing Generative AI to Life with NVIDIA Jetson, donde expertos técnicos profundizarán en las noticias anunciadas aquí, incluyendo APIs aceleradas y métodos de cuantización para implementar LLMs y VLMs en Jetson, optimizando los transformadores de visión con TensorRT, y más.

Inscríbete aquí para obtener acceso anticipado a NVIDIA Metropolis.

 

 

 

 

 

 

 

We will continue to update Zepes; if you have any questions or suggestions, please contact us!