Dexbotic - La máquina de la Fuerza Espíritu de código abierto inteligencia corporal modelo VLA plataforma de servicios de investigación de ventanilla única.

¿Qué es Dexbotic?

Dexbotic es un modelo de código abierto visual-lingüístico-acción (VLA) de plataforma de servicios de investigación de ventanilla única para la inteligencia incorporada por Dexmal, que resuelve los problemas de fragmentación y baja eficiencia en la investigación de la inteligencia incorporada. Basado en PyTorch, Dexbotic proporciona una solución integral para la investigación y el desarrollo en el campo de la inteligencia corporal. La principal ventaja de Dexbotic radica en su marco modular unificado, que es compatible con una gran variedad de interfaces de modelos de gran lenguaje, integra módulos de manipulación y navegación corporal, y se reserva la capacidad de expandirse, proporcionando una base arquitectónica para escenarios de tareas más complejas en el futuro. Dexbotic proporciona un modelo base de preentrenamiento de alto rendimiento, optimizado para muchos algoritmos convencionales, que mejora significativamente el rendimiento en la simulación y en las tareas reales. Dexbotic admite el entrenamiento local y en la nube integrado, se adapta a diversos entornos de investigación y desarrollo, y proporciona una gama completa de soporte para el entrenamiento y el despliegue de robots, cubriendo todo el proceso desde la verificación de la simulación hasta el aterrizaje del robot real.

Características de Dexbotic

• Marco modular unificado del VLADexbotic se basa en un modelo de acción de lenguaje visual, compatible con las principales interfaces de modelos de lenguaje de gran tamaño, integrado con módulos de manipulación corporal y navegación, y reservado para capacidades de ampliación, sentando las bases arquitectónicas para la futura realización de escenarios de misión complejos, como el control de todo el cuerpo.
• Modelo base preentrenado de alto rendimientoEl modelo de preentrenamiento proporciona múltiples modelos preentrenados que rinden mejor en simulación y tareas reales para algoritmos convencionales como Pi0, CogACT, etc., lo que reduce eficazmente los costes de entrenamiento.
• Marco de desarrollo orientado a la experimentaciónAdopta la arquitectura de sistema de "configuración jerárquica + registro de fábrica + distribución de entrada", que se ajusta al principio de apertura y cierre de software, y ayuda a los usuarios a cambiar rápidamente de tareas, modelos y parámetros, para realizar una iteración eficiente de los experimentos.
• Formación sobre integración local y en la nubeEstá totalmente adaptado a diversos entornos de I+D, ya que admite la formación distribuida a gran escala en plataformas en la nube como AliCloud y Volcano Engine, además de ejecutarse de forma eficiente en máquinas locales equipadas con RTX 4090 y otras tarjetas gráficas de consumo.
• Formación e implantación de la robótica All-linksLa empresa proporciona interfaces de datos normalizadas y scripts de despliegue comunes para las principales plataformas robóticas, como UR5, Franka, ALOHA, etc., que abarcan todo el proceso, desde la validación de la simulación hasta el aterrizaje sin problemas de robots reales.
• Soporte de hardware de código abiertoDexmal Force Spirit Machine ha lanzado su primer producto de hardware de código abierto, Dexbotic Open Source - W1 (DOS-W1), para contribuir a la investigación y el desarrollo de la inteligencia incorporada.
• Mejora del rendimientoEl modelo preentrenado de Dexbotic ofrece importantes mejoras de rendimiento en varios simuladores de uso generalizado y en tareas del mundo físico real. Por ejemplo, la versión de Dexbotic (DB-*) supera significativamente al modelo original en las cuatro tareas probadas por SimplerEnv.

Puntos fuertes de Dexbotic

• Marco modular unificado del VLAToma como núcleo el modelo de acción de lenguaje visual, es compatible con la interfaz del modelo de lenguaje de gran tamaño de la corriente principal, integra el módulo de funcionamiento y navegación del cuerpo y se reserva la capacidad de ampliación, sentando las bases arquitectónicas para la futura realización del control de todo el cuerpo y otros escenarios de misiones complejas.
• Modelo base preentrenado de alto rendimientoEl modelo de preentrenamiento proporciona múltiples modelos preentrenados que rinden mejor en simulación y tareas reales para algoritmos convencionales como Pi0, CogACT, etc., lo que reduce eficazmente los costes de entrenamiento.
• Marco de desarrollo orientado a la experimentaciónAdopta la arquitectura de sistema de "configuración jerárquica + registro de fábrica + distribución de entrada", que se ajusta al principio de apertura y cierre de software, y ayuda a los usuarios a cambiar rápidamente de tareas, modelos y parámetros, para realizar una iteración eficiente de los experimentos.
• Formación sobre integración local y en la nubeEstá totalmente adaptado a diversos entornos de I+D, ya que admite la formación distribuida a gran escala en plataformas en la nube como AliCloud y Volcano Engine, además de ejecutarse de forma eficiente en máquinas locales equipadas con RTX 4090 y otras tarjetas gráficas de consumo.
• Formación e implantación de la robótica All-linksLa empresa proporciona interfaces de datos normalizadas y scripts de despliegue comunes para las principales plataformas robóticas, como UR5, Franka, ALOHA, etc., que abarcan todo el proceso, desde la validación de la simulación hasta el aterrizaje sin problemas de robots reales.

¿Cuál es la página web oficial de Dexbotic?

• Página web del proyecto:: https://dexbotic.com/.
• Repositorio GitHub:: https://github.com/Dexmal/dexbotic.
• Biblioteca de modelos de caras abrazadas:: https://huggingface.co/collections/Dexmal/dexbotic-68f20493f6808a776bfc9fc4.
• Informe técnico:: https://dexbotic.com/Dexbotic_Tech_Report.pdf.

Para quién es Dexbotic

• Los investigadores del campo de la inteligencia incorporadaDexbotic proporciona una infraestructura de investigación estandarizada y modular que permite a los investigadores realizar experimentos con rapidez, validar nuevos algoritmos y arquitecturas de modelos y acelerar el progreso de la investigación en inteligencia incorporada.
• Desarrollador de robóticaPara los técnicos que trabajan en el desarrollo de la robótica, Dexbotic proporciona un soporte de enlace completo desde la simulación hasta el despliegue real del robot, y puede utilizarse para desarrollar y optimizar las funciones de visión, habla y control de movimiento de un robot.
• Ingeniero de algoritmos de inteligencia artificial: Proporciona a los ingenieros algorítmicos modelos preentrenados de alto rendimiento y un marco de experimentación flexible para facilitar su optimización e innovación algorítmicas y explorar nuevos escenarios de aplicación.
• Estudiantes de centros de enseñanza superior e investigaciónLa naturaleza de código abierto de Dexbotic y su detallada documentación lo convierten en una herramienta ideal para que los estudiantes de universidades e institutos de investigación estudien e investiguen la inteligencia incorporada, y para ayudar a formar a profesionales en campos relacionados.
• Entusiastas interesados en la inteligencia corporalDexbotic ofrece un marco accesible y una gran cantidad de recursos para ayudar a los entusiastas interesados en la inteligencia corporal, pero que carecen de formación profesional, a iniciarse y profundizar en este campo.