Xiaomi presenta Xiaomi-Robotics-U0, su primer robot generativo unificado

hace 3 meses · Actualizado hace 3 meses

Xiaomi introdujo un modelo base multimodal de 38 mil millones de parámetros que integra generación de datos e interacción robótica de forma unificada.

El núcleo FlashAR+ acelera la inferencia 83 veces, permitiendo generación de escenas complejas y aumento de datos que mejora tareas robóticas en más del 25 % en diferentes entornos.

Xiaomi presentó su avance más reciente en IA integrada con Xiaomi-Robotics-U0, un modelo base multimodal de 38 mil millones de parámetros. Es el primer enfoque generativo unificado que combina generación de datos e interacción robótica.

Innovaciones técnicas detrás de Xiaomi-Robotics-U0

Este proyecto busca revolucionar la comprensión de la escena y la interacción de los robots, al fusionar varias tareas de generación en un único sistema versátil. Entre sus rasgos destacan:

Generación de escenas incorporadas: partiendo de descripciones textuales, se crean observaciones robóticas desde varias perspectivas para diferentes versiones del robot. El entorno puede ser un escritorio, una cocina, un almacén o un entorno abierto; basta con indicar, por voz, la escena deseada.

Transferencia encarnada: facilita trasladar trayectorias de robots a entornos nuevos. Se adapta a iluminación, fondo, materiales de la mesa, objetos y estilos de trabajo, preservando la postura del brazo y el diseño global de la escena para generalizar el entorno.

Creación de videos de interacción con robots: a partir de observaciones iniciales e instrucciones operativas, genera secuencias visuales posteriores para asegurar continuidad de acción y coherencia física, logrando una generalización cero en distintas escenas.

Edición universal de texto a imagen e imágenes: mantiene capacidades de generación y edición, a la vez que transfiere conocimiento visual obtenido en Internet a tareas de IA integradas, aumentando realismo y adaptabilidad.

Además, el sistema puede ampliar datos existentes manipulando objetos, iluminación y fondos, o añadiendo ruido, sin necesidad de costosas recopilaciones del mundo real. También admite crear escenas completamente nuevas, incluso entornos peligrosos o extremos que serían complicados de conseguir con robots físicos.

La técnica de aceleración de inferencia FlashAR+ eleva la eficiencia de generación en un entorno de aproximadamente 83 veces frente a enfoques autorregresivos tradicionales, acelerando su uso en el mundo real y el entrenamiento de IA incorporada. Esto da lugar a un proceso muy controlable y eficiente para generar datos de entrenamiento y mejorar el rendimiento de los sistemas robóticos.

Dispositivos afectados y entorno de software El núcleo de la solución es Xiaomi-Robotics-U0, con 38 mil millones de parámetros, y está disponible de forma abierta para la comunidad académica a través de repositorios en GitHub y HuggingFace, permitiendo su integración en sistemas robóticos que requieren comprensión, generación e interacción visual.

El marco admite la aceleración FlashAR+ para inferencias rápidas, facilitando flujos de trabajo de generación de datos y reduciendo barreras para pruebas en tiempo real.

El impacto esperado va más allá de la academia: una plataforma abierta acelera la adopción de IA incorporada en robótica, fomentando soluciones más seguras y eficientes en múltiples industrias.

Relevancia en el mundo real y confianza el modelo lideró el benchmark WorldArena entre 126 equipos globales, demostrando capacidades de última generación. En escenarios con iluminación o fondos desiguales, su uso para aumentar datos mejora la finalización de tareas en más de un 25% promedio.

Al ser de código abierto, investigadores de todo el mundo pueden incorporar Xiaomi-Robotics-U0 en sus flujos de trabajo, impulsando avances en IA robótica y acelerando la transferencia de resultados entre laboratorios y entornos industriales.

Preguntas frecuentes

¿Xiaomi-Robotics-U0 está disponible para dispositivos robóticos comerciales? Actualmente se ofrece como solución de código abierto para investigación y desarrollo, con posibilidades de integración en soluciones a medida.

¿Cómo mejora FlashAR+ la velocidad de inferencia? Optimiza la generación y ofrece una aceleración sustancial, permitiendo una gran generación de datos y rendimiento en tiempo real.

¿Puede generar comandos de control en tiempo real? El enfoque se centra en generar trayectorias y datos visuales; la integración de control en tiempo real depende de componentes del sistema complementarios.

¿El modelo funciona en distintos tipos de robots? Sí, admite diversos diseños y entornos, facilitando la personalización en múltiples plataformas.

¿Existe alguna relación con HyperOS o HyperConnect? Aunque se trata de un modelo de robótica básico, la integración con estos entornos podría explorarse para futuras sinergias.

La visión estratégica de Xiaomi con Xiaomi-Robotics-U0 es ofrecer un modelo unificado, escalable y eficiente que une generación de datos y inteligencia robótica. Esto fortalece su ecosistema de IA y su compromiso con desarrolladores y usuarios finales.

Gracias por confiar en nosotros y recuerda que puedes seguirnos en nuestras redes sociales tanto en nuestro grupo de ayuda en Telegram, Instagram, Facebook y Twitter para estar al tanto de las últimas noticias y novedades de Xiaomi. Si tienes alguna consulta estaremos encantados de poder ayudarte.

Últimos lanzamientos de la semana en Xiaomi:
Xiaomi 18T and 18T Pro vendran con el MediaTek Dimensity y 200MP
Xiaomi 18T and 18T Pro vendran con el MediaTek Dimensity y 200MP
Xiaomi desarrolla los smartphones 18T y 18T Pro con procesadores Dimensity y cámara Leica de 200 MP, según filtraciones. Su ...
Xiaomi presenta cojín térmico con sensor infrarrojo y espuma con memoria
Xiaomi presenta cojín térmico con sensor infrarrojo y espuma con memoria
Xiaomi ha lanzado una campaña de crowdfunding en Xiaomi Youpin para su nueva Almohada Caliente de Postura, diseñada para mejorar ...
Redmi K100 con pantalla de 6.83 pulgadas y 165Hz para juegos rápidos
Redmi K100 con pantalla de 6.83 pulgadas y 165Hz para juegos rápidos
REDMI ha desvelado los detalles clave de la edición estándar del K100, destacando su enfoque en videojuegos y rendimiento. Su ...

Ana

Soy Ana, mexicana de 28 años que disfruta de la vida al máximo. Desde mi infancia, he sido una entusiasta de la tecnología y disfruto mucho probando productos nuevos y me encanta estudiar sus características.La marca Xiaomi y su ecosistema me ofrecen ese gran abanico de posibilidades!

Subir