—— 汽车产业链供需平台 ——
下载盖世APP

首页 > 资讯 > 智能网联 > 小米机器人开源VLA模型Xiaomi-Robotics-0

小米机器人开源VLA模型Xiaomi-Robotics-0

盖世汽车 Garcia 2026-02-12 14:05:47
分享

2月12日,小米雷军通过微博披露,小米机器人团队正式开源Xiaomi-Robotics-0,一个47亿参数的具身智能VLA模型。该模型采用Mixture-of-Transformers混合架构,在LIBERO、CALVIN和SimplerEnv三大仿真测试集的所有Benchmark中,与30个对比模型相比均取得当前最优成绩。

00750fiJly1ia6yhcrszoj30zk0jztal.jpg

图片来源:小米技术

Xiaomi-Robotics-0的核心在于通过MoT架构将视觉语言大模型与多层Diffusion Transformer解耦。VLM负责处理模糊指令与空间关系认知,DiT则通过流匹配生成高频、连续的Action Chunk。这种设计让模型在消费级显卡上即可完成实时推理,解决了现有VLA模型因推理延迟导致真机“动作断层”的共性痛点。

00750fiJly4ia6rbtptrcj30u00eb0z3.png

模型架构及训练方法:(a) VLM多模态与动作混合预训练;(b) DiT专项预训练;(c) 目标任务后训练;图片来源:小米技术

训练策略分为两个阶段。跨模态预训练阶段引入Action Proposal机制,强制VLM在图像理解的同时预测多模态动作分布,完成特征空间与动作空间的对齐;随后冻结VLM,专项训练DiT从噪声中恢复精准动作序列。后训练阶段的核心是异步推理模式,使模型推理与机器人运行脱离同步约束。同时,Clean Action Prefix通过引入上一时刻动作输入来保证轨迹连续性,Λ-shape Attention Mask则强制模型优先响应当前视觉反馈,提升面对环境扰动时的反应敏捷性。

在真机部署测试中,搭载该模型的双臂机器人在积木拆解、叠毛巾等长时序、高自由度任务中展现出稳定的手眼协调能力,同时保留了VLM原有的物体检测与视觉问答能力。项目代码、模型权重与技术文档目前已同步上线GitHub和Hugging Face。

关注我们更多服务平台

添加社区公众号、小程序, APP, 随时随地云办公尽在掌握

联系我们
盖世汽车社区 盖世汽车中文资讯 盖世汽车会议 盖世汽车研究院 盖世大学堂 Automotive News Global Auto Sources 友情链接 Copyright@2007-2022 All Right Reserved.盖世汽车版权所有
增值电信业务经营许可证 沪B2-2007118 沪ICP备07023350号 沪公网安备 31011402009699号 未经授权禁止复制或建立影像,否则将追究法律责任。