成都创新中心团队发布全国首个机器人多模态模型

8月12日，成都人形机器人创新中心发布最新研发成果：中国首个机器人多模态模型RRMM（Raydiculous Robot Multimodal Model）及双臂协作系统RTACS（Raydiculous Two-Arm Cooperation System）。多模态模型（RRMM）能使机器人理解推理抽象的语义指令，并调度双臂协作系统（RTACS）执行任务。目前仅OpenAI等国外头部企业发布类似成果，这标志着成都人形机器人创新中心在我国多模态模型应用于人形机器人领域的率先突破，使“AI 物理化”进程加速，也让人形机器人从“预设摆拍”“遥控操作”进化到拥有更强的“大脑”和自主执行能力。

据悉，多模态应用于人形机器人领域，使人形机器人能融合图像、语义、力感知、环境感知等多种因素，综合判断、生成任务并执行任务，是人形机器人具有自主思考能力的关键核心技术。

成都人形机器人创新中心发布的相关资料显示，语义指令有相对明确的将水果和非水果、饮料和非饮料进行区分和分拣，也有相对抽象的将圆柱体和长方体物体进行区分和分拣，还有比较抽象的把可食用和不可食用物品进行区分和分拣，完成以上任务需要机器人通过多模态模型自主对所有物品进行提取归纳，特别是对多个相似瓶子形状的物体，需进一步通过瓶身包装上的文字、图片等要素综合判断其是否为可食用物，而非化妆品、洗涤剂等非食用瓶装物，最终完成任务。

当前，以成都人形机器人创新中心为代表的成都人工智能与机器人企业加快进行关键核心技术攻关，促进成都人工智能与机器人成果转化及产业化。成都也将按照《成都市进一步促进人工智能产业高质量发展的若干政策措施》《成都市人工智能产业高质量发展三年行动计划（2024—2026年）》等相关政策，以平台建设带动技术创新，以数据驱动拓展场景应用，以算力布局支撑产业发展，以要素聚集优化产业生态，助力成都打造创新活跃、规模领先、生态完备的人工智能产业发展高地。