●多模态使人形机器人能融合图像、语义、力感知、环境感知等多种因素，综合判断、生成任务并执行任务，是让人形机器人具有自主思考能力的关键核心技术

●标志着成都在我国多模态模型应用于人形机器人领域率先取得突破，进一步加速了“AI物理化”进程，也让人形机器人从“预设摆拍”“遥控操作”进化到拥有更强的“大脑”和自主执行能力

8月12日，成都人形机器人创新中心发布最新研发成果——机器人多模态模型RRMM及双臂协作系统RTACS，该模型能使机器人理解推理抽象的语义指令，并调度双臂协作系统执行任务。

此前，仅OpenAI等国外人工智能头部企业发布了类似成果。此次发布，标志着成都在我国多模态模型应用于人形机器人领域率先取得突破，进一步加速了“AI物理化”进程，也让人形机器人从“预设摆拍”“遥控操作”进化到拥有更强的“大脑”和自主执行能力。

多模态数据协同推理，即能融合两种或两种以上不同感知来源，进行综合推理，并完成复杂任务。

成都人形机器人创新中心相关负责人介绍，多模态应用于人形机器人领域，使人形机器人能融合图像、语义、力感知、环境感知等多种因素，综合判断、生成任务并执行任务，是让人形机器人具有自主思考能力的关键核心技术。

语义指令涉及将对象进行相对明确和相对抽象地区分和分拣，完成这些任务需要机器人通过多模态模型自主对所有物品进行提取归纳。“比如，在对瓶子形状的物体进行可食用和不可食用区分、分拣时，需要通过进一步对瓶身包装上的文字、图片等要素进行综合判断，才能做出准确判断。”成都人形机器人创新中心相关负责人说。

成都人形机器人创新中心是我国中西部地区首个人形机器人创新中心，是四川省人工智能1号创新工程的首个原点项目，致力于研发“真正拥有大脑的人形机器人整机”的人形机器人。