央媒看四川 | 我国首个机器人多模态模型及双臂协作系统成都面世

2024-08-13 12:56:16 

科技日报成都8月12日电 (刘侠 记者滕继濮)12日,成都人形机器人创新中心(以下简称“创新中心”)在四川成都发布了我国首个机器人多模态模型以及双臂协作系统。该模型能够使机器人理解、推理抽象的语义指令,并调度双臂协作系统执行任务。

多模态数据协同推理是指融合两种或两种以上不同感知来源,进行综合推理,并完成复杂任务的过程。创新中心研究人员将多模态应用于人形机器人领域,使机器人融合图像、语义、力感知、环境感知等多种因素,综合判断、生成任务并执行。这是人形机器人具有自主思考能力的关键核心技术。

创新中心董事长张睿睿介绍,语义指令包括相对明确地将饮料和非饮料进行区分和分拣,也包括相对抽象地将圆柱体和长方体物体、可食用和不可食用物品进行区分和分拣。完成以上任务,需要机器人通过多模态模型自主对所有物品进行提取归纳。特别是对多个相似瓶子形状的物体,机器人需进一步通过瓶身包装上的文字、图片等要素综合判断其是否为可食用物品而非化妆品等非食用瓶装物,才能完成任务。

“多模态模型的发布,不仅加速了‘AI物理化’的进程,也让人形机器人从‘预设摆拍’‘遥控操作’进化到拥有更强的‘大脑’和自主执行能力。”张睿睿表示,下一步,创新中心将继续深化技术研发,不断优化多模态模型与双臂协作系统的融合应用,提升人形机器人在复杂环境中的感知、决策与执行能力。

来源:科技日报


热门评论
打开成都高新查看更多评论
推荐新闻
央媒看四川 | 我国首个机器人多模态模型及双臂协作系统成都面世 2024-08-13 12:56:16
央媒看四川 | 四川推动欠发达县域高质量建设现代农业园区 2024-08-13 12:55:50
央媒看四川丨来月城,寻一缕暑日清凉 2024-08-13 12:55:22
走进科技成果转化一线|这个中试平台不一般 2024-08-12 20:09:20
最新调查:泸州现存36座清代惜字塔 2024-08-12 20:06:20
达州:“稻种”变致富“金种”!3万亩制种水稻开镰收割 2024-08-12 20:05:23
南充高坪:“大数据+人工智能” 让市场监管“飞”上“云端” 2024-08-12 20:04:50
达州⇌梁平低空航线试验飞行成功 2024-08-12 20:04:05
上半年增长16.7%!绵阳汽车产业发展势头强劲 2024-08-12 20:03:36
甘孜色达:探索土地入股新模式,牧民的“旅游饭”越吃越香 2024-08-12 20:03:06
没看够!下载个成都高新呗!
成都高新 有态度的新闻 立即打开 ×