8月12日,成都人形机器人创新中心(以下简称“创新中心”)在四川成都发布了我国首个机器人多模态模型以及双臂协作系统。该模型能够使机器人理解、推理抽象的语义指令,并调度双臂协作系统执行任务。
多模态数据协同推理是指融合两种或两种以上不同感知来源,进行综合推理,并完成复杂任务的过程。创新中心研究人员将多模态应用于人形机器人领域,使机器人融合图像、语义、力感知、环境感知等多种因素,综合判断、生成任务并执行。这是人形机器人具有自主思考能力的关键核心技术。
创新中心董事长张睿睿介绍,语义指令包括相对明确地将饮料和非饮料进行区分和分拣,也包括相对抽象地将圆柱体和长方体物体、可食用和不可食用物品进行区分和分拣。完成以上任务,需要机器人通过多模态模型自主对所有物品进行提取归纳。特别是对多个相似瓶子形状的物体,机器人需进一步通过瓶身包装上的文字、图片等要素综合判断其是否为可食用物品而非化妆品等非食用瓶装物,才能完成任务。
“多模态模型的发布,不仅加速了‘AI物理化’的进程,也让人形机器人从‘预设摆拍’‘遥控操作’进化到拥有更强的‘大脑’和自主执行能力。”张睿睿表示,下一步,创新中心将继续深化技术研发,不断优化多模态模型与双臂协作系统的融合应用,提升人形机器人在复杂环境中的感知、决策与执行能力。
8月12日,成都人形机器人创新中心(以下简称“创新中心”)在四川成都发布了我国首个机器人多模态模型以及双臂协作系统。该模型能够使机器人理解、推理抽象的语义指令,并调度双臂协作系统执行任务。
多模态数据协同推理是指融合两种或两种以上不同感知来源,进行综合推理,并完成复杂任务的过程。创新中心研究人员将多模态应用于人形机器人领域,使机器人融合图像、语义、力感知、环境感知等多种因素,综合判断、生成任务并执行。这是人形机器人具有自主思考能力的关键核心技术。
创新中心董事长张睿睿介绍,语义指令包括相对明确地将饮料和非饮料进行区分和分拣,也包括相对抽象地将圆柱体和长方体物体、可食用和不可食用物品进行区分和分拣。完成以上任务,需要机器人通过多模态模型自主对所有物品进行提取归纳。特别是对多个相似瓶子形状的物体,机器人需进一步通过瓶身包装上的文字、图片等要素综合判断其是否为可食用物品而非化妆品等非食用瓶装物,才能完成任务。
“多模态模型的发布,不仅加速了‘AI物理化’的进程,也让人形机器人从‘预设摆拍’‘遥控操作’进化到拥有更强的‘大脑’和自主执行能力。”张睿睿表示,下一步,创新中心将继续深化技术研发,不断优化多模态模型与双臂协作系统的融合应用,提升人形机器人在复杂环境中的感知、决策与执行能力。
3月21日是世界睡眠日,中国主题为“健康睡眠 人人共享”。近日发布的《2023年中国居民睡眠白皮书》显示,我国居民平均睡眠时长6.75小时,平均在零点后入睡,夜间睡眠时长普遍偏短。你是否有睡眠困扰 3月21日记者从中国科学技术大学获悉,该校物理学院张斗国教授课题组,提出并实现了一种基于矢量光场调控原理的动量空间偏振滤波器件。科研人员将该滤波器件安装于传统无标记光学显微镜的出射端, 所谓香喷喷的婴儿,到底是源于人们的爱意,还是说确有其香?《通讯·化学》21日一项小型研究首次分析了婴儿和青少年体味化学组成的差异。研究显示,有两种较难闻的化合物仅在青少年体味样本中 在日常生活中,隧道可以帮助人们翻山越岭。在植物细胞内,当内部物质穿过细胞膜时,往往也会通过类似的“隧道”。记者从中国科学技术大学获悉,该校孙林峰团队在第六大植物激素——油菜素 据英国《自然》周刊网站3月19日报道,研究人员首次利用生成式人工智能(AI)制造出全新抗体。报道称,本周生物学预印本资料库中的一份预印本报告的原理验证研究,提高了将“AI指导的蛋白质设计引入治 3月22日记者获悉,中国移动北京公司(北京移动)已于近日在北京亦庄高级别自动驾驶示范区永昌路段完成5G-A网络精品覆盖。这也是北京首条同时部署了5G-A网络和车网算力协同技术的车联网试验道路,为 。本文链接:我国首个机器人多模态模型及双臂协作系统面世http://www.sushuapos.com/show-2-7953-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 中国海油勘探开发数据湖平台二期启用
下一篇: 用微生物修复岩土文物