近日，黑龙江大学本科生创业团队的参赛项目“传情达意——让机器手语翻译不再冰冷”凭借其独特的创意和系列技术突破，在第十四届“挑战杯”秦创原中国大学生创业计划竞赛中荣获金奖。这个项目研发了全国首个融合面部肌电信号的手语翻译技术和相关AR眼镜设备，不仅让手语被“听到”，还能让声音被“看见”。
团队通过调研发现，目前助聋设备普及率只有5%，且普遍价格高，适配场景少，准确率较低。为此，团队决定在助聋设备方面做进一步探索。他们历时两年，研发出样品并进行完善，目前已与徐州市特殊教育中心等机构签订购买意向书。
“我们的创新产品主要由臂环和AR眼镜两部分组成。”项目负责人、黑龙江大学电子工程学院朱铭熙说，臂环通过收集并识别聋哑人做手语时的肌电信号，将其转化为语音，实现了手语的“听觉化”。在这一过程中，电极贴片起到了关键作用。它们能够捕捉肢体动作的细微变化，将其转化为特征向量，与预先建立的手语向量数据库进行比对，从而准确识别出手语的含义。
然而，仅有臂环的手语识别并不足以达到精准翻译的目标。朱铭熙介绍：“手语中面部表情所占的权重不低于40%，而人的情绪主要通过眉毛和面颊两侧的肌肉来体现。”
为了提升准确率，团队进一步提升了设备精准捕捉表情、理解情感的能力。他们将电极贴片安装在AR眼镜的引擎上，研发了我国首个融合面部肌电信号的手语翻译技术。当佩戴者因情绪产生微表情的时候，设备就能精准捕捉这些微小的面部表情，并将其转化为特征向量后与数据库中的信息进行比对，从而让手语翻译更加精准。
同时，团队还扩大了数据吞吐量，实现设备时延小于0.1秒，能实时完成13000余条手语数据的调用。正是基于这些技术，与同类产品相比，团队产品的实时性翻译能力更强，准确度更高。
朱铭熙团队的成果，不仅让手语被“听到”，还让声音被“看见”。考虑到很多听障人士存在识字困难，朱铭熙团队开发了一个能够显示在AR眼镜上的数字人。当识别到周围有人说话时，文字内容可以直接匹配到数字人的手语动作上。这样，佩戴者就能在AR眼镜上看到数字人打手语，无需识字就能理解对方的意思。
这一创新为听障人士提供了极大便利，为他们打开了一个全新的交流世界。该技术不仅可以用于个人社交活动，也能作为聋哑学校基础的教学辅助装置。“通过让学生佩戴臂环，我们可以检测他们的手语表达是否标准，中控台可以实时显示结果，让手语教学更直观，也大大降低了教学成本和时间。”朱铭熙介绍。
目前，2000余位听障人士佩戴了团队研发的产品。河南郑州张哥助残服务平台创始人张继磊试用产品后给予高度评价：“这款产品能够切实帮助聋哑人群，应用市场非常广阔，希望能继续完善，让更多有需要的人受益。”
目前，团队正在向数据库继续补充手语数据，扩大产品的应用场景。（记者 朱虹）
近日，黑龙江大学本科生创业团队的参赛项目“传情达意——让机器手语翻译不再冰冷”凭借其独特的创意和系列技术突破，在第十四届“挑战杯”秦创原中国大学生创业计划竞赛中荣获金奖。这个项目研发了全国首个融合面部肌电信号的手语翻译技术和相关AR眼镜设备，不仅让手语被“听到”，还能让声音被“看见”。
团队通过调研发现，目前助聋设备普及率只有5%，且普遍价格高，适配场景少，准确率较低。为此，团队决定在助聋设备方面做进一步探索。他们历时两年，研发出样品并进行完善，目前已与徐州市特殊教育中心等机构签订购买意向书。
“我们的创新产品主要由臂环和AR眼镜两部分组成。”项目负责人、黑龙江大学电子工程学院朱铭熙说，臂环通过收集并识别聋哑人做手语时的肌电信号，将其转化为语音，实现了手语的“听觉化”。在这一过程中，电极贴片起到了关键作用。它们能够捕捉肢体动作的细微变化，将其转化为特征向量，与预先建立的手语向量数据库进行比对，从而准确识别出手语的含义。
然而，仅有臂环的手语识别并不足以达到精准翻译的目标。朱铭熙介绍：“手语中面部表情所占的权重不低于40%，而人的情绪主要通过眉毛和面颊两侧的肌肉来体现。”
为了提升准确率，团队进一步提升了设备精准捕捉表情、理解情感的能力。他们将电极贴片安装在AR眼镜的引擎上，研发了我国首个融合面部肌电信号的手语翻译技术。当佩戴者因情绪产生微表情的时候，设备就能精准捕捉这些微小的面部表情，并将其转化为特征向量后与数据库中的信息进行比对，从而让手语翻译更加精准。
同时，团队还扩大了数据吞吐量，实现设备时延小于0.1秒，能实时完成13000余条手语数据的调用。正是基于这些技术，与同类产品相比，团队产品的实时性翻译能力更强，准确度更高。
朱铭熙团队的成果，不仅让手语被“听到”，还让声音被“看见”。考虑到很多听障人士存在识字困难，朱铭熙团队开发了一个能够显示在AR眼镜上的数字人。当识别到周围有人说话时，文字内容可以直接匹配到数字人的手语动作上。这样，佩戴者就能在AR眼镜上看到数字人打手语，无需识字就能理解对方的意思。
这一创新为听障人士提供了极大便利，为他们打开了一个全新的交流世界。该技术不仅可以用于个人社交活动，也能作为聋哑学校基础的教学辅助装置。“通过让学生佩戴臂环，我们可以检测他们的手语表达是否标准，中控台可以实时显示结果，让手语教学更直观，也大大降低了教学成本和时间。”朱铭熙介绍。
目前，2000余位听障人士佩戴了团队研发的产品。河南郑州张哥助残服务平台创始人张继磊试用产品后给予高度评价：“这款产品能够切实帮助聋哑人群，应用市场非常广阔，希望能继续完善，让更多有需要的人受益。”
目前，团队正在向数据库继续补充手语数据，扩大产品的应用场景。（记者 朱虹）
机票扩大免费退改范围：航司越“卷”消费者越得利 然玉 1月10日起，南航、东航新版机票退改规则生效。根据公告，南航、东航扩大了客票免费退改范围，放宽了因病退改规则，并新增了票价波动的退票规则等。被视为“ 中新经纬1月11日电 “上海市场监管”微信号11日消息，宜家召回3008件USB充电器。 上海市市场监管局称，宜家(中国)投资有限公司自2024年1月10日至2024年4月9日召回2020年4月至2023年12月生产的宜家牌ASKSTORM 奥斯 下班后涌入医院做推拿；常年服用多种保健品；关注艾灸、刮痧、八段锦等调理攻略 “脆皮年轻人”花式养生，有人月均账单超千元 中医专家提醒，应审慎评价身体状况，切勿盲目跟风 本报记者 王羡茹 曲欣悦 阅读提 拼版照片：上图为20世纪80年代的厦门筼筜湖（资料照片）；下图为2024年1月24日拍摄的厦门筼筜湖及周边城市景观（新华社记者姜克红摄，无人机照片）。新华社记者付敏城在海上，海在城中。筼筜湖，犹如镶嵌在厦门岛中央 节后碳化硅衬底掀价格战？产业链上市公司回应来了 《科创板日报》2月22日讯(记者 吴旭光)节后，有市场消息称，国内主流6寸碳化硅(SiC)衬底报价参照国际市场每片750-800美元的价格，快速下杀，价格跌幅直逼三成。 甚 中新经纬2月22日电 据国家市场监督管理总局网站消息，自新国标发布实施后，婴幼儿配方乳粉(以下称婴配乳粉)产品配方按新国标注册攻坚工作进展顺利，截至目前，共计1127个配方通过注册。 市场监管总局表示，婴幼儿配方食 。本文链接：手语能“听到” 声音可“看见” 机器手语翻译技术实现双向无障碍实时沟通http://www.sushuapos.com/show-5-38169-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。