把一段音频、一张照片输入AI模型,就能让图中人物开口唱歌说话,让奥黛丽赫本唱《上春山》、陶俑仕女说英文RAP、爱因斯坦说中文段子。不久前,这款名为EMO的模型因为阿里通义实验室的一篇论文火遍海内外,模型的产品化进程也广受关注。4月25日,EMO终于上线通义APP,开放给所有用户免费使用。
打开通义APP,进入“全民舞台”频道,就可来到EMO产品页面“全民唱演”。在歌曲、热梗、表情包中任选一款模板,上传肖像照片,EMO随即就能合成视频。

通义APP首批上线了80多个EMO模板,包括热门歌曲《上春山》《野狼disco》等,网络热梗“钵钵鸡”“回手掏”等。目前通义APP暂不开放用户自定义音频,用户只能选择APP预置的音频来生成视频。
EMO是通义实验室研发的AI模型,其背后的肖像说话(Talking Head)技术是当前大热的AIGC领域。EMO之前的Talking Head技术都需针对人脸、人头或者身体部分做3D建模,通义实验室在业界率先提出了弱控制设计,无需建模就可驱动肖像开口说话,不仅降低视频生成成本,还大幅提升了视频生成质量。EMO学习并编码了人类表达情绪的能力,能将音频内容和人物的表情、嘴型匹配,还能把音频的语气特征和情绪色彩反映到人物微表情上。
2月底,通义实验室公布相关论文,EMO随之成为继SORA之后最受关注的AI模型之一。现在,通义APP让所有人都可免费体验前沿模型的创造力。未来,EMO技术有望应用于数字人、数字教育、影视制作、虚拟陪伴、电商直播等场景。
通义APP近期爆款频出,现象级应用“全民舞王”曾在社交平台掀起“兵马俑跳科目三”“金毛跳舞”的热潮,全民舞王背后的模型Animate Anyone也出自通义实验室。近期,通义APP还陆续推出了超长文档解析、AI编码助手、AI会议助手等免费实用功能。通义大模型正在成为越来越多用户的超级AI助手。
来源:新华社微博 近日,北京卓视智通科技有限公司荣获全球知名设计竞赛---2024年IF国际设计大奖殊荣,旗下的【阿瞳目-双光谱雷视一体机】在产品类别设计中荣获2024年iF产品设计奖。经过由国际专家所组成的iF独立评委专业 美国在联合国大会上再次一票否决呼吁加沙停火的决议草案,这一举动再次引发了外界对美国在中东问题上的立场和偏袒以色列的质疑。巴勒斯坦常驻联合国观察员曼苏尔在会上发言时,手举因以军行动及围困而严重营养不良的加沙 2024年3月5日,北京玻色量子科技有限公司(以下简称“玻色量子”)与深圳华大生命科学研究院(以下简称“华大研究院”)达成战略合作。此次签约,恰逢十四届全国人大二次会议,李强总理作政府工作报告时提出:在未来 随着消费者对母婴健康消费需求升级与新国标的出台推进,消费者针对婴幼儿配粉奶粉的品质、营养性的关注度在近年来大幅提升,尤其是乳品奶源地的天然性、奶牛饲养方式的科学性以及乳制品加工工艺是否精湛 【本期导读】 3月5日,十四届全国人大二次在北京开幕。中共中央总书记、国家主席、中央军委主席习近平当天在参加他所在的江苏代表团审议政府工作报告时强调,要牢牢把握高质量发展这个首要任务,因地制宜发展新质生 。本文链接:EMO来了!通义APP推出照片唱歌功能http://www.sushuapos.com/show-1-11720-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。