设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

AI 视频总 “穿帮”?群核 SpatialGen 用 3D 扩散模型,让物体位置不 “漂移”

发布时间: 来源: 大象新闻

“明明是同一个客厅场景,镜头一转,沙发就从靠窗位置移到了墙边;生成的厨房视频里,冰箱突然‘穿透’了橱柜”—— 这是当前 AIGC 视频工具的常见问题,行业称之为 “空间一致性不足”。这一问题不仅影响视频的真实感,更让 AI 视频难以应用于虚拟看房、产品演示等商业化场景。而群核科技在首届 TechDay 上发布并开源的空间生成模型 SpatialGen,正是用 3D 扩散模型技术,从根源上破解了这一行业痛点。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,群核科技在首届技术开放日(TechDay)上正式发布其空间大模型最新成果:新一代空间语言模型SpatialLM 1.5与空间生成模型SpatialGen。其中,SpatialGen依托群核科技海量室内3D场景数据与多视角扩散模型技术,可生成3D高斯(3DGS)场景和渲染漫游视频,并确保同一物体在不同镜头下始终保持准确的空间属性和物理关系,支持任意视角切换、路径漫游,光照、纹理、遮挡关系全程物理一致。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图说:SpatialGen的多视角一致性演示snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

要理解 SpatialGen 的突破,首先需要搞清楚 AI 视频 “穿帮” 的根源:当前多数文生视频、图生视频工具,都是基于 2D 图像或视频数据训练,缺乏对 3D 空间结构的理解。比如,AI 生成室内视频时,会将每个镜头视为独立的 2D 图像来处理,无法记住 “沙发在 3D 空间中的真实位置”,导致镜头切换时物体 “漂移”;生成物体交互场景时,也无法理解 “冰箱不能穿透橱柜” 的物理逻辑。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

这背后的原因是当下多数视频生成模型是基于图像或视频数据训练,图像缺少人类感知空间时所依赖的深度线索,因此仅凭自然语言难以让 AI 建立精确的空间关系认知,因此会缺乏对 3D 空间结构和物理法则的理解和推演能力。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 依托群核积累的数亿 3D 空间数据集和自研渲染引擎,训练可以生成任意指定视角图片的扩散模型。其核心在于让 AI 对空间的认知严格符合真实物理规律,从底层解决 2D 感知到 3D 理解的映射偏差。并首次基于多视角扩散+3DGS重建技术,从源头解决空间一致性问题。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

TechDay 现场的对比演示,直观展现了这种技术的优势:工作人员分别用其他AI视频生成模型和 SpatialGen 生成 “客厅漫游视频”。其他模型生成的视频,在镜头转换过程中,家具发生了明显不一致状况,而 SpatialGen 生成的视频中,无论镜头如何切换 —— 从正面拍沙发,从侧面拍餐桌,从俯瞰拍整个客厅 —— 沙发、餐桌的位置与尺寸始终保持一致。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 能实现这种突破,还得益于群核科技海量的 3D 场景数据和空间智能飞轮支撑。基于酷家乐这一全球最大的空间设计平台,群核科技构建了“空间编辑工具-空间合成数据-空间大模型”的空间智能飞轮,让工具沉淀数据,用数据加速模型训练,用模型提升工具体验,再在工具的广泛应用中沉淀更为丰富的场景数据。正如快手依托短视频生态推动可灵迭代一样,群核凭借酷家乐沉淀的海量室内物理数据,正在空间智能领域复现“工具—数据—模型”的技术增强回路。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

据透露,群核还在研发一款基于3D技术的AI视频生成产品,并计划在今年内正式发布——这或许是全球首款深度融合3D能力的AI视频生成Agent。通过构建3D渲染与视频增强一体化的生成管线,有希望弥补当前AIGC视频生成中时空一致性不足的问题。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

(本文来源:大象新闻。本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。对文章事实有疑问,请与有关方核实或与本网联系。文章观点非本网观点,仅供读者参考。)snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

“明明是同一个客厅场景,镜头一转,沙发就从靠窗位置移到了墙边;生成的厨房视频里,冰箱突然‘穿透’了橱柜”—— 这是当前 AIGC 视频工具的常见问题,行业称之为 “空间一致性不足”。这一问题不仅影响视频的真实感,更让 AI 视频难以应用于虚拟看房、产品演示等商业化场景。而群核科技在首届 TechDay 上发布并开源的空间生成模型 SpatialGen,正是用 3D 扩散模型技术,从根源上破解了这一行业痛点。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

近日,群核科技在首届技术开放日(TechDay)上正式发布其空间大模型最新成果:新一代空间语言模型SpatialLM 1.5与空间生成模型SpatialGen。其中,SpatialGen依托群核科技海量室内3D场景数据与多视角扩散模型技术,可生成3D高斯(3DGS)场景和渲染漫游视频,并确保同一物体在不同镜头下始终保持准确的空间属性和物理关系,支持任意视角切换、路径漫游,光照、纹理、遮挡关系全程物理一致。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

图说:SpatialGen的多视角一致性演示snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

要理解 SpatialGen 的突破,首先需要搞清楚 AI 视频 “穿帮” 的根源:当前多数文生视频、图生视频工具,都是基于 2D 图像或视频数据训练,缺乏对 3D 空间结构的理解。比如,AI 生成室内视频时,会将每个镜头视为独立的 2D 图像来处理,无法记住 “沙发在 3D 空间中的真实位置”,导致镜头切换时物体 “漂移”;生成物体交互场景时,也无法理解 “冰箱不能穿透橱柜” 的物理逻辑。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

这背后的原因是当下多数视频生成模型是基于图像或视频数据训练,图像缺少人类感知空间时所依赖的深度线索,因此仅凭自然语言难以让 AI 建立精确的空间关系认知,因此会缺乏对 3D 空间结构和物理法则的理解和推演能力。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 依托群核积累的数亿 3D 空间数据集和自研渲染引擎,训练可以生成任意指定视角图片的扩散模型。其核心在于让 AI 对空间的认知严格符合真实物理规律,从底层解决 2D 感知到 3D 理解的映射偏差。并首次基于多视角扩散+3DGS重建技术,从源头解决空间一致性问题。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

TechDay 现场的对比演示,直观展现了这种技术的优势:工作人员分别用其他AI视频生成模型和 SpatialGen 生成 “客厅漫游视频”。其他模型生成的视频,在镜头转换过程中,家具发生了明显不一致状况,而 SpatialGen 生成的视频中,无论镜头如何切换 —— 从正面拍沙发,从侧面拍餐桌,从俯瞰拍整个客厅 —— 沙发、餐桌的位置与尺寸始终保持一致。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

SpatialGen 能实现这种突破,还得益于群核科技海量的 3D 场景数据和空间智能飞轮支撑。基于酷家乐这一全球最大的空间设计平台,群核科技构建了“空间编辑工具-空间合成数据-空间大模型”的空间智能飞轮,让工具沉淀数据,用数据加速模型训练,用模型提升工具体验,再在工具的广泛应用中沉淀更为丰富的场景数据。正如快手依托短视频生态推动可灵迭代一样,群核凭借酷家乐沉淀的海量室内物理数据,正在空间智能领域复现“工具—数据—模型”的技术增强回路。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

据透露,群核还在研发一款基于3D技术的AI视频生成产品,并计划在今年内正式发布——这或许是全球首款深度融合3D能力的AI视频生成Agent。通过构建3D渲染与视频增强一体化的生成管线,有希望弥补当前AIGC视频生成中时空一致性不足的问题。snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

(本文来源:大象新闻。本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。对文章事实有疑问,请与有关方核实或与本网联系。文章观点非本网观点,仅供读者参考。)snB速刷资讯——每天刷点最新资讯,了解这个世界多一点SUSHUAPOS.COM

《冬至》一开播就有了非常多的观众粉丝,他们都非常想要知道《冬至》演员表,以下就是小编为大家精心整理关于《冬至》演员表的内容啦,快来看看有没有你想要知道的东西吧。 《冬至》演员表黄景瑜 饰 江成 最近,备受观众期待的《千年情劫》正式播出,这部作品在宣传期间就已拥有相当高的热度和人气。在播出之后,这部剧的表现令观众们感到欣喜和满意,真正地实现了大家的期待。今天,我将为大家讲讲《千年情劫》第 代表Z世代的Hip-Hop男子组合BOY STORY,继展现出其独有的抱负与热情的第二张EP《Z.I.P》之后,以第三张EP《極》的回归迎来了新的一年。作为出演了5档海外主流音乐节目的首支中国男子组合,BOY S 最近正在热播一部名为《烟火人家》的影视剧,开播之后取得了相当不错的评价反响,观众们的热情也在不断升温。随着热播度的提高,各大网络平台上,对该剧的热议也日益增多,特别是关于《烟火人家》陶姝娜角色介 2月10日到2月15日(大年初一到大年初六),由中央广播电视总台文艺节目中心推出的春节特别节目《万事大集—2024新春大联欢》,将在 CCTV-3和央视频同步播出。节目采用实景集市,展示各地不同风格 最近正在热播的《南来北往》剧中无论是颜值还是演技,亦或者是剧情,相信也吸引到了不少小伙伴,关于《南来北往》第1集分集剧情介绍的讨论也是居高不下,让我们一起来看一看小伙伴们的疑问吧。《南来北往》 。

本文链接:AI 视频总 “穿帮”?群核 SpatialGen 用 3D 扩散模型,让物体位置不 “漂移”http://www.sushuapos.com/show-7-23226-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 《NIGHTKIDZ 夜之子》强势登顶 !网易云音乐25年第35期说唱周榜发布

下一篇: 林强解读天然钻石投资,4C定价值、稀缺性筑护城河,消费升级添动力

热门资讯

推荐资讯

  • 男士韩版风衣里面穿什么好看?

    男士韩版风衣里面穿什么好看?男士韩版风衣里面搭配有以下几种方式: 高领打底衫。高领打底衫作为内搭在秋冬季节特别流行,也特别实用。它柔软保暖,还能展现出时尚感,搭配韩版风

  • 男士运动鞋品牌哪些好?

    男士运动鞋品牌哪些好?1、安踏/Anta 2、耐克/NIKE 3、NewBalance 4、阿迪达斯/ADIDAS 5、特步/XTEP 6、李宁/LI-NING 7、361度 8、彪马/PUMA 9、亚瑟士/ASIC

  • 夏季衬衣搭配技巧?

    衬衣搭配技巧? 衬衣的搭配方式很多,以下是一些搭配建议: 1.搭配西装裤:衬衣搭配西装裤是十分经典和正式的搭配方式,适合在商务场合或正式场合穿着。 2.搭配牛仔裤:衬衣和牛仔

  • 紫色可以搭配什么颜色的衣服

    紫色可以搭配什么颜色的衣服?这是一个经常被问到的问题。作为色彩搭配中的一种“高级色”,紫色常常被认为难以搭配。但事实上,只要搭配得当,紫色可以与多种颜色搭配出非常出

  • 秋装时尚女装搭配

    随着秋季的到来,时尚的女装搭配成为了女性们关注的焦点。在这个凉爽的季节里,如何穿出时尚感、展现出自己的个性成为许多女性们的追求。因此,本文将为大家介绍一些关于秋装时

  • 50 岁矮个子女人秋冬搭配:时尚与气质的完美融合

    一、引言随着气温逐渐下降,又到了一年一度的秋冬季节。对于 50 岁的矮个子女人来说,如何在秋冬季节穿出时尚感、展现气质,成为了她们心中的一大难题。本文将为您提供一些实用

  • 黄色有多少种颜色

    一、引子:黄色有多少种颜色?在大自然中,黄色是一种非常常见的颜色,它代表着太阳、温暖、希望和活力。然而,黄色究竟有多少种颜色呢?这恐怕是一个让人感到困惑的问题。本文将带

  • 陈皮十种最佳搭配吃法

    一、引言陈皮是一种常见的中药材,具有很高的药用价值和食用价值。不仅能够调理肠胃、促进消化,还具有清热解毒、润肺止咳等功效。如今,陈皮已经成为了人们日常生活中不可或

  • 黑色连衣裙搭配什么颜色外套?这三种颜色让你时尚又显瘦!

    在时尚界,黑色连衣裙一直是备受追捧的经典单品。那么,如何搭配外套才能让黑色连衣裙显得更加出彩呢?今天,我就为大家推荐三种颜色外套,让你时尚又显瘦!(关键词自然部署)一、黑色连

  • 白衬衫怎么搭配好看

    一、引言白衬衫是一款经典的时尚单品,无论是在正式场合还是日常生活中,它都有着很高的出镜率。但是,如何将白衬衫搭配得好看,却是很多人心中的难题。本文将为大家详细介绍白

  • 卡其色鞋子怎么搭配衣服?这三种方法让你时尚又百搭

    在时尚圈,卡其色鞋子一直是备受追捧的经典单品。然而,如何搭配衣服成了不少新手们的困扰。今天,我将为大家分享三种简单实用的搭配方法,让你轻松驾驭卡其色鞋子,时尚又百搭。一

  • 脖子短粗者适合佩戴什么样式的项链?这三种款式让你轻松化解尴尬

    面对脖子短粗的困扰,很多小伙伴不知道如何选择合适的项链来佩戴。本文将为你详细介绍三种适合脖子短粗者佩戴的项链款式,让你轻松化解尴尬,提升整体气质。一、总述项链作为首

  • 日榜
  • 周榜
  • 月榜