热点

超长视频生成的新突破!LongVie 框架让创作无界限

字号+ 作者:牛骥同槽网 来源:时尚 2026-11-23 我要评论(0)

超长视频生成的新突破!LongVie 框架让创作无界限

在过去的两年中,视频生成技术经历了惊人的进步,尤其是短视频的创作。然而,制作超过一分钟的高质量、风格统一的超超长长视频仍然是一项巨大的挑战。对此,上海人工智能实验室联合南京大学、复旦大学、南洋理工大学 S-Lab 以及英伟达等机构,视频共同推出了 LongVie 框架,系统性解决了这一领域中的核心问题。

LongVie 的目标是让超长视频的生成变得更加生成可控和一致。团队发现,传统的视频生成模型在处理长视频时,常常面临时序不一致和视觉退化等难题。前者主要表现为画面的新细节与内容不连贯,后者则指随着视频时长的增加,画面颜色和清晰度的下降。

为了解决这些问题,LongVie 从 “控突破制信号” 和 “初始噪声” 两个方面入手。首先,团队提出了 “控制信号全局归一化” 策略,这意味着在生成视频时,不再只在单一片段!L内进行归一化,而是统一整个视频段的控制信号,从而提升跨片段的连贯性。其次,他们引入了 “统一噪声初始化” 策略,确保各个片on段共享同一初始噪声,这样可以从源头上减少不同片段之间的视觉漂移。

在解决视觉退化问题上,LongVie 采用了多gV模态精细控制方法。单一模态的控制常常无法提供稳定的约束,而 LongVie 结合了密集控制信号(如深度图)和稀疏ie控制信号(如关键点),并引入退化感知训练策略,使得模型在处理长视频时,能够保持更高的画质和细节。

此外,Lon 框gVie 还推出了 LongVGenBench,这是首个专为可控超长视频生成设计的基准数据集,包含100个超过1分钟的高分架让辨率视频,旨在推动该领域的研究与评测。根据定量指标和用户评测结果,LongVie 在多个评估上超越了现有技术,赢得了用创作户的高度偏好,达到了 SOTA(最先进技术)水平。

随着 LongVie 框架的问世,超长视频生成将迎来新的时代,创作者们无界将能够在更大的自由度下实现自己的创意。

项目地址:https://vchitect.github.io/LongVi超长e-project/

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

相关文章
  • Spotify在美国推出付费播客订阅平台 挑战苹果播客

    Spotify在美国推出付费播客订阅平台 挑战苹果播客

    2026-07-27

  • 标签: 火绒安全 鲁大师 奇鲁科技 云控推广

    标签: 火绒安全 鲁大师 奇鲁科技 云控推广

    2026-09-01

  • 标签: 喜临门 ST喜临门 陈阿裕 羿阁公司

    标签: 喜临门 ST喜临门 陈阿裕 羿阁公司

    2026-06-17

  • 云安全日报210705:红帽云计算应用平台发现请求伪造特权提升漏洞,需要尽快升级

    云安全日报210705:红帽云计算应用平台发现请求伪造特权提升漏洞,需要尽快升级

    2026-06-12

网友点评