标题:AI视频边生成边播放!首帧延迟仅1.3秒,生成速度9.4帧/秒|Adobe&MIT新研究
AI生成视频,边生成边实时播放,再也不用等待了!
Adobe与MIT合作开发了自回归实时视频生成技术——CausVid。
这一技术类似于从下载整部电影转变为直接观看流媒体的过程。在生成首帧画面后,视频即可立即播放,后续内容则动态生成并无缝衔接。
传统的视频生成模型通常需要等待几分钟才能看到结果,这是因为它们采用了双向注意力机制,每帧都需要参考前后帧的信息。CausVid则通过蒸馏预训练的双向扩散模型(DiT)构建自回归生成模型,显著缩短了生成时间。
实验表明,CausVid不仅生成速度快,而且质量更高。首帧延迟从3.5分钟降至1.3秒,生成速度从0.6帧/秒提升至9.4帧/秒,生成质量也优于其他主流模型,如Meta的MovieGen和智谱的CogVideoX。
CausVid利用单向注意力机制和KV缓存推理技术,支持大语言模型的应用,并通过滑动窗口机制突破了长度限制。此外,它还能应用于图片动画化、实时视频风格转换以及交互式剧情生成等多种场景。
项目链接:https://causvid.github.io/
原文链接
本文链接:https://kx.umi6.com/article/9975.html
转载请注明文章出处
相关推荐
换一换
字节AI高管骆怡航任清华系公司生数科技CEO,原CEO发文:人生就是不停地告别
2025-03-12 13:25:58
首个接入GPT-5的视频Agent!一句话生成广告大片,分镜配音全包了
2025-08-26 16:47:05
嚯!大语言扩散模型来了,何必只预测下一个token | 人大高瓴&蚂蚁
2025-02-18 13:14:03
谷歌领跑 AI 视频生成赛道:抢先 OpenAI Sora 推出 Veo 模型,可生成 1080P 高清视频
2024-12-05 08:56:42
字节跳动 AI 助手豆包被曝开启视频生成内测
2024-11-07 12:58:54
FramePack 降低 AI 视频生成硬件门槛,6GB 显存即可生成 60 秒视频
2025-04-20 08:05:04
视频大模型激战180天:Sora“高冷隐身”,国产巨头狂卷落地
2024-07-11 08:33:40
Sora还没来,AI视频赛道一夜入秋
2024-10-21 22:41:19
AI视频边生成边播放!首帧延迟仅1.3秒,生成速度9.4帧/秒|Adobe&MIT新研究
2024-12-10 15:56:19
事件相机+AI视频生成,港大CUBE框架入选ICIP,无需训练实现可控视频生成
2024-10-26 13:25:05
每秒生成超30帧视频,支持实时交互!自回归视频生成新框架刷新生成效率
2025-06-12 14:32:49
马斯克硬刚Sora,实测Grok 最新视频生成:快到飞起,但一言不合就脱衣服
2025-10-11 12:28:35
剪映前AI产品负责人创业多模态Agent,做懂上下文的007乙方,成立半月融资数百万美元
2025-10-29 12:50:06
604 文章
353794 浏览
24小时热文
更多
-
2025-12-11 00:19:01 -
2025-12-11 00:15:55 -
2025-12-10 23:15:05