关键功能

用于流式视频编辑的因果逐帧扩散框架。
目标实现 12.66 FPS 的实时流式推理。
使用基础、因果和 DMD 三阶段蒸馏流程。
将双向编辑先验适配为按块因果注意力。
将生成压缩为四步扩散。
使用面向自回归的掩码缓存复用未变化区域 token。
支持局部和全局的文本引导视频编辑。
提供公开代码、演示、消融实验和基线对比。

该系统使用三阶段蒸馏流程:基础调优让双向扩散 Transformer 获得编辑能力,因果适配将其转为按块流式注意力,而 DMD 蒸馏则将生成压缩到四步扩散。面向自回归的掩码缓存会复用未改变区域的 token,从而减少冗余计算。


LiveEdit 适用于交互式视频特效、创意工具、虚拟制作和低延迟视觉编辑研究。项目报告流式推理速度为 12.66 FPS,并提供代码、对比画廊和示例,如在保持时间连续性的同时改变毛发、光照、服装、天空和其他场景属性。

在您的网站添加此徽章,以获得更多点赞并登上搜索结果顶部!

嵌入按钮预览 - 浅色主题
嵌入按钮预览 - 深色主题

Subscribe to the AI Search Newsletter

Get top updates in AI to your inbox every weekend. It's free!