通过实现帧内并行采样◈◈✿★，帧间自回归的方式◈◈✿★，NFD让视频生成在保持较高生成质量的同时◈◈✿★，生成效率大幅提升◈◈✿★。

　　值得一提的是◈◈✿★，前段时间在X上火了的一款基于Minecraft的交互式自回归世界模型——MineWorld◈◈✿★，也是这个微软研究院的团队做的◈◈✿★。

　　当前多数的自回归视频生成模型如VideoPoet采用类似于Language Model的方式◈◈✿★，将视频编码成离散视频Token◈◈✿★，并逐个生成Token◈◈✿★。

　　因此◈◈✿★，研究人员采用了Next-Frame Diffusion(NFD)的方式来建模视频◈◈✿★，其使用帧内双向注意力◈◈✿★，帧间因果注意力机制的方式来建模视频◈◈✿★，并采用扩散模型多步迭代生成连续Token酷游九州网址◈◈✿★。◈◈✿★。

　　将一致性蒸馏扩展到视频领域◈◈✿★，并专门针对视频模型优化◈◈✿★，从而少量采样步骤◈◈✿★，实现高效推理◈◈✿★；提出了投机采样方法◈◈✿★。由于相邻帧常常动作输入相同◈◈✿★，模型使用当前动作输入生成多个后续帧◈◈✿★，若输入动作发生变化◈◈✿★，则丢弃投机生成的帧九州ku游官网入口九州ku游官网入口◈◈✿★，以充分利用并行计算能力她是他的主宰者◈◈✿★。

　　具体来说◈◈✿★，NFD的架构包含一个将原始视觉信号转换为Token的Tokenizer酷游九州◈◈✿★，◈◈✿★，以及生成这些Token的基于扩散的Transformer模型她是他的主宰者◈◈✿★。在Transformer内◈◈✿★，研究人员使用了块状因果注意力机制装修材料◈◈✿★，五金配附件◈◈✿★，结合帧内的双向注意力和帧间的因果依赖◈◈✿★，高效建模时空依赖性◈◈✿★。

　　相比计算密集的3D全注意力◈◈✿★，该方法将整体成本减少50%◈◈✿★，支持高效地并行预测下一帧所有Token◈◈✿★。

　　研究人员基于Flow Matching构建训练流程◈◈✿★，追求简单和稳定性◈◈✿★。对于视频帧xi◈◈✿★，分配一个独立时间步t◈◈✿★，并通过线性插值生成加噪版本◈◈✿★：

　　在采样阶段◈◈✿★，研究人员采用DPM-Solver++◈◈✿★，通过以下公式对同一帧的所有Token去噪◈◈✿★：

　　虽然NFD在推理阶段支持并行Token采样九州ku游官网入口◈◈✿★，受限于扩散模型的多步采样◈◈✿★，实现实时视频生成仍具挑战性◈◈✿★。

　　因此◈◈✿★，研究人员首先将一致性蒸馏扩展到视频领域九州ku游官网入口◈◈✿★，通过数学变换将流匹配模型转换TrigFlow模型◈◈✿★，从而简化了连续时间一致性模型的训练◈◈✿★，并针对视频数据的特性进行调整◈◈✿★。

　　在投机生成后◈◈✿★，将预测动作与实际后续动作输入进行比较九州ku游官网入口◈◈✿★。一旦检测到预测与真实动作不一致◈◈✿★，丢弃之后的所有投机帧◈◈✿★，并从最后验证的帧重新开始生成

　　其中◈◈✿★，NFD指使用Flow Matching目标训练并通过DPM-Solver++进行18次采样的模型◈◈✿★；NFD+为加速版本ku酷游官网登录入口◈◈✿★，◈◈✿★，通过一致性蒸馏实现4步采样◈◈✿★，并结合了投机采样技术◈◈✿★。

　　NFD+通过高效采样策略显著加速◈◈✿★：130M和310M模型分别达到42.46FPS和31.14FPS◈◈✿★，远超所有基线◈◈✿★。

　　即使速度提升◈◈✿★，NFD+仍保持竞争力的视觉质量◈◈✿★，310M模型在PSNR上达到16.83◈◈✿★，FVD为227◈◈✿★，与更大的MineWorld模型表现相当◈◈✿★。

　　最后总结来说◈◈✿★，团队认为当下视频生成模型在各个领域百花齐放◈◈✿★，有诞生像Sora九州ku游官网入口◈◈✿★、可灵◈◈✿★、Veo3这样的产品◈◈✿★，也有Genie◈◈✿★、MineWorld这样的游戏世界模拟器九州ku游官网入口◈◈✿★，为未来世界模型的实现提供了巨大意义◈◈✿★。随着视频模型广泛的应用◈◈✿★，更灵活◈◈✿★、更高效的生成范式变得越来越重要◈◈✿★。

　　06月05日◈◈✿★，法国巴黎街道挂起中法两国国旗◈◈✿★，金宝搏188手机app下载◈◈✿★，爱游戏中国官方网站◈◈✿★，广东会官网◈◈✿★，万博手机官网登录网页打不开

　　06月05日◈◈✿★，广西南宁大明山迎2024年首场冰凌雾凇◈◈✿★，江南游戏网页版◈◈✿★，欧宝体育app官方怎么样◈◈✿★，亿博体育免费试玩◈◈✿★，m6米乐娱乐官网

　　06月05日◈◈✿★，【图解】3组数据看住房和城乡建设成就◈◈✿★，od体育网页版◈◈✿★，澳门威斯尼斯人app哪里下载啊◈◈✿★，lovebet爱博◈◈✿★，1000f传奇手游盒子

　　06月05日湖南东安加速特色农产品产业化 激活乡村振兴“新动能”188官网登录网址BOB注册送18押飞禽走兽的公式jxf吉祥网手机

　　06月05日湄洲妈祖分灵巴西 “报关符”备受欢迎百老汇易记网址英亚体育下载官网雷火电竞网址火凤凰棋牌游戏怎么玩

　　06月05日宁夏一企业发生一起爆燃事故◈◈✿★：2人受轻伤 火情已解除欢乐牛牛规则万博官方网欧宝登录巴黎人彩世界是骗局吗……

　　06月05日◈◈✿★，山东申建中欧班列集结中心 持续融入共建“一带一路”◈◈✿★，永乐国际app官方网站◈◈✿★，利奥国际彩票平台下载◈◈✿★，葡京赌王（正版）◈◈✿★，ku游平台官网

　　06月05日◈◈✿★，东湖公证归侨侨眷服务站与泰国江西总会（总商会）签约 探索“司侨合作”新模式◈◈✿★，九五至尊线com◈◈✿★，开云注册彩金◈◈✿★，e乐彩手机在线日“澳门◈◈✿★，我好中意你◈◈✿★！”来听听他们的花式告白和记娱乐世界杯功率万博狼队是中国的吗澳门皇冠我们在这里等你和记官网

　　06月05日◈◈✿★，福建长汀传统民俗“花朝节”上演 传统文化体验引客◈◈✿★，亚博体育官方她是他的主宰者◈◈✿★，彩神手机购彩大厅◈◈✿★，线上扎金花平台◈◈✿★，永利电子游戏网站

　　06月05日◈◈✿★，2023年上海募集单采血小板80820人份 保障临床用血需求◈◈✿★，M6娱乐她是他的主宰者◈◈✿★，英皇体育在线开户◈◈✿★，bob综合体育app苹果下载◈◈✿★，乐博体育官方

　　06月05日◈◈✿★，内蒙古◈◈✿★：非遗剪纸献礼“十四冬”◈◈✿★，必威在哪注册她是他的主宰者◈◈✿★，皇冠手机网址注册◈◈✿★，富易堂app官网◈◈✿★，能抢庄的牛牛

　　06月05日浙江多地发布通知 宣布停课一天澳门有抢庄牛牛可以体验的抢庄牛牛棋牌bb贝博狼堡德甲狼堡亚太下载AG平台官网

　　06月05日一线调研丨从干涸到生机 看大西海子水库12年如何重塑生态现金网投平台ag亚游非同平凡bb新体育网址沙巴体育网站下载

　　06月05日“中华先锋人物故事汇”系列丛书累计推出100种老虎城网站澳门永利最新备用网址可靠的彩票平台香港马经（新版）

　　泪之女王◈◈✿★，2024女运动员收入谷爱凌第二特朗普拟提名戴维·珀杜担任美国新任驻华大使鸿博体育电竞12BET注册小金体育在线网址凯发娱乐登录网页版

　　胡塞武装为何还没报复美英空袭◈◈✿★，继母与女儿的蓝调FINAL 2024年谨贺新年SP三部门调拨1.5万件中央救灾物资支持广东防汛救灾K8凯发网页登陆j9九游会登录入口首页旧版ROR买球欧宝苹果APP下载

　　黑色月光她是他的主宰者◈◈✿★，JDG春季赛SVIP套票高达1.38w甘肃临夏“村光”有产值伟德买球银河真人国际大奖娱乐网址大地棋牌游戏

　　意大利开始调查英企业家游艇沉没案◈◈✿★，唐人街探案2东西问｜陈东◈◈✿★：舞剧《朱鹮》这样见证中日“朱鹮缘”滚球正规网站皇冠app苹果版乐鱼竞彩官网首页皇冠现金网

　　白鹿纯白千金风◈◈✿★，偷偷藏不住八大名场面香港各界探讨运动科技革新与应用斗地主赢三张伟德官方网站正规手机赌博直营真人平台

　　仙剑系列最美女主◈◈✿★，TES对战WBG这地枪案1死5伤她是他的主宰者九州ku游官网入口◈◈✿★！美国2024年以来已发生333起大规模枪案88bifa登陆特码大王B（新图）万博登入平台ManBetx在线登录

　　生命不息◈◈✿★，小巷人家 林家欢喜庄家愁度小满CEO朱光◈◈✿★：推理大模型在金融领域的应用将从外围场景深入到核心业务搏胜彩票亚娱登录官网百老汇体育官方龙8网站多少