李飞飞团队新突破:简单调整生成顺序,显著提升图像生成质量

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈
文章转载于量子位
作者:闻乐
长期以来,AI生图被一个经典矛盾困扰。
潜空间模型效率高,但细节有损耗;像素空间模型保真度高,却容易结构混乱、速度慢。
要么快要没准,大家几乎默认这是架构带来的取舍问题,没法彻底解决。
但扩散模型生图,顺序真的对吗?
李飞飞团队最新论文提出的Latent Forcing方法直接打破了这一共识,他们发现生成的质量瓶颈不在架构,而在顺序。

简单说就像画画必须先打草稿再填色,AI也需要一个「先定结构、后填细节」的强制逻辑。
Latent Forcing仅通过重排生成轨迹,像素扩散模型不仅找回了效率,更在多项指标上刷新SOTA。
1
传统方法瓶颈
在深入了解Latent Forcing之前,咱先来说说当前两大方法的瓶颈。
传统像素级扩散模型之所以画图会画歪,是因为它在降噪过程中,高频的纹理细节往往会干扰低频的语义结构。
模型常常在还没搞清楚物体的整体轮廓时,就被迫去预测局部的像素颜色,其实这在本质上就违背了视觉生成的自然逻辑。
为了解决这个问题,行业此前大多转向潜空间。
它通过预训练的tokenizer把图像压到低维空间,生成速度飞起。
但潜空间模型必须依赖一个预训练的解码器,但这不仅会引入重建误差,也让模型失去了端到端建模原始数据的能力。

于是李飞飞团队思考——
能不能既保留像素级的无损精度,又获得潜空间的结构引导?
1
先打个草稿
Latent Forcing的答案是——
对扩散轨迹重新排序。

怎么做的呢?
在不改变基础Transformer架构的前提下,引入了双时间变量机制。
在训练和生成过程中,模型会同时处理像素和潜变量。不同的是,团队为两者定制了独立的降噪节奏:
潜变量先行:在生成初期,潜变量会率先完成降噪,在大尺度上确立图像的语义骨架;
像素填色:在结构确定后,像素部分再跟进进行精细化降噪。

这么一看,潜变量就像是一个临时的草稿本。
生成结束时,这个草稿本直接丢弃,最终输出仍是100%无损的原始像素图像,没有任何decoder。
整个过程端到端、可扩展,几乎不增加计算量(token数量不变,速度接近原生DiT)。
这种先latent后pixel的细微调整,在ImageNet榜单上展现了出色的表现。
在相同计算规模,训练80个epochs的条件下,Latent Forcing在ImageNet-256任务中,条件生成的FID分数较此前最强的像素级模型JiT+REPA,从18.60降到9.76,接近腰斩。

在200个epoch的最终模型(ViT‑L 规模)下,Latent Forcing实现了条件生成FID 2.48(guided)、无条件生成FID 7.2(unguided)的分数。
创下像素空间扩散Transformer新的SOTA。

过去学术界普遍认为,必须通过更高倍率的有损压缩才能换取好的FID表现。
Latent Forcing则用数据反驳了这一观点——
在保持100%原始像素精度的情况下,我们依然能跑出超越有损模型的性能。
Latent Forcing项目由李飞飞领衔。
第一作者Alan Baade是李飞飞的学生,斯坦福计算机系博士生,在扩散模型和生成建模方向有深入研究。

其他斯坦福共同作者包括Eric Ryan Chan、Kyle Sargent、Changan Chen和Ehsan Adeli。
此外,密歇根大学教授Justin Johnson作为合作作者参与其中。
论文地址:https://arxiv.org/abs/2602.11401
点个“爱心”,再走 吧
相关攻略
折叠屏的终极形态是什么目前还没有一个真正的说法,原因也非常的简单,那就是各大厂商都还在打磨研究的过程中。不过去年Pura X发布时,16:10的阔型屏和3 5英寸的方形外屏让人眼前一亮,看视频比16
说实在的,这几年的手机影像提升幅度很夸张,从一英寸主摄,到双潜望长焦,再到外接增距镜,厂商们一直在探索手机摄影的边界。现在小米18 Ultra的超前瞻爆料可能要把这个边界推到一个新的高度,那就是三颗
IT之家 3 月 28 日消息,博主 @数码闲聊站 今天在微博发文称:一个超前瞻,下一代超大杯 " 可能 " 会有 LOFIC 长焦, " 可能 " 会出现双 LOFIC 影像, " 可能 " 会有 3
快科技3月28日消息,据博主定焦数码爆料,华为将在下月发布的全新Pura X机型将改名,目前还不确定全新命名方式,但不会在延续之前的命名叫做Pura X2了。这款新机将成为全球首款横向大尺寸扩折叠手
目前,OPPO已经正式宣布K15 Pro 系列新机将于4月1日发布。与此同时,新机发布前的预热剧透也已经正式开始。今天,OPPO最新公布了K15 Pro 系列的外观设计,并带来了赛博光翼,起源灰,光
热门专题
热门推荐
在明日方舟终末地中,小陈剧情的开启需要满足一定条件并完成特定任务。首先,要确保玩家已经达到一定的游戏进度。这包括推进主线剧情到一定阶段,解锁了相应的区域和功能。随着主线剧情的推进,
前言《逐玉》大结局落幕那晚,我盯着屏幕良久,胸口像压了块浸水的棉絮,沉闷得喘不过气。从首播时满怀热望地守在更新页面,到中期边看边叹气、反复暂停找逻辑漏洞,再到最后几集干脆调成倍速、只为“完成任务”式
3月28日消息 据新华社报道,俄罗斯政府日前宣布了一项重要的能源指令。俄副总理亚历山大·诺瓦克已指示能源部起草行政命令,计划从4月1日起全面禁止汽油出口。此举的核心目的是在中东战事引发全球能源市场动
蓝海搜书最新可用网址是https: www lanhaizw com ,平台具备极简无广告界面、全球CDN加速、三类自适应阅读模式、四重语义检索、27个细分分类、跨设备同步及离线
在网络信息爆炸的时代,一款好用的浏览器能为我们带来便捷与丰富的体验。悟空浏览器网页版正式版入口,成为众多用户探索网络精彩的关键通道。悟空浏览器以其简洁界面和强大功能吸引着广大用户。





