one-step-generation

提到此概念的论文 / 教程

📄 论文 📅 2026-08-24

PixRestore:扔掉 VAE 和 T2I 先验,从零训一个像素空间 DiT 做统一图像修复

港理工 VCLab 的统一图像修复(UIR)工作。核心主张:为 UIR 适配大 T2I 潜空间扩散模型是走了弯路——VAE 会丢掉修复最在意的细节,开放式生成先验会造出与输入不一致的伪影,十亿级骨干 + MLLM + MoE + VAE 编解码则纯属浪费算力。PixRestore 反其道而行:无 VAE、不用 T2I 预训练,直接在 patch 化的 RGB 像素上从零做 flow matching。为了适应不同退化,它用冻结的 DINOv2 多层特征作条件,并训一个「相似度引导的自适应层路由」——用 LQ–HQ 特征相似度当老师,可靠的层融合成 dense 条件(Eq 5),不可靠的层反而加大 HQ 特征监督(Eq 6)。最后把多步模型固定 t=1、配 DINO 特征判别器蒸成一步生成器。结果:约 50M 参数、单步推理、44ms,在 8 类退化上整体保真度/感知质量/退化去除都拿到最优或次优,算力只有 FoundIR-v2 的 1/181、Flux-IR 的 1/1209。

📊 调研 📅 2026-07-27

扩散/流匹配去模糊调研:从 SD 先验到一步化与残差流(2025→2026)

对 2025 年以来用扩散(diffusion)与流匹配(flow matching)做图像去模糊(image deblurring)的工作做的调研,优先收录有模型与代码的方法。逐篇厘清核心贡献 / 方法 / 关键结果(带数字)/ 代码位置,再平行对比、找一致与矛盾、并对有仓库的方法做代码交叉验证;每篇核心工作都配了从原论文裁剪的架构主图。覆盖两大块:(A) 通用图像去模糊——把预训练 SD 当先验的真实去模糊(DeblurDiff、OSDD)、把去模糊重构成扩散过程本身的一步/少步方法(FideDiff、BlurDM)、非配对/自监督路线(TP-Diff、DeblurSDI)、流匹配残差路线(DeblurFlow);(B) 人脸去模糊 / 盲人脸复原——身份保持与反幻觉为主战场(FaceMe、HonestFace、AuthFace、LAFR、ELIR)。所有 arxiv 号、年份、代码状态均联网核实;DeblurDiff 的 EAC、DeblurSDI 的自扩散、BlurDM/AuthFace/FaceMe 的仓库对照真实代码交叉验证。

📄 论文 📅 2026-07-06

MFD: 不比「瞬时速度」比「平均速度」——把时间积分当低通滤波器, 给 flow matching 蒸馏降方差

浙大/普林斯顿:现有蒸馏把 flow 的速度场硬转成 score, 单时刻匹配, 方差大、训练抖。MFD 改成匹配一段区间 [s,t] 上的**时间积分平均速度** (mean flow) —— 积分天然是低通滤波, 把瞬时速度里的高频噪声磨平, 梯度方差更低。理论上证明「匹配平均速度 ⇒ 分布对齐」(Mean Flow Matching 定理), 且 VSD 只是区间缩成一点 (s→t) 的退化特例。SANA 1.6B 上 4 步 FID(DINOv2) 43.68→33.28; 4D 占据预测单步 IoU 37.07 (teacher 10 步 37.52)。

📄 论文 📅 2026-07-03

RDM: 把「一步生成」拆成两根设计轴——十年前被判死刑的 MMD, 估计对了就是 SOTA

一步图像生成 = 让生成分布在冻结编码器的特征空间里对齐真实分布。作者把这条无教师路线命名为 RDM (Representation Distribution Matching), 指出所有实例只差两根轴:怎么比 (comparison) 和 在哪比 (representation)。逐轴消融翻掉三条隐含假设:(1) 十年前被嫌太弱的经典 MMD, 只要「批内精确排斥 + 对全量数据的 Nyström 冻结吸引」估计对, 就是又强又可扩的目标;(2) 生成批越大越好, 最优点在 2048 以上, 远超常规;(3) 任何单个编码器都能被刷穿 (分数掉到真实之下但图仍假), 所以要对一整排编码器做「受约束优化」。合成 iRDM:ImageNet 一步 SOTA SW_r14 1.30 (真实地板 1.0), 并把四步 FLUX.2 [klein] 后训练成一步模型, GenEval 0.826 反超四步版 0.794, 只花 90 H200 GPU-hours。

📊 调研 📅 2026-06-30

扩散超分调研:一步化浪潮与 SeedVR 之后的视频超分(2024→2026)

对 2024–2026 扩散超分(图像 + 视频)的研究调研,主线是「把多步随机采样压成一步确定性前向」。逐篇厘清每个工作的核心贡献 / 方法 / 关键结果 / 代码位置,再平行对比、找出一致与矛盾、并把每个有仓库的方法的核心主张与其代码逐一交叉验证。覆盖图像一步化(OSEDiff/OMGSR/OP4KSR/OFTSR/ODTSR/TEASR)与 SeedVR 之后的视频超分(SeedVR2/DOVE/DLoRAL/DUO-VSR/FlashVSR/InfVSR/Stream-DiffVSR/STCDiT)。所有 arxiv 号均联网核实;代码主张对照 OSEDiff/OMGSR/DLoRAL/SeedVR/FlashVSR/StableSR 真实函数验证。

📘 教程 📅 2026-06-30

扩散超分全景:从多步先验到一步前向,再到视频流式

8 节螺旋系统讲透扩散超分(Diffusion Super-Resolution)的演化主线:把"多步随机采样的强生成先验"逐步压成"一步确定性前向",再从图像扩展到视频的时序一致性与流式实时。地基是 SR3/StableSR 的"冻结 SD 当先验、只学条件"(§1–§2);其上是三条一步化路线——分数蒸馏(OSEDiff/VSD,§3)、中间时刻注入+GAN 一步(OMGSR/OP4KSR,§4);再转入视频:SeedVR 的 shifted-window 时空 DiT(§5)、视频一步化与时序一致(DLoRAL 双 LoRA / DOVE / DUO-VSR,§6)、流式/长视频/实时(FlashVSR 稀疏注意力 / InfVSR 因果 KV-cache / Stream-DiffVSR,§7),最后收敛到统一视角与选型白地(§8)。代码均 verbatim 引自 StableSR、OSEDiff、OMGSR、SeedVR、DLoRAL、FlashVSR 真实仓库(行号经 sed 核对)。

📄 论文 📅 2026-06-30

OP4KSR:一步、无分块的 4K 超分,外加把 Flux「周期格子伪影」连根拔起

OP4KSR 是第一个「一步 + 无分块」的真实世界 4K 超分框架:靠 UltraFlux 的 F16 极压缩 VAE 把 4096×4096 的显存压到单卡可跑,再借 [[omgsr-2025]] 的中间时刻对齐把 Flux 微调成一步前向(注意:是 GAN 式一步微调,**不是师生蒸馏**),5.75 秒出一张 4K 图。 但一步化会触发周期 32 像素的格子伪影。作者把病因拆成两层——RoPE 相位坍缩让相邻 token 不可分(θ=10000 太大)、以及 2×2 打包后 unpack 把通道当空间用——并对症下两味药:RoPE 基频从 10000 降到 100(RFR)+ 一个基于自相关的周期性损失(L_AP)。

📄 论文 📅 2026-06-30

OMGSR:一步超分的关键不是蒸馏,是把低清图喂到「中间时刻」——SNR 算出最佳注入点 + GAN 训练

OMGSR 把一步真实世界超分(Real-ISR)的成败归结为一个「潜空间鸿沟」:以往方法把低清图 latent 注入到扩散调度器的 t=999(纯噪声)或 t=1(干净图),但低清图 latent 既不是噪声也不是干净图——它最接近预训练扩散在某个**中间时刻 t\*** 的带噪 latent。 作者用信噪比 (SNR) 把这个「最佳中间时刻」**算出来**(SD2.1-base 上 t\*=273),再用 LRR 损失(LoRA 微调 VAE 编码器)把低清 latent 进一步拉向 t\* 的带噪 latent,然后在 t\* 处做一步去噪。整套是 **GAN 训练**(生成器=扩散模型本身,判别器=DINOv3-ConvNeXt + 多级头),不是师生蒸馏。这就是 [[op4ksr-2026]] 4K 超分的直接前身。

📄 论文 📅 2026-06-18

OFTSR:一步超分 + 可调「保真度↔真实感」的整条曲线

OFTSR 用两阶段方案做单步图像超分:先训一个「噪声增广的条件 rectified flow」当教师,再蒸馏出一个一步学生网络——蒸馏的约束是「学生从不同时间 t、s 的预测必须落在教师同一条 PF-ODE 轨迹上」。 关键好处:一步推理时只需调一个超参 t,就能在「高 PSNR / 高保真」和「低 LPIPS / 高真实感」之间连续滑动,把感知-失真权衡的整条曲线塞进单步模型,而过去的单步蒸馏只能锁死在曲线上的一个点。