当前位置:

首页 > 硬件相关 > CVPR 2026 | 支撑春晚合肥 7 分钟的4K画面奇观 PS-SR让视频超分不用在速度与质量间为难

CVPR 2026 | 支撑春晚合肥 7 分钟的4K画面奇观 PS-SR让视频超分不用在速度与质量间为难

PS-SR伪单步视频超分框架通过投机扩散,由基础模型确定全局结构、草稿模型补充高频细节,结合频域更新规则避免语义漂移。在接近单步推理速度下实现多步扩散的视觉质量,支撑春晚4K画面生成,被CVPR2026接收。

鱼灯破水,凌空游城;火狮踏焰,奋跃腾空;一群剪纸奔马通体透亮,在壁中狂奔;一纸诗词垂挂成瀑,于天幕间翻卷——2026年央视春晚合肥分会场《合韵满江淮》,用一连串美轮美奂的超现实奇观,刷新了虚实融合的想象边界。
很多人不知道的是,支撑这些4K级画面的技术核心,来自智象未来团队提出的PS-SR,一个“伪单步”(Pseudo-Single-Step)视频超分框架。凭借这一突破性工作,该成果已被计算机视觉顶级会议CVPR 2026接收。 把天马行空的创意落地为春晚级的播出画面,不仅需要在4K画质下高效处理海量实拍与生成素材,更重要的是,60帧率下,每一帧都要经得起逐秒推敲。鱼灯的鳞片反光必须与水波同频,奔马的筋肉在疾驰中不能有丝毫畸变,AI生成的特效要与真人实景严丝合缝地“长”在一起——仿佛它们本就属于那个时空。 而这所有一切的前提,离不开一项基础能力:视频超分。没有足够清晰、稳定、真实的底层4K画面,那些极致的细节和虚实融合,根本无从谈起。 当视频超分辨率(Video Super-Resolution, VSR)走向真实应用,一个绕不开的问题出现了:模型究竟应该更快,还是更好? 单步模型速度快,适合部署,却往往难以补出真实高清视频中的高频纹理;多步扩散模型细节丰富、视觉质量强,却因为反复迭代而计算昂贵。对于长视频、高清分辨率和接近实时的增强场景而言,这个矛盾尤为尖锐。 智象未来团队提出的PS-SR,一个“伪单步”视频超分框架,恰好瞄准了这个问题。它并不简单地把多步扩散压缩成一次前向传播,而是重新分配扩散采样中的计算角色:强大的base model(基础模型)只执行最关键的一步,确定全局结构与内容一致性;轻量的draft model(草稿模型)再接力完成后续细节增强。通过这种投机扩散(Speculative Diffusion),PS-SR试图同时获得接近单步模型的速度,以及多步扩散模型擅长的视觉丰富度。
论文标题:PS-SR: Pseudo-Single-Step Video Super-Resolution via Speculative Diffusion ## 视频超分的老难题:快与好,为什么总要二选一? 视频超分不只是把低分辨率画面放大。真实的低清视频通常同时包含压缩伪影、噪声、模糊、纹理缺失和运动退化。模型不仅要恢复单帧纹理,还要保证连续帧之间不闪烁、不漂移。 基于CNN或Transformer的传统VSR方法效率较高,也能保持较强的输入输出一致性,但面对严重退化时,往往只能给出偏平滑的安全结果。扩散模型虽然带来了更强的生成先验,可以在低清人脸、车辆结构、衣物纹理等区域补出更自然的细节,却需要多步采样,推理成本居高不下。 近年来,单步扩散蒸馏方法试图破解这个困局,但单步模型很难完整继承多步扩散的迭代创造力。复杂纹理本是在多轮更新中逐渐形成的,一次性生成时,模型容易退回到更平均、更保守的预测。 PS-SR的核心判断是:真正昂贵的计算,未必每一步都需要。视频超分中的第一步最关键——它要稳住语义、结构和低频内容;后续步骤更多是在稳定基础上补充高频细节。因此,与其让大模型完整跑多步,不如让大模型先打好地基,再让轻模型快速补纹理。 ## PS-SR:用投机扩散制造“伪单步”体验 PS-SR的推理流程由两个不对称模型协作完成。 第一阶段由基础模型(base model)执行。该模型初始化自Wan2.1-T2V-1.3B视频扩散模型,并通过LoRA适配到视频超分任务。它只进行一次全面采样,负责恢复画面的全局结构、语义内容和低频一致性。换句话说,这一步决定“画面应该是什么”。 第二阶段由草稿模型(draft model)接管。草稿模型来自基础模型的轻量化版本,论文中采用从30个DiT blocks中裁剪20个的配置。为了让轻模型仍能获得强表征,PS-SR将基础模型对应层特征拼接给草稿模型,再通过全连接层恢复维度。这样一来,草稿模型不需要重新理解整个视频,只需在强模型给出的基础上推测并补充细节。 训练上,基础模型先在latent space中学习从低质量视频到高质量视频的速度场,并结合VSD和对抗损失增强分布对齐与视觉真实感;随后进入pixel-space training,通过L2损失与LPIPS损失提升局部质量。草稿模型则更聚焦于refinement,主要通过像素空间的L2损失与LPIPS损失学习高频细节恢复。 最终,PS-SR形成一种“1+x”式的采样体验:一个完整的基础模型采样步,加多个轻量草稿模型细化步。它不是严格意义上的单步模型,却在效率上接近单步,并保留了多步细化的空间。
## 频域更新:只补细节,不改内容 多步扩散的优势在于能不断细化纹理,但风险也在这里:模型可能越改越清晰,却越改越不像原视频。为了避免这种语义漂移,PS-SR提出了频域更新规则(Frequency-Domain Update Rule)。 这条规则的目标很直接:草稿模型后续步骤只允许注入高频细节,低频结构必须继承自前一步。具体做法是,将当前视频和新预测视频转换到YUV色彩空间,在亮度通道上提取高频成分,再通过自适应权重融合高频信息,最后与原有低频内容和色度通道组合回RGB空间。 也就是说,基础模型确定骨架,草稿模型补充纹理,而频域更新规则负责守住边界:让增强发生在细节层面,而不是变成内容重绘。 消融实验也从可视化上验证了这一点。去掉频域更新规则后,模型更容易产生看似更锐利、但与原视频结构不完全一致的细节,局部纹理和边缘会出现偏移或重绘。下图展示了FDU的作用:它不是单纯追求锐度,而是在补充高频纹理的同时约束低频内容,让视觉丰富度与内容一致性保持平衡。
## 实验结果:质量、速度和时序稳定性的平衡 PS-SR在YouHQ数据集上训练,评测覆盖合成数据集UDM10、SPMCS、YouHQ40,以及真实世界低质量互联网视频数据集VideoLQ。对比方法包括多步扩散模型STAR、SeedVR,以及单步扩散类方法DLoRAL、SeedVR2和DOVE。 在有高质量GT的数据集上,PS-SR展现出很强的重建能力。以UDM10为例,PS-SR取得SSIM 0.7547、LPIPS 0.2444、DISTS 0.1277,均为对比方法中的最佳结果;在SPMCS上,PS-SR取得PSNR 22.092、SSIM 0.6287、LPIPS 0.2940、DISTS 0.1454,同样体现出稳定优势;在YouHQ40上,PS-SR获得PSNR 21.772、SSIM 0.5873、LPIPS 0.3011和NIQE 3.7508等有竞争力的结果。
论文同时强调,PS-SR并不盲目追求无参考锐度指标最高。一些方法在CLIP-IQA或MUSIQ上更高,但可能伴随过度锐化和输入偏离。PS-SR的目标是在重建准确性、视觉细节和内容一致性之间取得更均衡的结果。
时序一致性方面,PS-SR在多个合成与真实视频场景中,都表现出更稳定的帧间对齐。下图的可视化直观展示了这一点:相邻帧之间的结构漂移和纹理闪烁更少,说明PS-SR在增强细节的同时,也能更好地维持连续运动中的内容稳定性。
速度方面,PS-SR的“伪单步”优势更直观。在NVIDIA A800 GPU上,对29帧、720×1280分辨率视频进行推理,STAR耗时98.61秒,SeedVR耗时188.93秒,DOVE作为单步方法耗时20.43秒;而PS-SR采用1+3步投机扩散,耗时仅21.11秒。也就是说,它只比最快的单步方法带来很小的额外开销,却相比50步的SeedVR快了约9倍,相比15步的STAR快了约4.7倍。
## 结语:面向高保真视频增强的新范式 PS-SR的意义,不只在于提出一个新模型,更在于给扩散式视频超分提供了一种全新的计算组织方式。 过去,视频超分常常被迫在两端摇摆:要么选择快速但偏平滑的单步模型,要么选择质量更好但昂贵的多步扩散模型。PS-SR证明,这个选择并非绝对。强模型可以只完成最关键的全局一步,轻模型可以接力补足细节,而频域更新规则则保证这些细节不会越界成语义漂移。 这正是“伪单步”的价值所在:它不否认多步生成的必要性,而是让多步生成以更轻、更受控、更接近实际部署的方式发生。对于视频修复、低清素材增强、在线内容生产和高清化播放等场景,PS-SR展示了一个兼顾速度、质量与稳定性的扩散式视频增强方向。
本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
作者最新文章
硬件相关
相关文章 更多
显示器色温怎么调不刺眼?色温调多少看着最舒服
显示器色温怎么调不刺眼?色温调多少看着最舒服

详解显示器色温的舒适调节区间、刺眼的核心诱因,以及在不同使用场景与环境光下的具体调节步骤与校准方法。

显卡风扇不转怎么回事判断是否正常及解决方法
显卡风扇不转怎么回事判断是否正常及解决方法

发现显卡风扇不转先别慌,这很可能是正常的智能启停功能。本文详解如何区分待机静音与硬件故障,提供从软件检测到物理清理的完整解决思路。

笔记本加内存条后无法开机怎么办及解决方法
笔记本加内存条后无法开机怎么办及解决方法

笔记本加装新内存后遇到黑屏或无法开机?不要慌张,本文通过重新插拔、清洁金手指、单根测试等具体操作步骤,帮你快速判断是安装失误还是硬件不兼容,并给出相应解决办法。

电脑主机前置usb不能用怎么解决排查修复教程
电脑主机前置usb不能用怎么解决排查修复教程

针对电脑主机前置USB接口无法识别设备的问题,本文提供一套基于因果逻辑的排查流程。涵盖检查机箱内部USB针脚连接、验证BIOS中USB控制器状态、更新芯片组驱动以及排除供电不足等常见原因,帮助用户快速恢复接口功能。

无线鼠标充不进电解决办法及故障排查步骤
无线鼠标充不进电解决办法及故障排查步骤

遇到无线鼠标充不进电的问题,不要急于更换设备。本文详解从清理接口氧化层、更换数据线到检测电池电压的完整排查流程,帮助你判断是临时故障还是硬件损坏。

蓝牙游戏手柄连接教程吃鸡
蓝牙游戏手柄连接教程吃鸡

想知道如何用蓝牙手柄玩吃鸡游戏?本文详细讲解手机蓝牙手柄的连接步骤、主流映射软件的使用方法以及实战中的键位布局技巧,助你提升射击手感,同时解析外设玩家的匹配机制与注意事项。

游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法
游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法

本文深入分析游戏手柄蓝牙频繁断开且需重连的根本原因,涵盖电池电压检测、操作系统电源管理策略及驱动冲突。通过具体的系统设置调整和固件更新步骤,解决蓝牙握手失败问题,恢复手柄的稳定连接状态。

显示器画面模糊抖动怎么解决及排查方法教程
显示器画面模糊抖动怎么解决及排查方法教程

遇到显示器画面模糊或抖动时,可通过检查视频连接线、调整系统分辨率与刷新率、更新显卡驱动等步骤进行排查和修复。

小米智能门锁换电池后怎么开机
小米智能门锁换电池后怎么开机

小米智能门锁更换新电池后无法开机或屏幕不亮?本文详解电池极性检查、金属触点清洁及强制重启方法,帮你快速解决供电问题,让门锁恢复正常使用。

电视机声音怎么连接到外置音响
电视机声音怎么连接到外置音响

想让电视声音更震撼?本文详解如何通过HDMI ARC、光纤、蓝牙和3.5mm接口将电视连接至外置音响,包含具体设置步骤与常见问题排查,助你轻松打造家庭影院。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

macOS软件
macOS软件

正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

Mac软件 更多
photoshop
photoshop
Windows、macOS 、 iPad

Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

Blender
Blender
Windows、macOS 和 Linux

Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。

灵活计算器
灵活计算器
macOS/iOS/Android

灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

WINDOWS 更多
3dmax(3ds max)
3dmax(3ds max)
Windows

Autodesk 3ds Max 是一款专业的三维建模、动画与渲染软件,广泛应用于建筑可视化、游戏开发、影视动画、广告设计和产品展示等领域。

photoshop
photoshop
Windows、macOS 、 iPad

Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

Blender
Blender
Windows、macOS 和 Linux

Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。