当前位置:

首页 > 硬件相关 > 阿里云联合上海交大攻关DiT推理加速,3篇论文入选视觉顶会ECCV

阿里云联合上海交大攻关DiT推理加速,3篇论文入选视觉顶会ECCV

本文目录

    阿里云与上海交通大学合作的三篇论文入选ECCV2026,聚焦DiffusionTransformer推理加速,提出时序误差校正、自适应特征分解、时空令牌筛选技术,将算力需求缩短近90%,综合提速最高达14.76倍。这些创新显著降低了扩散模型推理成本,为高效AI生成奠定基础。

    7月9日消息,欧洲计算机视觉顶级会议ECCV 2026放榜,阿里云与上海交通大学张林峰教授团队合作的3篇论文被主会收录,研究方向均聚焦Diffusion Transformer(DiT)架构下的高效推理加速,覆盖了时序误差校正、自适应特征分解、时空令牌筛选三条不同的技术路线。在高分辨率图片生成场景下,这些成果能将算力需求缩短近90%,综合提速最高可达14.76倍。

    这个会议到底有多牛?ECCV是计算机视觉领域公认的三大国际顶级学术会议之一,目标检测、图像分割、视觉Transformer等多项影响行业走向的核心技术,都曾在这里首次亮相。而DiT作为当前主流视觉生成模型的通用架构,在文生图、文生视频、图像编辑等场景中应用广泛,但推理成本高、生成耗时长的问题也日益突出,被行业视为AIGC规模化落地的核心瓶颈。


    3篇论文入选视觉顶会ECCV 2026

    先说第一篇,《Accelerating Diffusion Transformers with Gaussian Process Rectified Feature Cache》,核心思路是搞定时序缓存误差校正。DiT生成一张图片通常需要跑几十甚至上百步去噪,业界常用的“特征缓存”策略虽然能跳步复用,但预测偏差会像滚雪球一样越滚越大。团队发现缓存残差在局部严格服从零均值高斯分布,于是用高斯过程回归搭了一个轻量级校正模块,可以直接挂载到主流时序缓存算法后面。与TaylorSeer结合后,在Qwen-Image上能将计算量再降19.3%,同时PSNR提升0.9dB,LPIPS从0.65降至0.29,生成效果更快也更清晰,算是破解了长区间预测漂移这个老大难问题。


    对比不同基线缓存方法与GP-Refiner结合前后生成图像的视觉效果

    第二篇《LinCa: Accelerating Diffusion Models via Learnable Decomposed Feature Caching》提出了一个基于可学习可逆网络的特征缓存框架,名字叫LinCa。它首次系统性地揭示了扩散特征演化的异质性——这个异质性不仅存在于跨模型之间,还同时存在于跨去噪阶段和跨特征维度三个层面。LinCa的做法是将原始特征沿通道维度拆解成不同“性格”的子分量,对连续性强的用高阶预测器外推,对突变性强的就直接复用。单卡GPU训练1小时就能完成适配。测试数据很漂亮:FLUX.1-dev实现5.51倍加速,Qwen-Image达到6.95倍,HunyuanVideo视频模型实现5.50倍加速,画质指标全面领先现有方案。


    在Qwen-Image-Edit上,LinCa表现出更优的提示理解能力,并生成高保真图像,同时保持未编辑区域的一致性

    动态分辨率是高分辨率DiT推理的核心加速方向之一,但传统方案有个尴尬的地方:分辨率切换时会统一上采样全部隐式令牌,导致大量背景和低语义区域产生冗余计算;现有的局部上采样方法呢,又大多依赖边缘、纹理这类底层视觉特征,难以匹配文本语义和编辑指令的需求,关键区域的细节容易丢失。

    阿里云和交大合作的第三篇论文《A ViTS: Adaptive Spatiotemporal Token Selection for Efficient DiTs with Dynamic Resolution》提出了一种时空动态令牌筛选框架,通过“低分辨率打底—选择性上采样—全分辨率精修”三阶段生成流程,巧妙地砍掉了背景与低语义区域的冗余算力。这个方法完全在推理阶段执行,不需要重新训练,而且和特征缓存、模型蒸馏、量化等加速技术完全正交。实验数据显示,A ViTS在FLUX模型上最高实现6.34倍推理加速,编辑场景FLOPs削减近9倍;叠加步骤蒸馏后,综合提速最高能达到14.76倍。


    A ViTS 整体架构:包含时空重要度计算模块与三级分辨率递进调度流程

    据了解,上述3项技术已经完整集成到阿里云自研的WuYingDiT推理加速引擎,并且全量落地至无影灵构一站式AIGC创研平台,服务于游戏美术、电商设计、影视制作、新媒体等行业客户。这套引擎原生适配FLUX、Qwen、混元视频等主流生成基座,客户不需要改造现有工作流就能一键启用。

    阿里云方面表示,未来将持续在端侧生成式AI前沿技术方向开展研究,把真实业务场景中的技术难题与学术研究结合在一起,不断迭代WuYingDiT加速引擎,进一步降低端侧和边缘场景下高保真生成式AI的应用门槛。

    本文内容来源于网友投稿,如有侵权请联系删除。
    作者最新文章
    硬件相关
    相关文章 更多
    笔记本加内存条后无法开机怎么办及解决方法
    笔记本加内存条后无法开机怎么办及解决方法

    笔记本加装新内存后遇到黑屏或无法开机?不要慌张,本文通过重新插拔、清洁金手指、单根测试等具体操作步骤,帮你快速判断是安装失误还是硬件不兼容,并给出相应解决办法。

    电脑主机前置usb不能用怎么解决排查修复教程
    电脑主机前置usb不能用怎么解决排查修复教程

    针对电脑主机前置USB接口无法识别设备的问题,本文提供一套基于因果逻辑的排查流程。涵盖检查机箱内部USB针脚连接、验证BIOS中USB控制器状态、更新芯片组驱动以及排除供电不足等常见原因,帮助用户快速恢复接口功能。

    无线鼠标充不进电解决办法及故障排查步骤
    无线鼠标充不进电解决办法及故障排查步骤

    遇到无线鼠标充不进电的问题,不要急于更换设备。本文详解从清理接口氧化层、更换数据线到检测电池电压的完整排查流程,帮助你判断是临时故障还是硬件损坏。

    蓝牙游戏手柄连接教程吃鸡
    蓝牙游戏手柄连接教程吃鸡

    想知道如何用蓝牙手柄玩吃鸡游戏?本文详细讲解手机蓝牙手柄的连接步骤、主流映射软件的使用方法以及实战中的键位布局技巧,助你提升射击手感,同时解析外设玩家的匹配机制与注意事项。

    游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法
    游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法

    本文深入分析游戏手柄蓝牙频繁断开且需重连的根本原因,涵盖电池电压检测、操作系统电源管理策略及驱动冲突。通过具体的系统设置调整和固件更新步骤,解决蓝牙握手失败问题,恢复手柄的稳定连接状态。

    显示器画面模糊抖动怎么解决及排查方法教程
    显示器画面模糊抖动怎么解决及排查方法教程

    遇到显示器画面模糊或抖动时,可通过检查视频连接线、调整系统分辨率与刷新率、更新显卡驱动等步骤进行排查和修复。

    小米智能门锁换电池后怎么开机
    小米智能门锁换电池后怎么开机

    小米智能门锁更换新电池后无法开机或屏幕不亮?本文详解电池极性检查、金属触点清洁及强制重启方法,帮你快速解决供电问题,让门锁恢复正常使用。

    电视机声音怎么连接到外置音响
    电视机声音怎么连接到外置音响

    想让电视声音更震撼?本文详解如何通过HDMI ARC、光纤、蓝牙和3.5mm接口将电视连接至外置音响,包含具体设置步骤与常见问题排查,助你轻松打造家庭影院。

    打印机加墨水后打印不出颜色的原因及解决方法
    打印机加墨水后打印不出颜色的原因及解决方法

    解决打印机加墨水后打印无色的问题,涵盖墨盒芯片计数器重置、喷头气锁排除方法以及驱动程序颜色设置检查,帮助用户快速恢复彩色打印功能。

    显示器无信号但主机正常工作原因排查与解决方法
    显示器无信号但主机正常工作原因排查与解决方法

    面对主机运转正常但显示器无信号的困境,本文通过场景化分析,指导用户从线缆检查、输入源切换、内存金手指清洁到显卡重新插拔,逐步排除故障,恢复显示。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    macOS软件
    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    Mac软件 更多
    photoshop
    photoshop
    Windows、macOS 、 iPad

    Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

    Blender
    Blender
    Windows、macOS 和 Linux

    Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。

    灵活计算器
    灵活计算器
    macOS/iOS/Android

    灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

    WINDOWS 更多
    3dmax(3ds max)
    3dmax(3ds max)
    Windows

    Autodesk 3ds Max 是一款专业的三维建模、动画与渲染软件,广泛应用于建筑可视化、游戏开发、影视动画、广告设计和产品展示等领域。

    photoshop
    photoshop
    Windows、macOS 、 iPad

    Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

    Blender
    Blender
    Windows、macOS 和 Linux

    Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。