当前位置: 首页
科技数码
阿里云与上海交大联合攻关DiT推理加速,三篇论文入选ECCV

阿里云与上海交大联合攻关DiT推理加速,三篇论文入选ECCV

时间:2026-07-19
转载

阿里云与上海交通大学合作的三篇论文入选ECCV2026,聚焦DiffusionTransformer推理加速,提出时序误差校正、自适应特征分解、时空令牌筛选技术,将算力需求缩短近90%,综合提速最高达14 76倍。这些创新显著降低了扩散模型推理成本,为高效AI生成奠定基础。

7月9日消息,欧洲计算机视觉顶级国际会议ECCV 2026正式公布论文录取结果,阿里云与上海交通大学张林峰教授团队合作的3篇论文被主会收录。这些研究成果均聚焦于Diffusion Transformer(DiT)架构下的高效推理加速,分别围绕时序误差校正、自适应特征分解以及时空令牌筛选三条不同技术路线展开。在高分辨率图像生成场景中,这些创新方法能够将计算需求缩减近90%,综合推理速度最高提升达14.76倍。

ECCV到底有多权威?作为计算机视觉领域公认的三大国际顶级学术会议之一,目标检测、图像分割、视觉Transformer等多项影响行业发展方向的核心技术,都曾在此首次亮相。而DiT作为当前主流视觉生成模型的通用架构,在文生图、文生视频、图像编辑等场景中得到广泛应用。然而,其推理成本高、生成耗时长的问题也日益凸显,被业界视为阻碍AIGC规模化落地的关键瓶颈。


3篇论文入选视觉顶会ECCV 2026

首先介绍第一篇论文,《Accelerating Diffusion Transformers with Gaussian Process Rectified Feature Cache》。其核心思路是解决时序缓存中的误差校正问题。DiT生成一张图像通常需要执行几十甚至上百步的迭代去噪,业界常用的“特征缓存”策略虽然能够跳过部分步骤进行复用,但预测偏差会像滚雪球一样逐渐累积放大。团队发现缓存残差在局部严格服从零均值高斯分布,因此创新性地利用高斯过程回归构建了一个轻量级校正模块,可直接挂载到现有主流时序缓存算法之后。与TaylorSeer结合后,在Qwen-Image上计算量能再降低19.3%,同时PSNR提升0.9dB,LPIPS从0.65降至0.29,生成效果更快且更清晰,成功解决了长区间预测漂移这一长期存在的技术难题。


对比不同基线缓存方法与GP-Refiner结合前后生成图像的视觉效果

第二篇论文《LinCa: Accelerating Diffusion Models via Learnable Decomposed Feature Caching》提出了一个基于可学习可逆网络的特征缓存框架,命名为LinCa。该研究首次系统性地揭示了扩散特征演化过程中的异质性——这种异质性不仅存在于跨模型之间,还同时存在于跨去噪阶段和跨特征维度这三个层面。LinCa的核心做法是将原始特征沿通道维度拆解成具有不同“性格”的子分量,对连续性强的部分使用高阶预测器进行外推,而对突变性强的部分则直接复用。仅需单卡GPU训练1小时即可完成适配。测试数据表现优异:FLUX.1-dev实现5.51倍加速,Qwen-Image达到6.95倍,HunyuanVideo视频模型实现5.50倍加速,图像质量指标全面领先现有方案。


在Qwen-Image-Edit上,LinCa表现出更优的提示理解能力,能够生成高保真图像,同时保持未编辑区域的一致性

动态分辨率是高分辨率DiT推理的核心加速方向之一,但传统方案存在一个尴尬之处:分辨率切换时,会统一上采样全部隐式令牌,导致大量背景和低语义区域产生冗余计算;而现有的局部上采样方法,又大多依赖边缘、纹理这类底层视觉特征,难以准确匹配文本语义和编辑指令的需求,关键区域的细节容易丢失。

阿里云与交大合作的第三篇论文《A ViTS: Adaptive Spatiotemporal Token Selection for Efficient DiTs with Dynamic Resolution》提出了一种时空动态令牌筛选框架。该框架通过“低分辨率打底—选择性上采样—全分辨率精修”三阶段生成流程,巧妙地去除了背景与低语义区域的冗余算力。该方法完全在推理阶段执行,无需重新训练,并且与特征缓存、模型蒸馏、量化等加速技术完全正交。实验数据显示,A ViTS在FLUX模型上最高可实现6.34倍推理加速,编辑场景下FLOPs削减近9倍;叠加步骤蒸馏后,综合提速最高能达到14.76倍。


A ViTS 整体架构:包含时空重要度计算模块与三级分辨率递进调度流程

据了解,上述3项技术已完整集成到阿里云自研的WuYingDiT推理加速引擎,并全量落地至无影灵构一站式AIGC创研平台,服务于游戏美术、电商设计、影视制作、新媒体等行业客户。该套引擎原生适配FLUX、Qwen、混元视频等主流生成基座,客户无需改造现有工作流即可一键启用。

阿里云方面表示,未来将持续在端侧生成式AI前沿技术方向开展研究,将真实业务场景中的技术难题与学术研究紧密结合,不断迭代WuYingDiT加速引擎,进一步降低端侧和边缘场景下高保真生成式AI的应用门槛。

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

同类文章
更多
2026中国航空产业大会10月底南昌启幕:首次与航博会同期举办,聚焦低空经济新路径

2026中国航空产业大会10月底南昌启幕:首次与航博会同期举办,聚焦低空经济新路径

2026中国航空产业大会与南昌航空产业博览会将于10月31日至11月4日在南昌国际博览城首次同期举办。大会聚焦低空经济,设置主旨报告、行业专家报告及低空产业洽谈会等主题活动,旨在探讨航空产业新路径,推动低空物流、城市巡检等新业态集聚,打造中部领先、全国知名的航空产业交流高地。

时间:2026-08-31 11:17
联想来酷Air 16酷睿5 315版开售:国补后3739元,16英寸轻薄本选购指南

联想来酷Air 16酷睿5 315版开售:国补后3739元,16英寸轻薄本选购指南

联想来酷Air 16酷睿5 315版于8月27日正式开售,搭载6核处理器与12GB内存,配备16英寸16:10屏幕。叠加国家补贴后预估到手价仅3739 15元,主打长续航与静音办公。本文详细解析其硬件配置、接口布局及购买建议,助您快速决策。

时间:2026-08-28 14:44
牛来AirPods保护套海外走红:萌趣硅胶设计引发关注

牛来AirPods保护套海外走红:萌趣硅胶设计引发关注

一款名为“牛来”的AirPods硅胶保护套在日本市场引发关注,售价约1726日元。其独特的搞怪萌趣造型、兼容多代机型的硅胶材质以及专属挂饰设计,使其在社交平台上迅速走红,成为近期备受瞩目的国产原创数码周边产品。

时间:2026-08-28 14:44
行李箱选购全攻略:材质、轮子与尺寸避坑指南

行李箱选购全攻略:材质、轮子与尺寸避坑指南

选购行李箱时,材质、轮子和尺寸是核心决策点。PP材质抗冲击且轻便,适合频繁托运;万向轮决定推行顺滑度;尺寸需匹配航空限重。本文拆解关键参数,结合具体产品案例,助您选出耐用且实用的行李箱。

时间:2026-08-28 14:44
《湮灭之潮》成都试玩会:技嘉RTX 5080风魔显卡实测体验

《湮灭之潮》成都试玩会:技嘉RTX 5080风魔显卡实测体验

2026年8月《湮灭之潮》成都试玩会圆满举行,千名玩家现场体验西方奇幻大作。文章重点解析技嘉RTX 5080风魔显卡在虚幻5引擎下的表现,涵盖Blackwell架构、DLSS 4 5技术及16GB GDDR7显存对高画质流畅运行的支撑作用。

时间:2026-08-28 14:43
热门专题
更多
刀塔传奇破解版无限钻石下载大全 刀塔传奇破解版无限钻石下载大全
洛克王国正式正版手游下载安装大全 洛克王国正式正版手游下载安装大全
思美人手游下载专区 思美人手游下载专区
好玩的阿拉德之怒游戏下载合集 好玩的阿拉德之怒游戏下载合集
不思议迷宫手游下载合集 不思议迷宫手游下载合集
百宝袋汉化组游戏最新合集 百宝袋汉化组游戏最新合集
jsk游戏合集30款游戏大全 jsk游戏合集30款游戏大全
宾果消消消原版下载大全 宾果消消消原版下载大全