近日,一篇被ECCV 2026接收的論文提出了MixCompress,一種基於專家混合(MoE)和深度混合(MoD)的統一可變位元率(VBR)影像壓縮框架。該研究由Calvin-Khang Ta等人完成,旨在解決學習影像壓縮(LIC)中獨立模型儲存開銷大以及現有VBR方法中特徵糾纏的問題。
在傳統LIC中,每個率失真工作點都需要獨立儲存模型,導致資源浪費。現有的VBR方法透過密集引數調變減少開銷,但強制共享骨幹網路去逼近不同的對映會引起嚴重的特徵糾纏。具體來說,低速率下的平滑梯度與高頻紋理細節的保留存在衝突,導致效能次優。MixCompress的核心創新在於稀疏結構專業化。它採用稀疏門控的專家混合(MoE)路由,成功緩解了梯度衝突。然而,MoE在固定計算預算下執行,無法滿足高速率下增加的表示需求。為此,研究者引入深度混合(MoD)擴充套件,以動態調整模型容量。此外,條件輔助變換(CAT)實現了動態子帶能量調變,使得層次化框架能夠高效地動態縮放容量。
大量評估表明,MixCompress不僅與單獨最佳化的單速率基線效能相當,甚至在某些情況下超越它們,為計算高效的影像編碼建立了新的帕累託前沿。這一成果對於影像壓縮領域具有重要價值,有望推動影片流媒體、雲端儲存等應用的發展。論文已提交至arXiv,並將在ECCV 2026上展示。該工作由Calvin-Khang Ta與三位合作者共同完成,論文編號arXiv:2607.14334。MixCompress透過稀疏門控MoE緩解了梯度衝突,同時引入MoE的深度變體MoD來動態擴充套件模型容量,配合CAT進行子帶能量調變,實現了在統一框架下的可變位元率壓縮,效能超越了傳統單速率模型。