近日,來自多所機構的研究人員提出了一種統一的變分框架,旨在解決深度弱監督影像分割中的稀疏畫素級監督問題。該研究於2026年7月22日提交至arXiv,論文標題為《A Unified Variational Framework for Deep Weakly Supervised Image Segmentation》,作者包括Yin King Chu等五人。該工作已被分類在計算機視覺與模式識別領域(cs.CV)。
影像分割是計算機視覺的核心任務之一,但在實際應用中,獲取畫素級的精確標註往往代價高昂。弱監督學習透過使用稀疏的標註(例如塗鴉、點或邊界框)來降低標註成本,然而,如何處理這些稀疏且不完整的標籤仍然是一個開放挑戰。傳統的弱監督方法通常依賴於啟發式規則或額外的先驗知識,難以在複雜場景下保持一致效能。
該研究提出了一種基於變分法的統一框架。其核心是一個單純形約束的Potts模型,並引入了平滑的周長正則化子。這一組合使得能量泛函同時具備凸性和光滑性,從而能夠有效避免區域性極小值問題,並可透過迭代方法高效最佳化。值得注意的是,該能量泛函可以無縫整合到深度學習中,作為弱監督訓練的損失函式,或者單獨用於最佳化分割結果。
在稀疏標籤的處理上,研究者採用了創新的思路:將標籤資訊透過資料保真項融入模型。具體而言,他們利用再生核希爾伯特空間(RKHS)中的函式擴充套件問題,構建了一個模糊隸屬函式。該函式能夠自然地處理畫素級的不確定性,並有效捕捉影像中不均勻的強度統計特性——這是醫學影像等應用中常見的挑戰。透過離散化連續形式的損失函式,研究者訓練了標準的卷積神經網路架構(如U-Net),並進行了多組對比實驗。
實驗在多個公開資料集上進行,涵蓋了不同的分割場景。結果表明,該方法在魯棒性和效能上均顯著優於非訓練基線和部分交叉熵(PCE)方法。即便在僅提供極少量標註畫素的情況下,該方法也能保持較高的分割精度。更重要的是,它無需依賴真實分割影像即可達到與完全監督方法可比的效能,這在實際應用中具有極大的價值。
這一研究提供了一個靈活且強大的工具,為弱監督影像分割領域注入了新的活力。未來,該方法有望在醫學影像分析、自動駕駛感知、遙感影像處理等多個領域發揮重要作用。感興趣的讀者可以透過arXiv編號2607.19669獲取論文全文及補充材料。