跳到主要內容
AI News HubLIVE
站內改寫2 分鐘閱讀

SpikeDS:用於3D MRI中神經侵犯預測的雙稀疏性Spikformer

文章摘要

SpikeDS是一種新型脈衝神經網路架構,透過結合啟用稀疏性和空間稀疏性,高效地從3D MRI中預測膽管癌的神經侵犯,在139名患者的佇列中實現了0.753的AUC,能耗僅14.4 mJ。

來源arXiv Computer Vision作者: Induk Um, Youngung Han, Kyeonghun Kim, Yului Jeong, Jina Jeong, Hyunsu Go, Dohyun Kweon, Sungha Park, Junga Kim, Anna Jung, Suah Park, Hyuk-Jae Lee, Pa Hong, Woo Kyoung Jeong, Won Jae Lee, Ken Ying-Kai Liao, Nam-Joon Kim
SpikeDS:用於3D MRI中神經侵犯預測的雙稀疏性Spikformer
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明
直接讀正文

神經侵犯(PNI)是膽管癌(CCA)患者預後不良的重要病理特徵,與腫瘤的區域性復發和遠處轉移密切相關。然而,透過3D磁共振成像(MRI)檢測PNI極具挑戰性,因為腫瘤周邊的成像特徵通常非常細微,且空間異質性高,使得傳統的二維分析難以捕捉這些稀疏的惡性訊號。要準確識別這些空間上稀疏的線索,必須對3D MRI進行全容積分析,但現有的深度學習模型在處理三維醫學影像時計算開銷巨大,嚴重限制了其在臨床環境中的實際部署。

為了克服這一瓶頸,研究團隊提出了一種名為SpikeDS(雙稀疏性Spikformer)的新型脈衝神經網路(SNN)架構。與傳統的卷積神經網路或Transformer不同,SNN透過二進位制的脈衝序列進行資訊傳遞,天然具有啟用稀疏性,從而大幅降低能耗。SpikeDS在此基礎上進一步引入了空間稀疏性:它根據神經元的發放率對3D影像中的視窗進行剪枝,僅保留最顯著的視窗進行處理。這種雙稀疏性策略透過一個新穎的雙稀疏性脈衝注意力(DSSA)模組實現,該模組包含兩個互補的機制。其一是基於視窗的專家混合脈衝注意力(W-EMSA),它僅對發放率高的顯著視窗施加註意力運算,從而避免了對無關區域的冗餘計算。其二是跨視窗脈衝自注意力(CW-SSA),它透過一種非對稱的設計讓被剪枝的視窗仍然提供鍵值資訊,從而實現了全域性上下文的交換,彌補了區域性視窗注意力可能帶來的資訊損失。

研究團隊在一個包含139名膽管癌患者的臨床佇列上進行了5折交叉驗證實驗。結果顯示,SpikeDS在預測PNI方面達到了0.753的曲線下面積(AUC),而能耗僅為14.4毫焦耳。與多種基線方法相比,SpikeDS在診斷效能和能效兩方面均取得了最優表現。這一成果表明,雙稀疏性策略為提升3D脈衝Transformer的效率提供了一條切實可行的硬體感知路徑,且無需犧牲診斷準確性。未來,SpikeDS有望被整合到行動式或低功耗的醫療成像裝置中,推動高精度、低能耗的醫學影像分析進入臨床實踐。此外,該方法的原理也可推廣至其他需要處理稀疏訊號的三維醫學影像任務,如腫瘤分割或早期病變檢測。

展開要點與分析

文章情報

研究者進階

要點

  • 神經侵犯(PNI)是膽管癌預後不良的標誌,但3D MRI檢測存在挑戰。
  • SpikeDS利用脈衝通訊的啟用稀疏性和視窗剪枝的空間稀疏性。
  • 在臨床佇列中,AUC達0.753,能耗僅14.4 mJ,優於基線方法。
  • 雙稀疏性策略提高了3D脈衝變壓器的效率,不犧牲診斷效能。

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。