醫療編碼是將住院病歷中的診斷和手術操作轉化為標準化程式碼(如ICD碼)的過程。由於不同程式碼往往需要從病歷的不同段落、不同章節中提取資訊,即使對於受過專門培訓的編碼員,這也是一項極為複雜且容易出錯的任務。近年來,研究者嘗試使用深度學習方法將其建模為多標籤文本分類問題,但面臨著兩大挑戰:一是病歷文本通常篇幅較長,模型需要捕捉長距離依賴;二是不同程式碼的關注點差異巨大,同一段文件對於不同程式碼的重要性截然不同。發表在arXiv上的一篇論文(arXiv:2607.25129)提出了一種名為“深度標籤注意時序卷積網路”(Deep Label-Wise Attentive Temporal Convolutional Networks)的新型模型,專門應對這些挑戰。該模型的核心架構由兩部分組成:首先是一個多層級時序卷積網路(Temporal Convolutional Network, TCN),用於提取整個文件的全域性表示,並有效學習長序列中的依賴關係;隨後是一個標籤特定的注意力(Label-Wise Attention)層,使得模型能夠為每一個待預測的程式碼分配不同的注意力權重,從而聚焦文件中與該程式碼最相關的部分。這種設計不僅保留了文件的整體語境,又實現了對每個程式碼的精細化關注。在實驗中,該模型與當時最先進的方法相比取得了顯著提升:F1分數提高了9%,召回率提高了28%。研究者特別指出,在臨床決策支援系統中,召回率是一個更為關鍵的指標,因為漏掉一個診斷或手術程式碼可能導致錯誤的治療決策或醫保報銷問題。該研究由Muhammed Yavuz Nuzumlalı等人完成,實際工作於2019年進行,但論文直到2026年才以記錄形式提交至arXiv。因此,論文中引用的基線方法和當時的最先進水平均反映的是2019年的文獻狀態。儘管時間已過去數年,該模型提出的結合時序卷積與標籤注意力的思路仍然具有啟發意義,尤其是在處理長文本和多標籤分類任務時。未來,該方向可能進一步結合預訓練語言模型,或探索更加細粒度的注意力機制。總之,這項研究為醫療編碼自動化提供了一條有希望的路徑,並在實際應用中展現出巨大的潛力。
深度標籤注意時序卷積網路改進醫療編碼
文章摘要
一種結合時序卷積網路與標籤注意機制的深度學習模型顯著提升了醫療編碼的準確性,相比先前最先進方法,F1分數提高9%,召回率提高28%。
來源arXiv Computational Linguistics作者: Muhammed Yavuz Nuzumlal{\i}, Alexander Fabbri, Irene Li, Dragomir Radev
深度標籤注意時序卷積網路改進醫療編碼