AI News HubLIVE
站內改寫1 分鐘閱讀

層級分類與級聯特徵消除:面向人類表型本體對齊的面部表型分析(FaceMesh2HPO)

FaceMesh2HPO是一個框架,用於分類與人類表型本體(HPO)對齊的面部表型描述符,以支持臨牀診斷。該研究利用124名臨牀醫生對10種疾病(107個HPO術語)的標註,結合非綜合徵對照組,從2D圖像生成3D面部網格(478個地標),並訓練了基於層級PointNet的級聯分類與特徵消除管道。最佳模型(結合3D網格、面部輪廓和人口統計學元數據)的AUROC在0.55至0.89之間,父節點性能優於葉節點。外部驗證顯示不同疾病泛化能力存在差異。結果表明,3D面部幾何的層級建模可實現可解釋的、本體鏈接的表型分類,但在稀有葉節點上的性能仍有限,需要改進數據多樣性和特徵選擇策略以增強魯棒性和臨牀實用性。

來源arXiv Computer Vision作者: Fabio Hellmann, Alexander Hustinx, Benjamin D. Solomon, GestaltMatcher Database Consortium, Tzung-Chien Hsieh, Peter Krawitz, Elisabeth Andr\'e

近日,一項發表在arXiv上的研究提出了FaceMesh2HPO框架,旨在通過面部表型分析輔助臨牀診斷。該框架利用層級分類和級聯特徵消除技術,將面部特徵與人類表型本體(HPO)進行對齊,從而實現可解釋的表型分類。研究由Fabio Hellmann、Alexander Hustinx、Benjamin D. Solomon、GestaltMatcher數據庫聯盟、Tzung-Chien Hsieh、Peter Krawitz和Elisabeth André共同完成。

研究團隊收集了124位臨牀醫生對10種遺傳性疾病(涵蓋107個HPO術語)的面部標註數據,並結合非綜合徵對照組圖像,通過2D照片重建了3D面部網格(包含478個地標點)。在此基礎上,他們訓練了一個基於層級PointNet的管道,該管道通過級聯方式逐步分類並消除無關特徵,以提升分類效率。最佳模型結合了3D網格、面部輪廓以及人口統計學元數據。

在模型性能方面,最佳模型的AUROC值介於約0.55至0.89之間。值得注意的是,模型在HPO層級結構中的父節點(較寬泛的表型類別)上表現更佳,而在葉節點(具體、罕見的表型)上準確率較低。外部驗證進一步表明,模型在不同疾病間的泛化能力存在顯著差異。例如,在某些疾病上表現較好,而在其他疾病上則欠佳。

研究團隊指出,儘管層級建模能夠有效捕捉3D面部幾何信息並實現本體關聯的分類,但數據多樣性不足和特徵選擇策略仍有待改進。目前,模型在稀有表型術語上的性能有限,這主要由於這些術語在訓練數據中出現的頻率較低。為了增強模型的魯棒性及其在臨牀環境中的實用性,未來需要收集更多樣化的數據,並開發更有效的特徵選擇方法。該工作為基於面部形態的遺傳病篩查提供了新思路,尤其適用於資源有限但需要初步診斷支持的場景。它展示瞭如何將計算機視覺與本體知識相結合,以提高診斷的準確性和可解釋性。