AI News HubLIVE
站內改寫1 分鐘閱讀

DiscoExplorer:多語言話語關係研究的開放介面

話語關係(如因果、讓步)是計算語言學和語用學的重要課題,但跨語言研究面臨資料複雜和介面缺乏的挑戰。DiscoExplorer 是一個開源的本地執行網頁介面,整合了 DISRPT 共享任務中 16 種語言的話語關係資料集,提供查詢語言、搜尋和視覺化功能,旨在簡化多語言話語關係的分析。

來源arXiv Computational Linguistics作者: Amir Zeldes

在計算語言學和語用學領域,話語關係——如因果(“因為 A 所以 B”)或讓步(“雖然 A 但是 B”)——是連線命題的核心機制,也是研究的熱點。然而,跨語言比較這些關係長期面臨重大挑戰。一方面,不同資料集之間的話語關係清單缺乏統一標準,導致比較困難;另一方面,即使近年標準化工作取得進展,資料的複雜性和缺乏易用的分析介面仍然阻礙著研究的深入。

為突破這一瓶頸,喬治城大學的 Amir Zeldes 等人開發了 DiscoExplorer,一個全新的開源網頁介面。該工具設計為在本地計算機上執行,無需依賴外部伺服器,從而保障了資料隱私和可定製性。DiscoExplorer 的核心功能是整合來自 DISRPT 共享任務的話語關係資料集,覆蓋了包括英語、漢語、日語、德語、法語等在內的 16 種語言。研究者可以透過統一的介面訪問這些資料集,無需處理複雜的原始資料格式。

DiscoExplorer 提供了三大核心功能:首先,一種靈活的查詢語言,允許使用者根據關係型別(如因果、對比、時序等)和訊號裝置(如連線詞“因為”、“雖然”)進行細粒度檢索;其次,搜尋工具能夠快速定位語料中的具體例項,並支援正規表示式等高階搜尋;最後,視覺化模組以圖形化方式展示關係分佈和訊號裝置的頻率模式,幫助研究者直觀把握語言間的異同。論文還透過幾個示例研究展示了工具的實用性,例如分析不同語言中因果關係的表達傾向。

該工具的釋出填補了多語言話語關係研究中分析平臺缺失的空白。透過提供易用的介面,DiscoExplorer 有望推動話語分析領域的跨語言實證研究,併為自然語言處理應用(如機器翻譯、文本生成、對話系統)提供基礎資源。由於是開源專案,研究者可以自由擴充套件資料集、新增新語言或定製功能,促進協作與創新。