有效績效衡量：從財報電話會議中提取關鍵績效指標的挑戰與機遇

財報電話會議是上市公司財務信息的重要來源，但與標準化的SEC文件不同，這些會議記錄缺乏內置標籤、結構雜亂且使用對話式語言，因此從中提取關鍵績效指標（KPI）極具挑戰性。為了應對這一挑戰，研究人員評估了從SEC文件中訓練出的模型在財報電話會議上的表現，並提出了三個新基準數據集：SEC文件基準（SECB）、財報電話會議基準（ECB）以及包含2460個專家標註組的ECB-A子集，以支持定性分析。實驗發現，基於編碼器的模型難以適應從SEC文件到電話會議的領域遷移，性能表現不佳。為解決這一問題，研究團隊提出了一種基於大型語言模型（LLM）的系統，能夠從非結構化電話會議記錄中進行開放式的KPI提取。該系統通過人工評估驗證，達到了79.7%的精確率，為這一有價值領域提供了可靠的基線。值得注意的是，該工作已被ACL Industry Track接收，這標誌着學術界對金融文本信息提取領域的持續關注。研究不僅揭示了當前模型在跨領域應用中的侷限性，還通過構建新基準和提出LLM方案，為未來自動跟蹤新興KPI的研究奠定了基礎。此外，該方法的成功表明，LLM在理解複雜、非結構化文本方面具有顯著優勢，有望在金融分析、企業績效監測等實際場景中發揮重要作用。隨着財報電話會議的數量不斷增加，能夠高效準確地從中提取關鍵信息對於投資者、分析師和企業管理者來説變得越來越重要。該研究提供的工具和基準將有助於推動這一領域的發展。