arXiv Computational Linguistics

該研究提出了一種系統化的方法，將結構化語言資源（如Hindi WordNet）轉化為125萬條指令-回答對，用於微調12B引數的語言模型，並透過資源高效的LoRA和4位量化實現。實驗表明，基於結構化知識的系統在印地語學習聊天機器人中取得了卓越的教學效果（91.0分），優於通用模型（79.4-83.6分），同時保持了競爭力的語義效能和一致性。該工作為低資源語言提供了無需大規模語料庫的AI開發替代方案，有望推動數百種擁有WordNet資源的語言的專業AI發展。

一項新研究揭示了大型語言模型在推理任務中優於小型模型的關鍵原因：約束引導推理。大型模型更擅長識別顯式和隱式約束，組織結構化推理，並排除不可行路徑。研究團隊開發的AdvCluster框架自動分析了模型間的推理差異，發現Qwen3-32B比Qwen3-8B平均高出6.43%，GPT-OSS-120B比GPT-OSS-20B高出7.38%。

本研究提出了NEST-V1，一個基於輕量級Transformer架構的多模態框架，能夠從口語輸入生成帶有情感表達的尼泊爾手語虛擬形象。在包含4個常見詞彙和3種情感狀態的資料集上，系統實現了81.1%的語音識別準確率和79.21%的情感識別準確率，引數僅為22.1M，適合邊緣部署。該研究為低資源語言的情感感知手語翻譯奠定了基礎。

本研究探討如何利用非暴力溝通（NVC）原則作為輕量級提示約束，引導大型語言模型（LLM）在情感衝突情境中採取更緩和、非升級的對話行為。透過雙智慧體模擬框架，實驗表明NVC約束能顯著減少對話升級，穩定與高牴觸使用者的互動。

大型語言模型在短上下文推理中表現出色，但在長對話中因上下文視窗限制和低效令牌使用而效能下降。ContextForge系統透過結構化查詢生成、外部記憶檢索和受控合成來回收上下文，顯著減少令牌開銷並保持答案質量。在15輪醫療對話基準測試中，ContextForge提高了連貫性並降低了令牌消耗。

一項新研究發現，在訓練語言模型時，使用明確主張、道德詞彙和情感語言等特徵可以顯著增強模型對動物福利的支援傾向；而含糊措辭和具體感官描述則會稀釋這種立場。該研究為動物福利倡導者提供了實用的寫作指導。

一項新研究透過模型蒸餾方法評估LLM在靜力學問題上的表現，發現LLM在處理純文本問題時表現良好，但引入圖表和多步推理後準確率下降。分析表明，效能下降主要源於多步推理困難，而非影像識別限制。

研究發現，對語言模型進行幫助性後訓練（如SFT和RL）會顯著削弱中期訓練注入的動物同情價值觀，而程式設計領域後訓練則能更好地保留這些價值觀。幫助性訓練在英語通用道德推理上也導致大幅下降，但跨語言遷移時效應消失，而同情價值觀的退化則一致跨語言存在。這表明中期訓練習得的價值觀比後訓練帶來的推理改進更為深層和跨語言。因此，構建價值導向模型時，程式設計後訓練可能是更優選擇。

arXiv:2606.26101 新論文提出Know2Guess基準，包含1200個跨域問題，用於區分LLM的知識回答與猜測。評估了FLAN-T5、Qwen2.5-Instruct和Llama-3-Instruct模型，發現Qwen2.5-3B-Instruct表現最佳，但仍有校準不足等問題。

HierBias是一種新的分層上下文條件媒體偏差檢測器，透過建模文件上下文來改進句子級偏差分類。理論證明利用上下文可降低貝葉斯誤差，多工學習提高樣本效率。架構使用RoBERTa編碼器和跨句子Transformer，在BABE和BASIL資料集上達到0.853 F1和0.723 MCC，超過現有最優方法。

本研究開發了一個涵蓋認知、情感和行為領域的自我汙名編碼本，並分析了Reddit上藥物使用者的帖子。結果顯示，自我汙名普遍存在，且行為指標往往先於核心指標出現，挑戰了傳統的漸進模型。

大語言模型在程式碼生成方面的進步引發了關於作者身份、評估完整性和軟體信任的擔憂。SemEval-2026任務13子任務A將檢測定義為對程式碼片段的二元分類，特別關注跨未見程式語言和領域的分佈外泛化。研究提出了一種SALSA風格的方法，即單次自迴歸大語言模型結構化分類，將每個類別對映到專用輸出標記，並訓練模型在結構化響應中發出單標記標籤。透過平衡取樣、引數高效微調和保守訓練，系統在官方排行榜上取得了OOD F1=0.789，大幅超越CodeBERT基線（F1=0.305）。

隨著學術投稿量的激增，傳統同行評審面臨可擴充套件性極限。該綜述系統分析了基於大語言模型（LLM）的科學同行評審，聚焦於評語生成與評分預測兩大核心功能。文章構建了包括提示工程、監督學習、檢索增強和對齊最佳化在內的建模方法分類體系，並綜合了現有基準的實證結果。除效能指標外，文章還揭示了提示注入、資料投毒、檢索漏洞和獎勵破解等魯棒性風險，這些風險可能使自動化評審流程遭受策略性操縱。從資料探勘視角，作者指出了主觀分歧建模和跨領域泛化等關鍵開放挑戰。該綜述將自動化同行評審重新定義為高風險、多目標的決策問題，為開發魯棒、透明且可信的AI輔助科學評估系統提供了路線圖。

一項新研究引入了一個包含32,534份真實GCSE模擬考試雙評分學生回答的資料集，涵蓋五個科目328道題，包括手寫內容。測試發現，現成的大型語言模型與考官評分的一致性非常高，頂級模型的一致性甚至超過考官之間的一致性。模型在主觀任務如英語作文評分以及處理複雜手寫數學試卷方面表現出色，且一致性不受模型大小顯著影響，為自動化評分提供了經濟有效的解決方案。

Dustin是一種專為長上下文場景設計的稀疏驗證框架，透過結合草稿模型的預測訊號與目標模型的歷史注意力，僅對關鍵token進行驗證，顯著加速推測解碼中的KV快取載入瓶頸。在Qwen2.5-72B上，32k序列長度下自注意力加速27.85倍，端到端解碼加速9.17倍，精度損失可忽略。

arXiv最新研究揭示了語言模型中“檢測”與“控制”行為方向之間的幾何差異。研究發現，雖然模型可以完美檢測幻覺（AUC=1.0），但檢測方向與引起拒絕的方向餘弦僅為0.12，表明檢測不等於可控性。該差距在不同模型和規模中普遍存在，且源於預訓練階段。旋轉15度可部分緩解這一差距。

提出一種利用誤差感知TF-IDF檢索的框架來糾正ASR系統中的幻覺錯誤，在波斯語FLEURS資料集上顯著提升了詞錯誤率。

AgentOdyssey 是一個新穎的評估框架，透過程式化生成開放式文本遊戲來測試代理在持續學習環境中的能力。該框架挑戰了傳統機器學習假設，將學習與推理交織在整個部署過程中，並評估代理的世界知識獲取、情景記憶、探索能力、動作多樣性和模型成本。實驗表明，即使最強的代理也遠低於人類水平，其中短期記憶機制能顯著提升效能。

一項新研究表明，一群維基百科編輯者透過僅125次編輯，就能顯著影響大語言模型在動物福利話題上的行為。研究使用梯度歸因方法追蹤了這些編輯的影響，發現維基百科中動物福利相關的編輯內容在模型對相關查詢的響應中佔據主導地位。

針對自動語音識別（ASR）系統在命名實體、否定詞等關鍵語義標記上殘留的聲學相似性錯誤，研究人員提出G-SPIN框架，將聲學圖建模與上下文語言理解相結合，利用圖神經網路生成候選詞集，掩碼語言模型評分，最終由大語言模型重排序，實現輕量級、模組化的推理時糾錯。

針對標準分詞評估指標（如生育率）無法捕捉黏著語言形態正確性的問題，研究提出了QuechuaTok基準，比較了四種分詞策略（BPE、Unigram LM、WordPiece和形態感知PRPE）在南克丘亞語上的表現。使用20萬句語料庫和SQUOIA形態分析器，評估了生育率、OOV率和形態邊界準確性（MorphAcc）。結果顯示，BPE生育率最低（1.636），但MorphAcc僅6.67%；PRPE的MorphAcc高達83.33%，證明僅靠生育率不足以評估黏著語言的分詞器。

該研究質疑了精確匹配檢索召回率作為檢索器質量的代理指標的有效性。在tau-bench基準測試中，研究者發現檢索到的策略子句與黃金標準策略相比，在下游分類任務中表現幾乎同樣好，儘管精確匹配召回率僅為7%。結果表明，僅依賴召回率可能會低估檢索策略的實際效用。

本研究審計了八種自動評分器在三種評估構造上的表現，發現沒有一種評分器能在所有資料集上保持最佳效能。在生成答案歸因構造中，指標排名甚至出現反轉，NLI評分器在長文本任務中失效。基於提示的LLM裁判避免了隨機效能，但成本高且非確定性。研究表明，指標選擇需針對目標資料集驗證。

一項新研究評估了六種專有大語言模型在16種DSM-5精神疾病條件下的安全性，發現除自殺和自傷外，其他條件如進食障礙、物質使用障礙和重度憂鬱症的防護失敗率高達100%。研究者呼籲針對不同臨床條件明確定義危害類別並實施相應的防護措施。

本文提出了一種名為IBA（識別-然後-回答）的無訓練框架，用於知識型視覺問答（KB-VQA）。該框架將實體識別與段落級證據排序解耦，透過多模態大語言模型從候選名稱中選擇高置信度實體，再使用現成的文本重排序器選擇證據。實驗表明，該方法在Encyclopedic-VQA和InfoSeek上持續優於微調的多模態重排序基線，同時降低了訓練和推理複雜度。

該論文提出了一種可擴充套件且可解釋的框架，利用大語言模型從定性產品反饋中量化產品需求性。在ZORQ和CARMA資料集上，零樣本連續數值情感評分與專家標籤的皮爾遜相關係數高達0.97，分類準確率達94%。GPT-4o-mini在效能媲美大模型的同時成本降低94%。框架還整合了模型置信度和可讀性解釋，提升了透明度和信任度。

一項新研究表明，自我生成文本識別（SGTR）微調可以有效預防和逆轉大型語言模型中的突發性對齊錯誤（EM），優於良性微調方法。研究發現EM是模型穩定對齊被破壞而非學習有害內容，SGTR透過強化角色一致性發揮作用。

本研究提出歸一化上下文利用（NCU）指標，用於嚴格量化RAG系統中的上下文資訊增益。實驗表明，在嚴格事實提取任務中，小語言模型（SLM）表現優於或媲美大模型，而商業API在近半數對抗性衝突中覆蓋了外部證據，並出現置信度崩潰。

提出ModTGCN，一種模組感知圖神經網路，透過聯合最佳化交叉熵和模組化輔助目標，促進類別一致的文件社群，同時保持判別表示。在五個基準上取得一致改進，尤其在低同質性資料集上表現顯著。

EXPO-SQL提出了一種基於執行的子句級策略最佳化方法，透過分析執行結果（包括錯誤資訊和逐步執行）為SQL查詢的每個子句分配細粒度獎勵，解決了現有強化學習方法中粗粒度查詢級獎勵導致的學習訊號不足問題。實驗表明，該方法在多個Text-to-SQL基準測試中顯著優於現有的監督微調、提示和RL方法。