arXiv Computational Linguistics

ヒンディー語WordNetを125万件の命令応答ペアに変換し、リソース効率的なLoRAと4ビット量子化を用いて12Bパラメータの言語モデルを微調整する手法を提案。ヒンディー語学習チャットボットによる評価では、汎用モデル（79.4-83.6）を上回る91.0の教育効果を示し、セマンティック性能も競争力を維持。この研究は、低リソース言語向けに大規模コーパスに依存しない代替手段を提供し、WordNetリソースを持つ数百の言語で専門AI開発を可能にする。

新しい研究により、大規模言語モデルが推論タスクで小規模モデルを上回る鍵は「制約誘導推論」にあることが明らかになった。大規模モデルは明示的・暗黙的な制約を特定し、構造化された推論に組織化し、実行不可能な経路を排除する能力に優れている。研究チームが開発したAdvClusterフレームワークを用いて、Qwen3-32BはQwen3-8Bより6.43%、GPT-OSS-120BはGPT-OSS-20Bより7.38%高い成績を示した。

本研究では、NEST-V1という軽量Transformerベースの多モーダルフレームワークを提案。音声入力から感情表現を伴うネパール手話アバターを生成する。4単語・3感情のデータセットでASR精度81.1%、感情認識精度79.21%を達成。パラメータ数22.1Mでエッジ展開に適する。低リソース言語における感情対応手話翻訳の技術基盤を確立。

本研究では、非暴力コミュニケーション（NVC）の原則を軽量なプロンプトレベルの制約として活用し、感情的に緊張した状況で大規模言語モデル（LLM）の対話行動をより緩和・非エスカレーション方向に導く方法を探る。複数のモデルとユーザーの抵抗レベルの異なるデュアルエージェントシミュレーションフレームワークを通じて、NVC制約付きプロンプティングが一貫して会話エスカレーションを低減し、抵抗の強いユーザーとのやり取りを安定化させることを示した。

大規模言語モデルは短いコンテキストでは強力だが、長い会話ではコンテキストウィンドウの制限と非効率なトークン使用により性能が低下する。ContextForgeは、構造化クエリ生成、外部メモリ検索、制御された合成を組み合わせてコンテキストをリサイクルし、トークンオーバーヘッドを削減しつつ回答品質を維持する。15ターンの医療会話ベンチマークで、ContextForgeは一貫性を向上させ、トークン消費を削減した。

新しい研究により、微調整データにおいて断定的確信、明示的な道徳語彙、感情語などの言語的特徴を使用すると、LLMの動物福祉支持傾向が大幅に強化される一方、曖昧な表現や具体的な感覚的描写はその立場を弱めることが明らかになった。この研究は動物福祉提唱者に実践的な指針を提供する。

新たな研究では、モデル蒸留プロセスを用いてLLMの静力学問題における性能を評価。LLMはテキストのみの問題では良好な成績を示すが、図表や多段階推論が必要になると精度が低下する。その原因は画像認識の限界ではなく、多段階推論の困難さにあることが示唆された。

研究により、言語モデルに対する有用性（helpfulness）を目的とした事後学習（SFTやRL）が、中期学習で注入された動物への思いやりの価値を大幅に低下させることが判明。一方、コーディング領域の事後学習はこれらの価値をよりよく保持する。有用性学習は英語の一般的道徳推論も大きく低下させるが、言語を跨いだ効果は見られず、思いやり価値の低下は一貫して言語間で転移する。中期学習された価値は、領域特化型事後学習による推論改善よりも深く、言語横断的に符号化されていることを示唆。価値指向モデル構築にはコーディング事後学習が推奨される。

arXiv:2606.26101 の新しい論文は、LLMの知識に基づく回答と推測を区別するためのベンチマーク「Know2Guess」を提案。1200の質問から成り、FLAN-T5、Qwen2.5-Instruct、Llama-3-Instructを評価。Qwen2.5-3B-Instructが最も信頼性が高いが、依然として課題あり。

HierBiasは、文書コンテキストをモデル化することで文レベルのバイアス分類を改善する新しい階層型コンテキスト条件付きメディアバイアス検出器です。理論的には、コンテキストを利用することでベイズ誤差が減少することが示され、マルチタスク学習によりサンプル効率が向上します。アーキテクチャはRoBERTaエンコーダとクロスセンテンスTransformerを組み合わせ、BABEおよびBASILデータセットでF1 0.853、MCC 0.723を達成し、既存の最良手法を上回ります。

本研究は、認知的、感情的、行動的領域にわたる自己スティグマのコードブックを開発し、Reddit上の薬物使用者の投稿を分析しました。結果は、自己スティグマが広く見られ、行動指標が中核指標に先行することが多く、進行モデルに挑戦するものでした。

大規模言語モデルはコード生成を変革し、作者性、評価の完全性、ソフトウェアの信頼性に関する懸念を引き起こしています。SemEval-2026タスク13サブタスクAは、コードスニペットに対する二項分類として検出を定義し、未見のプログラミング言語やアプリケーションドメインへの分布外汎化に特に重点を置いています。研究では、SALSA（シングルパス自己回帰大規模言語モデル構造化分類）を提案し、各クラスを専用の出力トークンにマッピングし、モデルが構造化応答で単一トークンのラベルを生成するよう訓練します。バランスの取れたサンプリング、パラメータ効率の良い微調整、保守的な訓練を組み合わせることで、システムは公式リーダーボードでOOD F1=0.789を達成し、CodeBERTベースライン（F1=0.305）を大幅に上回りました。

学術投稿の急増により、従来のピアレビューは拡張性の限界に直面し、大規模言語モデル（LLM）をインテリジェントな自動評価アシスタントとして活用する動きが活発化している。しかし、LLMが流暢な批評を生成し、レビュアーのスコアを近似できることが示されている一方で、意思決定支援システムとしての信頼性、堅牢性、セキュリティは十分に理解されていない。本サーベイは、LLMベースの科学的ピアレビューをシステムレベルで分析し、批評生成とスコア予測という2つの中核機能に焦点を当てる。プロンプトベース、教師あり、検索拡張、アライメント最適化といった手法の構造化された分類法を提示し、既存のベンチマークにおける実証結果を総合する。データセットの制約、評価の欠点、領域集中バイアスを分析し、現在の評価実践を制限する要因を明らかにする。性能指標を超えて、プロンプトインジェクション、データポイズニング、検索脆弱性、報酬ハッキングといった新興の堅牢性リスクを特定し、自動レビューパイプラインが戦略的操作にさらされる可能性を示す。データマイニングの観点から、主観的不一致のモデリングとクロスドメイン汎化における主要な未解決課題を概説する。自動ピアレビューをハイステークスな多目的決定問題として再定義し、堅牢で透明性が高く、信頼できるAI支援科学評価システムの開発へのロードマップを提供する。

新しい研究では、GCSE模擬試験の32,534件の実際の二重採点学生回答データセット（5科目328問、手書き含む）を導入。市販の大規模言語モデルが採点者とどの程度一致するかを調査した結果、トップモデルは採点者同士の一致よりも高い一致を示した。英語エッセイ採点などの主観的タスクや複雑な手書き数学答案の処理でも高スコアを達成。モデルサイズによる差は小さく、コスト効率の良い自動採点ソリューションを提供する。

Dustinは、長文脈投機的復号向けのスパース検証フレームワークであり、ドラフトモデルの先読み信号とターゲットモデルの履歴注意を組み合わせて重要なトークンを特定します。Qwen2.5-72Bで32k系列長においてセルフアテンションを27.85倍、エンドツーエンドの復号を9.17倍高速化し、精度低下は無視できます。

arXivの最新研究は、言語モデルにおける「検出」と「制御」の行動方向の幾何学的な差異を明らかにしています。モデルは幻覚を完全に検出できますが（AUC=1.0）、検出方向と拒否を引き起こす方向のコサインはわずか0.12であり、検出は制御可能性を意味しないことを示しています。このギャップはさまざまなモデルと規模で普遍的に存在し、事前学習に起因しており、15度の回転で部分的に埋められます。

エラー対応TF-IDF検索を使用したフレームワークを提案し、ASRの幻覚エラーを訂正。ペルシア語FLEURSデータセットでWERを大幅に改善。

AgentOdyssey は、プロシージャル生成されたオープンエンドテキストゲームを用いて、エージェントの継続学習能力を評価する新しいフレームワークです。従来の機械学習の前提（テスト時の学習なし）を打破し、展開中に学習と推論を統合します。世界知識獲得、エピソード記憶、探索、行動多様性、モデルコストを測定し、実験では最強のエージェントでさえ人間のパフォーマンスに遠く及ばず、短期記憶が重要な改善要素であることが判明しました。

新しい研究により、わずか125回の編集で、小さなWikipedia編集者のグループが大規模言語モデルの動物福祉に関する振る舞いに顕著な影響を与えられることが示されました。勾配ベースのデータ帰属手法を用いて、これらの編集の影響を追跡し、動物福祉関連のWikipediaコンテンツが関連クエリに対するモデルの応答で支配的になることを発見しました。

自動音声認識（ASR）システムが固有名詞や否定語などの意味的に重要なトークンに残す音韻的類似性による誤りに対して、研究者らはG-SPINフレームワークを提案。グラフニューラルネットワークで音韻的に妥当な候補集合を生成し、マスク言語モデルでスコアリング、最後に大規模言語モデルで文脈を考慮した再ランキングを行うことで、軽量でモジュール化された推論時訂正を実現する。

標準的なトークナイザ評価指標（肥沃度など）は膠着言語の形態的正しさを捉えられない。QuechuaTokベンチマークは、南部ケチュア語において4つのトークナイズ戦略を比較し、従来指標に加えて形態的境界精度（MorphAcc）を導入。BPEは最低肥沃度（1.636）だがMorphAccは6.67%に過ぎず、形態認識型PRPEは83.33%のMorphAccを達成。肥沃度だけでは膠着言語のトークナイザ評価に不十分であることを示した。

この研究は、検索品質の代理指標としての完全一致検索再現率の有効性に疑問を投げかけます。tau-benchでは、検索されたポリシークラスが金標準ポリシーとほぼ同等の下流分類性能を示し、完全一致再現率はわずか7%でした。結果は、再現率だけに依存すると検索ポリシーの実用的価値を過小評価する可能性があることを示唆しています。

本研究では、3つの評価構成における8つの自動スコアラーを監査し、全データセットで一貫して最高性能を維持するスコアラーは存在しないことを発見した。生成回答帰属構成では指標ランキングが逆転し、NLIスコアラーは長文タスクで性能が崩壊する。プロンプトベースのLLM判定者は崩壊を回避するが、コストが高く非決定的である。指標選択は対象データセットで検証すべきである。

新しい研究では、6つの専有大規模言語モデルが16のDSM-5条件においてどの程度安全かを評価。自殺と自傷以外では、摂食障害、物質使用障害、大うつ病性障害などで最大100%の保護失敗率が確認された。研究者は臨床条件ごとに明確な害のカテゴリと保護対策を求める。

本論文では、知識ベース視覚質問応答（KB-VQA）のための学習不要なフレームワークIBA（Identify-Before-Answer）を提案する。このフレームワークは、エンティティ識別と段落レベルの証拠ランキングを分離し、マルチモーダル大規模言語モデル（MLLM）に候補名から高信頼度のエンティティを選択させ、続いて既製のテキスト再ランカーで証拠を選択する。実験では、Encyclopedic-VQAおよびInfoSeekにおいて、微調整されたマルチモーダル再ランキングベースラインを一貫して上回り、トレーニングと推論の複雑さを低減した。

本論文は、大規模言語モデル（LLM）を用いて定性的な製品フィードバックから製品魅力を定量化するスケーラブルで解釈可能なフレームワークを提案。ZORQおよびCARMAデータセットにおいて、ゼロショット連続数値感情スコアは専門家ラベルと最大0.97のピアソン相関、分類精度94%を達成。GPT-4o-miniは大規模モデルに匹敵する性能を94%低コストで実現し、フレームワークは信頼度評価と説明可能AIを統合している。

新たな研究により、自己生成テキスト認識（SGTR）ファインチューニングが大規模言語モデルにおける創発的ミスアライメント（EM）の防止と逆転に効果的であり、良性ファインチューニングよりも優れていることが示された。EMは有害な内容の学習ではなく、モデルの整合したキャラクターの不安定化に起因し、SGTRはキャラクターの強化によって機能する。

本研究では、RAGシステムにおける文脈情報の利得を厳密に定量化する正規化文脈利用（NCU）指標を提案する。実験により、厳密な事実抽出タスクでは小規模言語モデル（SLM）が大規模モデルに匹敵または優れ、商用APIは半数近くの敵対的競合で外部証拠を無効にし、信頼度の崩壊を示した。

ModTGCNを提案。モジュラリティ認識GNNであり、クロスエントロピーとモジュラリティベースの補助目的を同時最適化し、クラス一貫性のある文書コミュニティを促進しつつ識別表現を維持。5つのベンチマークで一貫した改善、特に低ホモフィリーデータセットで大きな向上。

EXPO-SQLは、実行結果（エラーメッセージや句ごとの逐次実行）を分析することでSQLクエリの各句に細粒度の報酬を割り当てる、実行ベースの句レベルポリシー最適化手法を提案する。既存のRL手法における粗いクエリレベルの報酬がもたらす学習信号不足の問題を解決し、複数のText-to-SQLベンチマークで既存の教師ありファインチューニング、プロンプティング、RL手法を大幅に上回る性能を示した。