本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

立場:LLMにおける「機械的忘却」という用語の過剰使用

記事の要約

ICML 2026の立場論文は、LLM研究において「機械的忘却」という用語が過剰に使用されていると指摘し、データセット定義の削除、すなわち指定された忘却セットの訓練影響を除去し、そのデータなしで再訓練したモデルとほぼ区別できない状態にする場合に限定すべきだと主張する。有害リクエストの拒否、知識削除、抑制などのタスクは異なる目的を持ち、異なる用語(アラインメント、抑制、編集、難読化)とベースラインが必要である。この混乱により、指標やベンチマークが範囲外で再利用され、再訓練等価性や派生能力を無視して表面的な非開示を奨励している。著者らは、明示的な保証と参照モデルに結びついた厳格な用語法と、主張された目的に合致する評価を求めている。

ソースarXiv Computational Linguistics著者: Sangyeon Yoon, Yeachan Jun, Albert No
立場:LLMにおける「機械的忘却」という用語の過剰使用
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

ICML 2026の立場論文トラックで、Sangyeon Yoon、Yeachan Junらによる論文「立場:LLMにおける『機械的忘却』という用語の過剰使用」が発表された。この論文は、大規模言語モデル(LLM)が規制上の削除義務、著作権・ライセンス紛争、安全性や製品ポリシー上の要件により、訓練データ、知識、振る舞いを「忘れる」ことをますます要求されていると指摘する。しかし著者らは、「機械的忘却」という用語が研究コミュニティで過剰に使用されており、データセット定義の削除という特定のタスクに厳密に限定されるべきだと主張する。

データセット定義の削除とは、正確に指定された忘却セットの訓練影響を除去し、そのデータなしで再訓練したモデルとほぼ区別できない状態にすることを指す。著者らはこの定義の核心を「再訓練等価性」、すなわちモデルの振る舞いが忘却データを一度も見なかったモデルと類似しているべき点にあると強調する。この厳密な定義は、現在の文献で「忘却」とラベル付けされている多くのタスクとは対照的である。

論文は、誤って「忘却」と呼ばれているタスクの例として、有害なリクエストへの拒否、エンティティや知識の削除、標的型の抑制を挙げる。これらのタスクは異なる、しばしばポリシー依存の目的を持ち、異なる用語とベースラインを必要とする。著者らは「アラインメント」「抑制」「編集」「難読化」などの用語を用いてこれらの目的をより正確に記述することを提案する。例えば、有害リクエストの拒否はアラインメント問題に近く、知識削除はモデル編集技術に関連する。

さらに著者らは、この用語の混乱が表面的な問題ではないと指摘する。異なる論文が同じラベルの下で異なる暗黙の保証を行うため、指標やベンチマークが意図された範囲を超えて再利用されることが頻繁にある。これにより、再訓練等価性がテストされず、派生能力が残存していても、表面的な非開示(低いROUGEスコアや忘却精度など)が報われる評価になってしまう。言い換えれば、モデルは特定の内容を直接出力しないことを学んだだけで、関連能力は実際には除去されていない可能性がある。

したがって論文は、研究コミュニティが明示的な保証と参照モデルに結びついた、より厳格な用語法を採用することを求める。同時に、評価方法は主張された目的と一致すべきである。例えば、目的が再訓練等価性であるなら、評価はモデルが忘却データなしで訓練されたモデルと行動的に真に類似しているかを検証すべきであり、単に出力に特定の文字列が含まれないかをチェックするだけでは不十分である。

この立場論文は2026年5月8日に公開され、全13ページで、ICML 2026 Position Paper Trackに属する。Sangyeon YoonとYeachan Junは同等に貢献している。論文は計算と言語(cs.CL)、人工知能(cs.AI)、機械学習(cs.LG)などの主題に関連する。著者らは、この論文を通じて機械的忘却の用語と評価基準に関するコミュニティの反省を促し、より厳密な研究実践を促進することを望んでいる。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • 機械的忘却はデータセット定義の削除として厳密に定義されるべきであり、近似的な再訓練等価性が求められる。
  • 現在「忘却」と呼ばれる多くのタスク(拒否、知識削除、抑制)は異なる目標を持ち、異なる用語とベースラインが必要である。
  • 用語の混乱により指標やベンチマークが誤用され、真の削除ではなく表面的な非開示が報われている。
  • 明示的な保証と参照モデルに結びついた用語法と、主張された目的に合致する評価が求められる。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。