本文にスキップ
AI News HubLIVE
サイト内リライト1 分で読了

プログラム的コンテキスト拡張によるLLMベースの記号回帰

記事の要約

本論文は、プログラム的コンテキスト拡張を組み込んだLLMベースの進化探索フレームワークを提案する。コードベースのデータインタラクションにより、単純なスカラー評価指標を超えた情報抽出を実現し、記号回帰の効率と精度を向上させる。

ソースarXiv AI著者: Hao Liu, Xiao-Wen Yang, Atharva Sehgal, Yixin Wang, Lan-Zhe Guo, Yu-Feng Li, Yisong Yue
プログラム的コンテキスト拡張によるLLMベースの記号回帰
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

記号回帰(Symbolic Regression, SR)は、与えられたデータセットを最もよく説明する数式を自動発見するタスクであり、科学発見の基本的課題です。従来の遺伝的アルゴリズムに基づく手法は有用ですが、スケーラビリティと表現力に限界があります。近年、大規模言語モデル(LLM)を用いた進化的探索手法がSRに導入され、有望な成果を上げています。しかし、既存のLLMベースの手法は、平均二乗誤差などのスカラー評価指標のみをフィードバックとして利用するため、データセットに含まれる豊富な情報(データ分布や外れ値など)を見逃していました。

この制限を克服するために、Hao Liu氏ら6名の研究者は、プログラム的コンテキスト拡張(Programmatic Context Augmentation)を組み込んだ新しいLLMベース進化探索フレームワークを提案しました。この手法では、LLMがコードベースでデータセットと対話できるようにし、積極的にデータ解析を行い、単なる評価スコアを超えた情報信号を抽出します。例えば、LLMはコードを生成してデータの統計特性を分析したり、可視化を行ったり、異常値を検出したりし、その結果をコンテキストとして探索プロセスにフィードバックします。

提案フレームワークは、LLM-SRBenchなどの高度なベンチマークで評価され、強力なベースラインと比較して優れた効率と精度を示しました。本論文は2026年5月4日にarXivに提出され、識別番号は2605.03101です。この研究は、記号回帰におけるLLMの活用に新たな道を開き、科学的発見の加速に貢献すると期待されます。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • 記号回帰はデータから数式を発見する科学発見の基礎課題。
  • 既存のLLM手法は平均二乗誤差などのスカラー指標のみに依存。
  • 提案手法はプログラム的コンテキスト拡張によりデータ分析が可能。
  • LLM-SRBenchでベースラインを上回る性能を示す。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。