ペルソナアトラス：有名な思考の地図を作る

ペルソナアトラス：有名な思考の地図を作る

ソクラテス、チャーチル、そしてシリコンバレーの創業者を同じ部屋に集め、同じ答えのない質問を投げかけ、それぞれがどのように答えにたどり着くかを見ることができたらどうでしょうか？ほとんどのベンチマークはモデルが何を知っているかを測定します。Persona Atlasは、より捉えにくいもの——特定の思考がどのように動くか——に興味を持ち、それを単に主張するのではなく可視化しようとします。

仕組み

実行は3つのステップからなります。まず、調査：ツールを使用するエージェントが実際のウェブ検索を行い、人物の肖像を引き出し、公開プロフィール、実際に訪れたソースにリンクされた事実のリスト、そして「スタイル仮説」——その人物が未経験の問題にどのように取り組むかの最善の推測——を構築します。

次に、ペルソナがベンチマークに答えます。アイデンティティ、倫理、真実、自由意志、意味、機械意識に関する10の意図的にオープンなプロンプトです。意図的に正解はありません。これらは、モデルの生の能力ではなく、性格が漏れ出る質問です。

第三に、すべての回答は埋め込みベクトルになります。ペルソナが幾何学となれば、散文では決してできないことが可能になります：2つのペルソナを隣り合わせて、その距離を測定することです。

思考の比較

保存されたペルソナのいずれかを選ぶと、比較ビューは2つのことを行います。回答が埋め込み空間でどれだけ離れているかを測定し（グループ全体の乖離度を示す1つの数値）、各ペルソナを10の特性アンカー（几帳面さ、明瞭さ、創造性、懐疑心、自信、親切さ、ユーモア、好奇心、実用性、抽象性）に対してスコアリングし、特性傾向ヒートマップとして描画します。

グリッドは二重中心化されています。これは聞こえ以上に重要です。暖色のセルは決して「この特性が高い」という絶対的な意味を持ちません——それは、このペルソナがあなたがたまたまテーブルに置いた他のものよりもその特性に傾いていることを意味します。非常に異なる人々を並べると、行が引き離されます：1つはユーモアと自信で暖かく、別のものは抽象性と懐疑心で暖かく、しばしば言葉にできる前に直感的に感じられます。そのギャップ——違いを感知することとそれを名付けることの間——こそがまさに地図の役割です。

なぜスコアを捨てたのか

初期バージョンには数学の問題やトリビアがあり、正解とリーダーボードがありました。それらはすべて削除されました。正しい積分は、ペルソナがアインシュタインであろうと他の誰であろうと同じに見えます——客観的なタスクはモデルを測定し、人物を測定しません。残されたのは、スタンス、トーン、推論スタイルが実際に分岐する素材だけです。出力は文体の鏡であり、心理測定ではありません：それは、他のものと比較したペルソナの回答が何に似ているかを示すものであり、決して実際の人間の魂の解釈ではありません。

内部構造

すべてはHugging Face Inference Providersを通じてホストされた小型モデルで実行されます——エージェントを駆動するコンパクトな生成モデル、幾何学計算を行う軽量埋め込みモデル、そして根拠付けのためのライブウェブと画像検索。フロントエンドはGradioで、3つのタブがあります：実行の調査、保存されたペルソナの比較、完全なエージェントトレースの検査（実際のソースに基づいているか確認するため）。事前構築されたペルソナのセットが付属しており、ページを読み込んだ瞬間に比較が探索可能で、トークンは不要です。

正直な限界

肖像はオープンウェブが明らかにするものにのみ依存し、名前の衝突は現実のノイズです。地図は、ある日のあるモデルにおけるペルソナの回答スタイルを捉えたものであり、人物ではなく、ましてや評決ではありません。風刺画を読むように読んでください：それは明らかにするために誇張し、コントラストと会話のレンズとして最も役立ちます。

試してみる

「保存されたペルソナを比較」タブを開くか、新しい人物を調査してアトラスに追加してください： huggingface.co/spaces/build-small-hackathon/persona-atlas