パラメトリックCADベンチマーク：編集可能なCAD設計におけるAIエージェントの評価

パラメトリックCADベンチマークは、AIエージェントが自然言語から編集可能なFreeCADモデルを作成する能力を測定する新しい評価基準です。マルチステップのエージェントループと「編集可能性ゲート」（調和平均スコアリング）を使用して、機能的なエンジニアリングレシピを生成することを保証します。初期結果では、GPT-5.5 via Codexが0.832でリードし、ハーネス効果が顕著に見られます。1セルあたりのコストは3ドルから170ドルの範囲で、コストと品質のフロンティアは広いです。