人間は依然として長期的課題でAIに勝る
2022年の2週間のコーディングマラソンで、現在のAIエージェントは24時間以内に性能が頭打ちになる一方、トップ人間は2週間を通じて改善を続けた。繰り返しサンプリングのElo基準線を用いた分析により、エージェントの改善は主に単純なサンプリングに過ぎず、人間は超線形的な適応を示すことが明らかになった。
人間は依然として長期的課題でAIに勝る
要約のみ
配信元のコンテンツ権限に基づき、編集要約、要点、原文へのリンクのみを提供します。
2022年の2週間のコーディングマラソンで、現在のAIエージェントは24時間以内に性能が頭打ちになる一方、トップ人間は2週間を通じて改善を続けた。繰り返しサンプリングのElo基準線を用いた分析により、エージェントの改善は主に単純なサンプリングに過ぎず、人間は超線形的な適応を示すことが明らかになった。
配信元のコンテンツ権限に基づき、編集要約、要点、原文へのリンクのみを提供します。