OpenAIのAI、高得点は工夫のおかげ

OpenAIは、ARC-AGI-3で99.9%のスコアを獲得したことにより、AGIを達成したと主張しました。しかし、同じモデルをベンチマーク自身のソフトウェアで実行したテストでは、62.7%のスコアでした。この差は、OpenAIが構築したモデルを取り巻くソフトウェアに由来します。エージェントの周りの異なるscaffoldingが、OpenAIが高いスコアを達成するのに役立ちました。