インタラクティブベンチマーク

AIベンチマーク

AIは実際どれほど知的なのか?

ARCプライズ財団のプレジデントであるグレッグ・カムラッドが、AI知能測定の新たなアプローチについて語る。フランソワ・シャレが2019年に提唱した「知能とは新しいことを効率的に学習する能力である」という定義に基づき、ARC AGIベンチマー...
*重要記事

ARC-AGI-3と行動効率 | MITでのARCプライズ

本動画は、ARCプライズ財団によるARC-AGI-3という新しいインタラクティブなAIベンチマークの発表である。フランソワ・ショレの知能定義「スキル獲得効率」に基づき、AIが新しい環境にどれだけ効率的に適応できるかを測定する。150以上の独...
OpenAI・サムアルトマン

インタラクティブ評価によるエージェントの測定

この動画は、ARC Prize Foundationの代表であるGreg Camradが、フロンティアAIの測定方法について解説するものである。従来の静的ベンチマークでは測定できないインタラクティブな知能を評価するために、ARC AGI 3...