Google DeepMind、AGIの進捗を測る認知フレームワークを公開し、賞金$200,000のKaggleハッカソンを開始

知能の再定義：Google DeepMindによる新たな認知フレームワーク

過去数年間、人工汎用知能（Artificial General Intelligence：AGI）を巡る競争は、主に知識ベースの静的なベンチマークにおける高スコアの追求によって定義されてきました。これらの指標は、大規模言語モデルの急速な進化を測定する上で役割を果たしてきましたが、データ汚染に対する脆弱性や、真の汎用知能の細かなニュアンスを捉える能力の欠如について、批判が高まっています。Google DeepMindは現在、新たに公開された認知分類学（Cognitive Taxonomy）を通じて、AIの進歩を測定するための厳格で科学的根拠に基づいたアプローチを提示し、このパラダイムを転換しようとしています。

論文「Measuring Progress Toward AGI: A Cognitive Taxonomy」で詳細に説明されているこのイニシアチブは、単なる知識の検索を超えたものです。これは、認知科学、神経科学、心理学の確立された原理に「汎用知能」の評価を根ざし、AIシステムの評価方法を根本的に再構築することを提案しています。この移行を促進するため、Google DeepMindは20万ドルのKaggleハッカソンも開始し、必要なベンチマーク・インフラストラクチャの構築を支援するよう世界の研究コミュニティに呼びかけています。

10の能力による認知分類学

この新しいフレームワークの核心は、汎用知能を10の個別の認知能力に分解することにあります。この分類学は、AIシステムが何を知っているかだけでなく、どのように機能するかについて包括的な視点を提供するように設計されています。知能をこれらの特定の能力に解体することで、研究者は異なるアーキテクチャの長所と短所をより正確に特定できるようになります。

提案された分類学には、以下の主要な能力が含まれています。

知覚（Perception）： 環境から複雑な感覚情報を抽出し、処理する能力。
生成（Generation）： テキスト、音声、実行可能なアクションを含むアウトプットを生成する能力。
注意（Attention）： ノイズの中で関連する刺激に認知資源を集中させるスキル。
学習（Learning）： 経験、相互作用、指示を通じて新しい知識を獲得する継続的なプロセス。
記憶（Memory）： さまざまな時間スケールで情報を保存、維持、検索する能力。
推論（Reasoning）： 利用可能なデータから妥当な結論を導き出すために論理的推論を適用すること。
メタ認知（Metacognition）： 自身の内部的な認知プロセスに関する知識と監視のための高次の能力。
実行機能（Executive Functions）： 計画、抑制、認知の柔軟性のオーケストレーション。
問題解決（Problem Solving）： ドメイン固有の文脈の中で効果的な解決策を見つける専門的な能力。
社会的認知（Social Cognition）： 複雑な社会的合図を解釈し、ダイナミックな対人状況において適切に反応する能力。

評価パラダイムの比較

この転換の大きさを理解するために、従来のベンチマーク手法と、DeepMindチームが提案する新しい認知優先のアプローチを対比させることが役立ちます。

評価の焦点	従来のベンチマーク	認知分類学
主な目的	静的な知識の検索	動的な認知パフォーマンス
データの完全性	汚染の影響を非常に受けやすい	生成テストにより回復力が高い
人間との整合性	テストスコアと相関	人間の認知分布に対応
システムの見方	統合されたパフォーマンススコア	粒度の細かい能力の分解

理論から実践へ：Kaggleハッカソン

フレームワークの公開は理論的な基礎を提供しますが、DeepMindはフレームワークだけでは不十分であることを認めています。課題は、スケーラブルで堅牢、かつ意義のある評価プロトコルを作成することにあります。このギャップを埋めるため、Google DeepMindはKaggleと提携し、「AGIへの進捗の測定：認知能力（Measuring progress toward AGI: Cognitive abilities）」と題した高額賞金のハッカソンを開催しました。

このハッカソンは、現代のAIが持つより複雑で抽象的な能力に対する標準化されたテストが著しく不足しているという「評価のギャップ」に対処するために特別に設計されています。このコンペティションは、現在の評価方法が最も弱い5つのコアトラックに焦点を当てています。

学習： 新しい情報を効果的に内面化し、適用するAIの能力をテストする。
メタ認知： AI自身の推論の限界に対する認識を評価する。
注意： 複雑な環境において重要なタスクへの集中を維持するモデルの能力を評価する。
実行機能： 制約条件下での認知の柔軟性と計画性を測定する。
社会的認知： 微妙な社会的相互作用を解釈し、それに関与する能力を評価する。

賞金プールとロジスティクス

ハッカソンでは、高品質な提出を促すために総額20万ドルの賞金プールが用意されています。この構造は、特定のトラックでの卓越性と全体的な革新性の両方に報いるように設計されています。

トラック賞： 5つの認知トラックのそれぞれにおいて、上位2つの提出物に1万ドルの賞金。
グランドプリズ： コンペティション全体を通じて、絶対的に優れた上位4つの提出物に2万5千ドルの賞金。

参加者はKaggleのコミュニティ・ベンチマーク・プラットフォームを活用し、さまざまな最先端AIモデルに対して自らの評価手法をテストすることができます。提出期間は2026年3月17日から4月16日までで、最終結果は2026年6月1日に発表される予定です。

AGI研究の未来への影響

この認知フレームワークの導入は、AI研究コミュニティにとって成熟した一歩を意味します。認知科学の視点を通じて「知能」の言語を標準化することで、DeepMindは実質的に、何が意義のある進歩であるかという基準を引き上げています。

このアプローチの最も重要な側面の一つは、提案されている3段階の評価プロトコルです。人口統計学的に代表的なサンプルから人間のベースラインを収集し、これらの分布に対してAIのパフォーマンスをマッピングすることで、特定のドメインにおいてモデルが人間の能力と比較してどのように機能するかを示す正規化されたスコアを作成できます。これは、モデルの推論や信頼性における根本的な欠陥を隠しがちなリーダーボード争いに対する大きな改善です。

業界がAGIという理論的なマイルストーンに近づくにつれ、内部的な「認知」の進歩を測定する能力は、モデル自体の展開と同じくらい重要になるでしょう。このフレームワークにより、Google DeepMindは単に「このAIはどれほど賢いか？」と問うだけでなく、その問いに科学的な厳格さを持って答えるための構造化され、検証可能な方法論を提供しています。研究者や開発者にとって、Kaggleハッカソンは、次世代の人工知能を形作る指標を定義するためのオープンな招待状となっています。