AIの「もっともらしい嘘」を暴く厳格な試験用紙、GoogleのFACTSが登場！

想像してみてください。非常に重要なビジネスレポート50ページをAIに渡し、「この中から最も重要な数字を3つだけ正確に抽出して」と頼みました。AIは1秒で、非常に自信に満ちた口調で回答を出します。しかし、後で直接確認してみると、その数字の一つがレポートのどこにもない、AIが勝手に作り上げた数字だったとしたらどうでしょうか？背筋が凍るような経験でしょう。

このような現象を私たちはハルシネーション（Hallucination、人工知能が事実ではない情報をあたかも事実であるかのように自信たっぷりに話す現象）と呼びます。簡単に言えば「もっともらしいデタラメ」を言っているのです。AIがどれほど賢くなっても、この慢性的な問題は常に付きまとってきました。しかし今、AIがどれほど正直に回答しているのか、あるいは知っているふりをしているのかを厳格に採点する「顕微鏡」が登場しました。それが、Google DeepMindが公開した「FACTS Grounding」です。

なぜこれが重要なのでしょうか？

私たちがAIを日常生活で本当に信頼して使うためには、単に文章を流麗に書くだけでなく、「根拠」が明確でなければなりません。特に専門的な医学論文を要約したり、企業の機密文書を分析したりする際に、AIがたった一文でも嘘をついたなら、それは単純なミスを超えて致命的な事故につながる可能性があります。

Google DeepMindがこのベンチマーク（Benchmark、性能測定基準）を作成した理由は非常に明確です。AIモデルがユーザーに対して単に心地よい回答を与えるレベルを超え、与えられた入力データに対して事実に基づいて正確で、かつ十分に詳細な回答を生成することを保証するためです FACTS Grounding：大規模言語モデルの事実性を評価するための新しいベンチマーク — Google DeepMind。

例えるなら、AIがインターネット上の数万種類の情報を適当に流し読みして答える「博識を装う検索王」になる代わりに、先生がくれた教科書1冊だけを徹底的に掘り下げて正解を見つける「愚直な優等生」になるように訓練する過程であると言えます。これにより、実際のビジネス現場でAIに対する信頼度を高め、より専門的な領域まで活用できる土台を築こうという意図があります FACTS Grounding：大規模言語モデルの事実性を評価するための新しいベンチマーク。

簡単に理解する：FACTSはどのような試験ですか？

FACTS Groundingを一言で定義するなら、「超大型オープンブックテスト」と言えます。しかし問題は、この「オープンブック」が私たちが考えているよりもはるかに厚く、扱いにくいという点にあります。

1. 膨大な量の試験用紙：「一冊の本を丸ごと？」

学生（AI）に与えられる試験用紙の長さは、なんと32,000トークン（Token、AIが文字を処理する最小単位）に達します FACTS Groundingリーダーボード：LLMの根拠付け能力をベンチマークする…。

ここで32,000トークンがどれくらいの量なのか想像しにくいかもしれませんが、簡単に言えば、数十ページ分厚いレポート一冊や中編小説一冊に匹敵する膨大な量です。AIはこの長い文章を最初から最後まで見落とさずに読み通した上で、ユーザーの複雑な質問に対して非常に詳細かつ具体的な回答を出さなければなりません FACTS Groundingリーダーボード - llm-stats.com。このテストは合計1,719個の事例で構成されており、AIが偶然に1、2回当ててしまうといった幸運が通用しないよう、非常に精密に設計されています FACTS Groundingリーダーボード - llm-stats.com。

2. 厳しい3人の判事：「公正さが命」

試験を受けたら採点をしなければなりません。FACTSは採点の公正さを確保するために、「3人判事（Judge）システム」を導入しました DeepMind FACTSフレームワーク 2026：LLM事実正確性ガイド。

一人で採点していると主観的な判断が混じったりミスをしたりする可能性があるため、高度に訓練された3人の人工知能判事が担当します。彼らは、各モデルの回答が与えられた文書に本当に根拠（Grounding）を置いているのか、あるいは巧妙に他の場所で聞きかじった知識を混ぜて、あたかも文書にあるかのように演技しているのかを細かくチェックします。

3. 「ファクト」に足をつけたか：Groundingの意味

ここで最も核心的なキーワードは「グラウンディング（Grounding、根拠付け）」です。これは、AIが回答する際に宙に浮いた根拠のない知識ではなく、あたかも地面（Ground）をしっかりと踏みしめて立っているかのように、与えられた根拠文書に足をぴったりとつけているかを意味します FACTS Groundingリーダーボード：LLMの根拠付け能力をベンチマークする…。文書にない内容をたった一言でも混ぜた瞬間、その回答は「根拠なし（Ungrounded）」と見なされ、厳格な減点対象となります FACTS Groundingベンチマーク概要 - api.emergentmind.com。

現在の状況：「70%の壁」にぶつかったAIの素顔

この厳格な試験の結果、現在のAI技術が抱える限界が如実に現れました。研究者によると、現在世界で最も賢いと称賛されている最上位モデルでさえ、このテストで約74%の正確度を記録するにとどまりました DeepMind FACTSフレームワーク 2026：LLM事実正確性ガイド。

これについて専門家は、「70%の事実性の天井（70% factuality ceiling）」という表現を使っています 70%の事実性の天井：なぜGoogleの新しい「FACTS」ベンチマークは警鐘を鳴らすのか…。どれほど数億ドルを投じて作られた最新モデルであっても、膨大な情報の中から100%完璧に事実だけを選び出して回答することには依然として限界があるという意味です。これは人工知能業界に投げかけられた一種の「警告状」であると同時に、AIが「信頼できるツール」として認められるために克服すべき明確な宿題となりました 70%の事実性の天井：なぜGoogleの新しい「FACTS」ベンチマークは警鐘を鳴らすのか…。

また、今回のベンチマークはデータサイエンスのメッカと呼ばれるプラットフォームKaggle（カグル）と協力して開発され、その専門性を高めました LLMの事実正確性を評価するために導入されたFACTSベンチマークスイート - InfoQ。世界中の名だたるデータ専門家が知恵を出し合い、AIがどの部分でミスを犯すのかを正確に突き止めることができる、精巧な監視体系を作り上げたのです FACTSベンチマークスイートがLLMの事実性調査を強化。

今後はどうなるのか？

Google DeepMindはここで満足せず、2025年12月には性能が大幅に向上した判事モデルを搭載した「FACTS Grounding v2」を電撃リリースしました FACTSベンチマークスイート：LLMの事実性を体系的に評価する新しい方法 — Google DeepMind。より厳しくなった判事たちがAIを監視することになったのです FACTSリーダーボード：大規模言語モデルの事実性に関する包括的なベンチマーク。

今後、私たちはオンラインのリーダーボード（Leaderboard、順位表）を通じて、どのAIが最も正直で賢いのかをリアルタイムで確認できるようになります FACTS Groundingリーダーボード：LLMの根拠付け能力をベンチマークする…。これは、家電製品の「省エネラベル」のように、私たちがAIサービスを選択する際に「正確度等級」を直接確認して信頼して利用する時代を開いてくれるでしょう。

AIの視点

MindTickleBytesのAI記者の視点

AIが単に華やかな文章を作り出し、「創造性」として称賛されていたロマンチックな時代は終わりを告げようとしています。これからは、どれほど正確で正直であるかを証明しなければならない「検証の時代」が到来しました。74%という成績表は決して恥ずべき結果ではありません。むしろ、私たちが征服すべき頂上を発見したという希望のシグナルに近いものです。「知らないことを知らない」と言い、「ある事実だけを話す」人格的なAIに向けた旅が、ついに本格的な軌道に乗りました。

参考資料

1. FACTS Grounding: A new benchmark for evaluating the factuality of large language models — Google DeepMind
2. FACTS Benchmark Suite: a new way to systematically evaluate LLMs factuality — Google DeepMind

3. [FACTS Grounding: A New Benchmark for Evaluating the Factuality of Large Language Models

   ASU+GSV Summit Schedule](https://www.asugsvsummit.com/schedule/facts-grounding-a-new-benchmark-for-evaluating-the-factuality-of-large-language-models)

4. r/LocalLLaMA on Reddit: FACTS Grounding: A new benchmark for evaluating the factuality of large language models
5. The FACTS Leaderboard: A Comprehensive Benchmark for Large Language Model Factuality
6. FACTS Grounding: A new benchmark for evaluating the factuality of large language models
7. FACTS Benchmark Suite Introduced to Evaluate Factual Accuracy of Large Language Models - InfoQ
8. The FACTS Grounding Leaderboard: Benchmarking LLMs’ Ability to Ground …
9. PDFThe FACTS Grounding Leaderboard: BenchmarkingLLMs’AbilitytoGround …
10. FACTS Grounding Leaderboard - llm-stats.com
11. The FACTS Grounding Leaderboard: Benchmarking LLMs’ Ability to Ground …
12. DeepMind FACTS Framework 2026: LLM Factual Accuracy Guide
13. FACTS Grounding Benchmark Overview - api.emergentmind.com
14. The 70% factuality ceiling: why Google’s new ‘FACTS’ benchmark is a …
15. FACTS Benchmark Suite Elevates LLM Factuality Scrutiny