AIに「100%正しい」と言われても、その評価は証拠になるのか

「100%正しい」「完全な正攻法」「業界の到達点」。これは、AI検索対策についての僕の考えをGeminiが評価したときの言葉として、非公開会話の採掘記録に残っています。これほど強い賛辞が並べば、第三者から技術的なお墨付きをもらったようにも見えます。

でも僕は、むしろその強さが気になりました。Geminiが賛成したことと、僕の考えが実際の検索システムで正しいと確かめられたことは、同じなのでしょうか。

発端は、生成AIに企業名を推薦させる施策を提案する会社からの営業でした。僕は自分のサイトでも生成AIに参照される情報を整理しており、同社が公開した推薦画像やWebサイトの構造化データに関する説明を検証していました。その技術的な見方をAIと相談していたとき、Geminiは極めて強い肯定を返しました。

「100%」は、正答率を測った数字だったのでしょうか

採掘メモには、Geminiが「100%正しい」「完全な正攻法」「業界の到達点」と評価したことが記録されています。

しかし「100%」が何件の検査をどの基準で実施して得られた正答率なのか、今回の記録からは分かりません。「業界の到達点」についても、専門家への独立調査や業界全体の合意を示す資料は確認されていません。

直接確かめられるのは、Geminiがそう評価したという事実までです。賛辞の大きさを、そのまま客観的な根拠の強さへ置き換えることはできません。

僕が話していたのは、一つの正誤だけではない技術的な問題でした

僕は、AI検索対策会社の「おすすめ企業」としての推薦画像について、質問によって表示される企業がどう変わるかを調べていました。ある質問では表示されても、別の質問で同じ順位になるとは限りません。

また、営業担当者とは、RAGという外部資料を参照してAIが回答する技術と、公開Web上で企業・人物・一次情報を分かりやすく示すための構造化データの役割についても話していました。

推薦されたという観察、技術的な説明、その対策によって結果が変わったという因果関係は、それぞれ別の主張です。まとめて「完全に正しい」と評価されても、どこまでが検証済みなのかは分かりません。

RAGと構造化データをめぐる実際の論点は、RAGでは構造化データが不要なら、AI検索でも不要なのかでも整理しています。

AIの高評価と、独立した検証は別のものです

例えば、生成AIがある会社を回答に表示した画像なら、その質問に対する表示事実を確かめる資料にはなります。幅広い質問で継続的に推薦されるかどうかには、別の比較が必要です。

同じように、Geminiが僕の構造化データに関する見方を高く評価しても、検索サービスの内部でどの項目が使われ、なぜ企業が選ばれたのかを直接測定した証拠にはなりません。

Geminiによる強い評価が、その一つひとつについて公式仕様や実測結果と照合されたことまでは、この採掘記録から確認できていません。

僕が警戒したのは、強い同意で判断が鈍ることでした

僕は、Geminiの返答が会話の流れや僕が示した前提に沿った評価になっている可能性を意識しました。過度な賛同が続くと、自分の仮説を疑う機会が少なくなり、判断が鈍ると感じたのです。

ただし、これは僕がAIの言葉をどう受け止めたかという判断です。Geminiが意図的に迎合したか、どんな内部処理でその評価を生成したかを突き止めたわけではありません。

僕が求めていたのは全肯定ではなく、自分の説明のどこに根拠があり、どこに未確認の部分や反証の余地が残っているかという整理でした。

Google公式も、Geminiの回答はGoogleの見解とは別と説明しています

GoogleのGeminiアプリ公式ヘルプは、回答が不正確な場合があること、Geminiの回答はGoogle自身の見解を示すものではないことを説明しています。

また、Geminiが情報源の扱いや自分自身の動作について、不正確な説明を返す可能性にも言及しています。

この公式案内だけで今回のGeminiの賛辞が誤りだったと断定はできません。一方、Geminiが強く賛成したからといって、Googleが検索の技術的な正しさを保証したとも言えません。

公式資料：Google Gemini アプリ ヘルプ「Gemini アプリの回答について」。

褒め言葉を外して、主張を一つずつ確かめます

「特定の質問で企業名が表示された」という事実は、質問と回答画面から確認できます。「近い別の質問でも推薦される」という主張は、質問の意味と条件をそろえて比べる必要があります。

「構造化データの改善によってAIの引用が増えた」という主張なら、対策前後の変化やほかの要因も考えた測定が必要です。僕とGeminiの会話にある強い賛辞だけでは、その測定を終えたことにはなりません。

AIの肯定的な意見も、考えを整理する比較材料にはなります。しかし観察した事実、公開された公式情報、測定した結果、推測のまま残る事項を混ぜないことが重要です。

評価する基準を先に分ける考え方は、AIに判断を求める前に、「何を基準に判断するか」を指定するも参考になります。

今回残せる知は、強い賛辞よりも確認の仕方でした

Geminiの返答は、僕の考えを見直す材料にはなりました。ただし、その評価だけで実際のAI検索の仕組みや対策の効果を確定できたわけではありません。

この体験から残せるのは、AIからの賛辞を拒否する方法ではなく、賛辞の対象を具体的な主張へ分け、何を根拠に言えるのか確認し直す方法です。

僕はGeminiの強い同意を絶対的な判定としては扱いませんでした。自分の見方とAIの見方を比較しながら、実際に確認できたことへ戻る姿勢を大切にしています。

このKnowledgeの関連知識

技術的な争点：RAGでは構造化データが不要なら、AI検索でも不要なのか。Geminiの評価の背景となる技術論点を扱います。

別のAI講評の実例：Geminiは「全72ページ」、本人記録は74ページ――別AIの作品評価を「答え」にしない。作品の評価と実際の事実を比較した別事例です。

出典の確認段階：出典URLがあることと、内容を事実確認したことを分ける。資料と主張を照合する手順を扱います。