ルール大学ボンキャンパスとマックス・プランクソフトウェアシステム研究所が実施した研究は、従来の検索エンジンと生成型AIシステムが情報源や情報の提示方法においてどのように異なるかを詳細に分析しています。研究チームは、グーグルの自然検索結果と4つの生成型AI検索システム(グーグルAIの概要、検索機能付きGemini2.5Flash、GPT-4o-Search、および検索ツールが有効なGPT-4o)を比較しました。この研究では、政治、製品レビュー、科学など6つのトピックを含む4,600以上のクエリが対象となり、これらのシステムがネットワーク情報を処理する際の多様性が明らかになりました。

図の出典:AIで生成された画像、画像のライセンス提供者Midjourney
研究の結果、AI検索システムはより広範かつあまり知られていないウェブサイトから情報を取得できることがわかりました。例えば、AIの概要では、53%の引用先のウェブサイトがグーグル検索結果の上位10位には表示されておらず、27%は上位100位にも含まれていなかったのです。これは、ユーザーが審査が少ないまたはなじみのないウェブサイトからの情報を目にする可能性があることを示しています。
情報源の参照の深さに関しては、GPT-Toolは平均して各回答ごとに0.4つの外部ソースのみを参照しており、主に内部データに依存しています。一方、AIの概要とGeminiはそれぞれのクエリで8つ以上の外部ソースを参照しており、情報の豊かさが明らかです。また、従来のグーグル検索は通常、1回のクエリに対して10件のリンクに制限されるため、情報源がより集中しています。
研究では、現在の出来事の処理において、従来の検索エンジンの方がAIシステムよりもはるかに優れていることも強調されています。100のホットトピックに対するテストでは、AIの概要は3%のクエリしかカバーできず、GPT-4o-Searchは72%のカバレッジでした。これは、AIシステムが最新情報の更新に不十分であることを示しており、ユーザーが古くまたは正確でない情報を受ける可能性があることを意味します。
ポイント:
🌐 AI検索システムが参照する53%のウェブサイトはグーグル上位10位に表示されず、情報源がより多様です。
📊 GPT-Toolは平均で0.4つの外部ソースを参照し、主に内部知識に依存しています。
📰 従来の検索は現在の出来事の正確性においてAI検索システムよりもはるかに優れています。
