Google はなぜLLMs.txtを不要と言いながら推奨するのか? 検索とAIエージェントの決定的な違い

[レベル: 上級]

Google の AI 検索に llms.txt ファイルや Markdown ファイルは本当に不要なのでしょうか?

矛盾する説明

Google が検索セントラルに先日公開した生成 AI 検索機能のベストプラクティスでは、llms.txt や Markdown は不要だと説明されています。

LLMS.txt ファイルとその他の「特殊な」マークアップ: 生成 AI 検索に表示されるために、新たにコンピュータが解読可能なファイルや AI テキスト ファイル、マークアップ、Markdown を作成する必要はありません。Google は、ウェブサイト上の HTML に加えてさまざまな種類のファイルを検出、クロール、インデックス登録することがあることにご注意ください。これはそのファイルが特別な方法で扱われることを意味するものではありません。

一方で、Lighthouse のドキュメントでは AI エージェントのブラウジングのために、 Markdown の llms.txt が推奨されています。

llms.txt ファイルを作成し、ウェブサイトのルート ディレクトリ(https://example.com/llms.txt など)に配置します。ファイルは llms.txt 仕様に準拠し、サイトの目的と主要なリンクの簡潔な Markdown 形式の概要を提供する必要があります。

一見すると、矛盾した説明に思えます。
どういうことなのでしょうか?

目的の相違:発見性 vs. 機能性

検索向けドキュメントと開発者向けドキュメントのこうした齟齬の理由を Google 検索リレーションズチームの John Mueller(ジョン・ミューラー)氏が RedditBluesky で説明しています。

2 か所での説明をまとめると、ミューラー氏は、これは矛盾ではなく、むしろ 2 つの異なるチームがまったく別の 2 つのユースケースを想定しているためだとしています。<
見かけ上の対立は、ガイダンスの背後にある具体的な目的を見ると解消されます。
端的にいうと 「発見性」と「機能性」の違いです。

発見性:生成 AI 機能を含む Google 検索

生成 AI 検索結果に表示されるために、llms.txt や Markdown は必要ありません。

理由は、Google 検索 と AI Overviews および AI Mode は、従来の検索と同じように、通常クロールされインデックス登録されたウェブコンテンツから情報を取得します。
回答エンジンは通常の HTML を問題なく読み取れるため、これらのファイルはランキングや露出の向上には役立ちません。

機能性:AI エージェント

AI エージェントにとっての使いやすさという点では、llms.txt や Markdown ページが役立つ場合があります。

Lighthouse ドキュメントの文脈は、開発者向けドキュメントの解析など、AI エージェントが サイト上で特定のタスクを完了することに関するものです。
簡略化された Markdown 版を提供することは、補助のように機能し、エージェントがコンテキストをより効率的に理解し、トークンコストを節約するのに役立ちます。

ミューラー氏は、これを従来のウェブページ上の CTA と似た働きに例えています。
つまり、人々がそのページを「見つける」ことには役立ちませんが、すでにそのページにいる人が「タスクを実行する」ことには役立ちます。

EC サイトのような非開発者向けサイトでは、llms.txt や Markdown による実用的なメリットはほとんどありません。

ミューラー氏は 2 つの理由を挙げています。

  • エージェント経由のトラフィックはまだ大きくない。今サーバーログを確認しても、AI エージェントからの意味のあるトラフィックは見られないはず。最適化の対象となっているユースケースは、まだ大規模には存在していない。
  • コンバージョンにはつながらない。たとえば、靴の商品仕様を Markdown 版にしても、売上が増えるわけではない。むしろ、競合他社があなたのコンテンツを利用しやすくなるだけ。

検索にとって重要なこと

llms.txt は数年前から存在しているにもかかわらず、主要な AI システムで実際に使用しているものはなく、現時点での利点は完全に推測にすぎない。

このようにミューラー氏は指摘します。

サイト所有者にとっての優先順位は、次のとおりです。

  • エージェントをブロックしないこと。最も重要な基本条件であり、ほとんどのサイトにとって最大の障壁である。
  • 推測上のエージェント的な未来に備えることよりも、具体的な SEO ニーズに注力すること。希望的観測よりもニーズを優先する。

◇ ◇ ◇

SEO の観点からは、llms.txt や Markdown ファイルがウェブ検索順位や AI Overviews/AI Mode への掲載に影響しないという点が重要です。
検索セントラルの指針どおり、従来の HTML コンテンツを適切にクロール・インデックスさせることが依然として基本です。

llms.txt や Markdown は、検索での発見性を向上させるものではなく、AI エージェントがサイトに訪問してから役にたつ(かもしれない)仕組みです。
しかもエージェント向けの最適化はまだ将来的な話であり、今は本質的な SEO 施策に集中すべきというミュラー氏のアドバイスは、多くのサイト管理者の参考になるでしょう。