[レベル: 中級]
Google は、クロールに関する技術ドキュメントに、クロールの仕組みに関する新たなページを追加しました。
なお、2025 年 11 月に Google は、クロールに関するドキュメントを新しい場所に移行し、独立したサイトとして新規公開しています。
これ以前は、一連の技術ドキュメントの 1 項目として組み込まれていました。
クロールに関する基本的な教育情報を含むリソースページ
新たに追加されたのは、クロールに関する基本的な教育情報を含むリソースページです。
長年にわたって寄せられた質問に基づき、サイト所有者が利用できるクロールに関するさまざまなリソースをよりわかりやすく紹介するために作成したとのことです。
次の 9 セクションから構成されます。
- クロールとは何か？ 簡単に言うと、クロールは Google がウェブを「見る」方法です
- 私たちは多くのクローラーを持っており、それぞれが重要な役割を担っています
- 最新の更新情報を見つけ、より新鮮な検索結果を提供するために、繰り返しクロールを実行します
- 頻繁なクロールは良いサインです！
- ページがより複雑になるにつれて、Google のクロールは時間とともに増加してきました
- クロールは自動的に最適化されています
- Google のクローラーは、許可なくペイウォールやサブスクリプションコンテンツに入ることはありません
- サイト所有者は、何がクロールされるか、そしてどのようにクロールされるかをコントロールできます
- 私たちの標準クローラーは、コンテンツのアクセス方法や使用方法に関するウェブサイトの選択を常に尊重します
内容としては、クロールの仕組みを知っているのであれば新しい発見はありません。
それでも、知識の再確認という点では有用なリソースです。
大規模サイト管理であれば、セクション 4 の「頻繁なクロールは良いサインです！」に敏感に反応しそうです。
公開直後のため、この記事を書いている時点ではまだ日本語化されていません。
英語で読みたくなければ、日本語ページが公開されるのを待つか翻訳ツールを使って内容を確認するといいでしょう（長いページではない）。
※日本語パラメータ (?hl=ja) をリンク先 URL に追加したので、日本語訳されていれば日本語ページが表示されます