SEO
クロールとは
読み:くろーる / 英:Crawling
ひと言でいうと
クロールは、検索エンジンのロボット(クローラー)がページを読みに来て、文章・画像・リンクなどを取得することです。
くわしく
検索エンジンは、ほかのページからのリンクやサイトマップをたどって新しいURLを見つけ、ロボットがそのページを読みに行きます。これがクロールです。読み取った内容は整理されて、検索結果に出せるように登録(インデックス)されます。
なぜ大事なのか
クロールされないページは、登録も検索結果への表示もされません。新しく作ったページへのリンクがない、robots.txt で読みに来ないよう指定している、といった状態だと、検索エンジンがページにたどり着けません。
よくある誤解
「クロールされた=検索結果に出る」ではありません。Search Console の「クロール済み - インデックス未登録」のように、読んだうえで登録が見送られることもあります。
確認と改善のポイント
- 新しいページには、トップやメニュー、関連する記事からリンクを張る
- サイトマップを Search Console から送信する
- 読みに来てほしいページを robots.txt で止めていないかを確かめる
- Search Console の「URL検査」で、最後にクロールされた日時を確かめる
この悩みに役立つコラム
クロールについて調べている方が、次によく読んでいる記事です。具体的な手順や、ケースを紹介しています。
関連する用語
SEOrobots.txtrobots.txtは、検索エンジンのロボットに、サイトのどこを読みに来てよいか・来ないでほしいかを伝える、サイトの一番上に置くファイルです。SEOインデックス(検索エンジンへの登録)インデックスは、検索エンジンがページの内容を読み取り、検索結果に表示できるようにデータベースへ登録することです。SEOサイトマップ(XMLサイトマップ)サイトマップは、サイトの中のページのURLを一覧にして、検索エンジンに伝えるためのファイルです。一般に sitemap.xml という名前で置きます。SEO内部リンク内部リンクは、同じサイトの中のページ同士をつなぐリンクです。読む人の移動を助けるとともに、検索エンジンにページの関係と重要度を伝えます。
監修:佐保 祐大 / 更新 2026.11.17