WEBマーケティング用語一覧

クロール(クローラ)

Googleのクローラはrobots.txtをきちんと解析し指示に従ってくれますので、クロールの必要のないページやディレクトリにはきちんとrobots.txtを設定するとよいでしょう。

Googleにクロールされることは、SEOにおいては最初のステップとして重要視されており、特に意図しないクロールエラーが起きた場合は注意が必要です。

Googleのクローラのユーザエージェント一覧
https://support.google.com/webmasters/answer/1061943?hl=ja

関連する用語はこちら
クロールエラー
ユーザエージェント(User agent)
robots.txt

一覧へ戻る


※随時更新中



  • ログインする
  • 新規会員登録
プレミアムコンテンツ
プレミアムコンテンツ
無料SEO個別相談会
サクラサクLABO公式ブログ

更新をチェック

お問合せフォーム
プレミアムコンテンツ
無料SEO個別相談会

ツール


サービス


メニュー