WEBマーケティング用語一覧

クロール(クローラ)

Googleのクローラはrobots.txtをきちんと解析し指示に従ってくれますので、クロールの必要のないページやディレクトリにはきちんとrobots.txtを設定するとよいでしょう。

Googleにクロールされることは、SEOにおいては最初のステップとして重要視されており、特に意図しないクロールエラーが起きた場合は注意が必要です。

Googleのクローラのユーザエージェント一覧
https://support.google.com/webmasters/answer/1061943?hl=ja

関連する用語はこちら
クロールエラー
ユーザエージェント(User agent)
robots.txt

一覧へ戻る


※随時更新中

  • ログインする
  • 新規会員登録
SEOのプロが解説するセミナー
無料SEO個別相談会
プレミアムコンテンツ
サクラサクLABO公式ブログ

更新をチェック

お問合せフォーム
専任コンサルタントをつけませんか?
コンテンツにお悩みの方はライティング専門クラウドソーシング
アフィリエイト記事はプロにお任せ!
WordPressセキュリティ診断【無料キャンペーン実施中!】 - Webマーケティングのブレインネット

ツール


サービス


メニュー