Contact us
『ホームページ制作の相談をしたい』『もっとたくさん商品を売りたい』等、ご要望をお伝えくださいませ。
疑問に思っていること、お困りごと、具体的な内容が未定でも、まずはお気軽にご相談くださいませ。
Googlebotは、Google検索のためにWebページなどを取得するクローラーの総称です。スマートフォン用とパソコン用があり、リクエストのユーザーエージェントで種類を見分けられます。[1]
Googlebotのアクセスは、ページを調べる段階の動きです。Googleは取得したページを解析し、検索用のデータベースに登録するかを判断します。検索結果への掲載はその後の段階です。[1]
たとえば公開直後の記事へのアクセスログは、Googlebotのリクエストを受けた記録です。登録の状況やGoogleが読み取った指示は、Google Search ConsoleのURL検査などで確認します。[1][2]
ログを読むときは、リクエストに記されたクローラーの種類と、実際の送信元を確認します。[1]
サイト側の設定は、Googlebotに取得させたいか、取得後に検索へ登録させたいか、閲覧自体を許可したいかで選びます。
robots.txtでクローラーに指示します。[3]noindexが読み取られると、Googleはそのページを検索結果から除外します。[2]『ホームページ制作の相談をしたい』『もっとたくさん商品を売りたい』等、ご要望をお伝えくださいませ。
疑問に思っていること、お困りごと、具体的な内容が未定でも、まずはお気軽にご相談くださいませ。
Web制作・運用・改善に20年以上携わり、WordPress、CMS構築、SEO、AWSなど、Webサイトの企画・制作から公開後の運用まで幅広く担当。実務経験にもとづき、本記事の内容・表現・技術情報を監修しています。