Google ウェブマスター向け公式ブログ [JA] : Googlebot について、よくある質問

ウェブマスター向け公式ブログ

Google フレンドリーなサイト制作・運営に関するウェブマスター向け公式情報

Googlebot について、よくある質問

2009年6月24日水曜日

ウェブマスターヘルプフォーラム2006 年に英語版ウェブマスターセントラルブログに掲載された記事サイトをメンテナンスのために落としています。Googebot に「メンテナンス中」のページをインデックスさせるのではなく、後でクロールに戻って来るよう伝えたいのですが、どうしたらいいですか？HTTP ステータスコードGooglebot がサイトをクロールする負荷が高すぎる場合はどうしたらいいのですか？ウェブマスターツール内 [サイト設定] の [クロール速度] セクションで、希望のオプションを選択していただくことができます。

Robots メタタグと robots.txt ファイルはどちらを使うのが望ましいのですか？Robots.txt に、全ての検索エンジンのボット（クローラ）を対象にした記述と、Googlebot のみを対象にした記述が混在している場合、全ての検索エンジンを対象にした記述を Googlebot はどのように解釈するのですか？User-agent: *
Disallow: /

User-agent: Googlebot
Disallow: /cgi-bin/
User-agent: *
Disallow: /
robots.txt のテスト

ヘルプセンターPosted by サーチクオリティチーム
Original Version: All About Googlebot

ラベル: クロールとインデックス , 上級者向け , 中級者向け

ラベル

アーカイブ

2020
- 11月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2019
- 11月
- 10月
- 9月
- 8月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2018
- 12月
- 11月
- 10月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2017
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 4月
- 3月
- 2月
- 1月

2016
- 12月
- 11月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2015
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 5月
- 4月
- 3月
- 2月
- 1月

2014
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2013
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2012
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2011
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2010
- 12月
- 11月
- 10月
- 9月
- 8月
- 7月
- 6月
- 5月
- 4月
- 3月
- 2月
- 1月

2009
- 12月
- 11月
- 10月
- 8月
- 7月
- 6月
- 4月
- 3月
- 2月
- 1月

2008
- 12月

Feed

Google
Privacy
Terms