つまるところ、「Googlebot」とついているクローラー全てがブロックされると言うことです。
http://www.google.co.jp/support/webmasters/bin/answer.py?answer=40364
まさかとは思ってたけど、公式にあるなんて知らなかった...とんだ盲点...。
対処法として
ってのがあるんですが、ちょい怪しいんじゃないかな...。Googlebot をブロックして、Googlebot-Mobile など他の Google ロボットを許可する場合、Allow ルールを使用して特定のロボットにアクセスを許可することができます。 たとえば、次のように指定します。
User-Agent: Googlebot
Googleウェブマスターセントラル
Disallow: /
User-Agent: Googlebot-Mobile:
Allow:
携帯サイトめんどくさー！
« csactionsタグとcsscriptdictタグ | ホーム | 新ジャンル・画像でSEO »
http://pulltab.info/mt/mt-tb.cgi/27
