2003年8月22日(金曜日)

GoogleBot話

ちょっと調べてみたら、しっかりうちにも来てました、"GoogleBot"。

2003-07-29 09:21:40 220.73.165.214 - GET /robots.txt - 200 GoogleBot -
2003-07-29 19:11:58 218.145.25.43 - GET /robots.txt - 200 GoogleBot -
2003-07-31 20:04:08 218.145.25.43 - GET /robots.txt - 200 GoogleBot -

……たったの 3件。あの dloader の暴れぶりからは信じられないようなおとなしさですが、全部 /robots.txt へのアクセスだというのが気になります。どうも、/robots.txt を取りに来るときだけ GoogleBot を名乗るようですね。どうしてそうなっているのかは良く分かりませんけれども。

※って、最近まじめにログ監視してないのがバレバレですね。ごめんなさい。

「GoogleBot話」にコメントを書く