「robots.txt から世界が見える?」へのコメント
「水無月ばけらのえび日記 : robots.txt から世界が見える?」について、5件のコメントが書かれています。
[1699] Re: えび日記 : 「robots.txt から世界が見える?」
kazu (2004年3月15日 23時50分)
大昔には、(robots.txtではなく)robot.txtにアクセスしようとするロボットが存在するような話を聞いたことがあるんですけど、都市伝説ならぬウェブ伝説でしょうか。
[1706] Re: えび日記 : 「robots.txt から世界が見える?」
ばけら (2004年3月16日 12時36分)
>大昔には、(robots.txtではなく)robot.txtにアクセスしようとするロボットが存在するような話を聞いたことがあるんですけど、都市伝説ならぬウェブ伝説でしょうか。
うーん、そういう実装は確かにありえますね。
ただ、私の手元のログを見る限りでは、/robot.txt を GET しようとしているロボットはちょっといない感じです。
広い世界にはいそうな気もしますけれども。
[1714] Re: えび日記 : 「robots.txt から世界が見える?」
kazu (2004年3月16日 22時38分)
ちと気になって調べてみたら、robot.txtにアクセスありました。
今年に入ってからだけで4回あります。
UA名は、suzakuだそうです。
[1715] Re: えび日記 : 「robots.txt から世界が見える?」
ばけら (2004年3月17日 12時29分)
>ちと気になって調べてみたら、robot.txtにアクセスありました。
>今年に入ってからだけで4回あります。
……まけた……。
>UA名は、suzakuだそうです。
これでしょうか?
「水無月ばけらのえび日記 : robots.txt から世界が見える?」についてコメントを書く場合は、以下のフォームに記入してください。