2003-06-30 msnbot 噂のMSNBOTがやってきた。15〜30秒くらいの間隔で全リンクを辿ってゆく……なんだかなあ。robots.txtで弾けるようだが未確認。 ロボットにしては珍しくHTTP_REFERERを吐いているが、さて。