何気なく某所のApache2の生ログを見てたら、Yahoo!Chinaのクローラーがやってきているのをたまたま見つけてしまった。
202.160.180.55 - - [02/Jun/2006:13:07:33 +0900] "GET /robots.txt HTTP/1.0" 200 345 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)" In:- Out:-:-pct.
202.160.180.126 - - [02/Jun/2006:13:07:37 +0900] "GET /index.html HTTP/1.0" 200 4916 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)" In:26958 Out:4898:18pct.
初めて見たけど、前からうろついてるんだろうか?
中国にとって好ましいサイトか好ましくないサイトか判断してフィルタリングするためにクローリングだったりして… まさかね。純粋に検索のためにやってるんだと信じたいところです。
inetnum: 202.160.176.0 - 202.160.191.255
netname: YAHOO-ALIBABA-1
descr: Yahoo Inc, Internet Content Provider
country: CN
admin-c: YI12-AP
tech-c: YI12-AP
mnt-by: APNIC-HM
mnt-lower: MAINT-AP-YAHOO-INC
status: ALLOCATED PORTABLE