「中国産検索エンジン「百度」が日本語検索サービスを開始」記事へのコメント

botの方針変えたらしい

[Anonymous Coward]

あのはた迷惑な baiduspider 動かしておいて、何をキレイごと抜かしとるんじゃ！
……と思ったら、いつの間にか方針 [baidu.jp]変えとったんだね。

＃とはいえ、一度染み付いた悪印象は拭いがたいものだが。

Re:botの方針変えたらしい

[Anonymous Coward]

あ、ホントだ。
謝罪まで掲載してるのは好感持てるね。

でも、やっぱ一度染み付いた悪印象は私もなかなか拭えません。
htaccessの設定を変える気は当分無いな

Re:botの方針変えたらしい

[bakuchikujuu (16666)]

＞でも、やっぱ一度染み付いた悪印象は私もなかなか拭えません。

　いや、まったく。
　403を返しているのに以前収集したリストに従って数アクセス／秒 [homeunix.net]なんてされたら、いい感情は持てないです。

＞htaccessの設定を変える気は当分無いな

　同様に、robots.txtを変える気にはなれません。

…が、

122.152.128.48 - - [22/Mar/2007:17:06:20 +0900] "GET / HTTP/1.1" 200 12769 "-" "
Baiduspider+(+http://www.baidu.com/search/spider_jp.html)"
122.152.128.48 - - [22/Mar/2007:18:06:11 +0900] "GET / HTTP/1.1" 200 12769 "-" "
Baiduspider+(+http://www.baidu.com/search/spider_jp.html)"
122.152.128.48 - - [22/Mar/2007:19:05:34 +0900] "GET / HTTP/1.1" 200 12769 "-" "
Baiduspider+(+http://www.baidu.com/search/spider_jp.html)"
122.152.128.48 - - [22/Mar/2007:20:05:51 +0900] "GET / HTTP/1.1" 200 12769 "-" "
Baiduspider+(+http://www.baidu.com/search/spider_jp.html)"

あれれ？なんで？…と思ったら

User-Agent: baiduspider
Disallow: /

となっていました。
　心優しいgooglebotやmsnbotは、"User-Agent: *"を、仕方ないなぁ"User-agent: *"なんでしょ？、と大目に見ていたようです。

　1時間おきに/を見に来るようなロボットはどうよ？と思うので、robotx.txtを訂正して、改めてbaiduspiderにはお引き取り願うことにしました。

Re:botの方針変えたらしい

[FTNS (17738)]

私のhttpd.confを見ていたら、以下のような記述がありました
当時相当に頭にきていたと思われます。

---
:
# Baiduspider
# Chinese bad-behavior crawler
Deny from 60.28.*.*
:
:
SetEnvIf User-Agent "[Bb][Aa][Ii][Dd][Uu][Ss][Pp][Ii][Dd][Ee][Rr]" CrawlerAgent
SetEnvIf User-Agent "http:¥/¥/www¥.baidu¥.com¥/" CrawlerAgent
:
:
<Directory "/usr/local/www/***/data">
    AllowOverride ....
    Options ....

    Order deny,allow
    Deny from env=CrawlerAgent
</Directory>
---

今は....やっぱり開ける気はしません。
今時衛星破壊実験やってしまうような国のサービスに、協力する義務も義理も人情も無い訳で。
＃中国で政府と無関係でインターネットサービスできると思えますか？

--
--- de FTNS.