2011年1月14日(金) 14時08分31秒 [Web関連]

BaiduMobaiderというユーザエージェントからのアクセス数が尋常じゃない

2010年12月の1ヶ月間だけで、27万9千回も「BaiduMobaider/1.0」というユーザエージェントでのアクセスがあるんですが……。来すぎじゃないですかね……？
どうやらBaiduのクローラーっぽいんですが。

2010年12月の1ヶ月間で、うちのウェブサーバにアクセスのあった回数（ヒット数）は、2,079,213回。このうち、BaiduMobaiderというユーザエージェントからのアクセスは279,156回。なんと、これだけで13.43％も占めています。
……いくら何でもアクセスしすぎでしょう。

Googlebot（Googleのクローラー）が巡回した回数の約7.7倍、
Yahoo! Slurp（Yahoo!のクローラー）の約3.1倍ですよ……。(^_^;;;

しかもこれ、DoCoMoを模した名称を使ってアクセスしてきています。つまり、モバイル向けウェブサイトを収集するクローラーってことですよね？？
うちのサイトにある大半のページ（たぶん99％以上）がPC向けのサイトなんですが。携帯向けのサイトって1％どころか数ページ程度しかないんですけど……。(^_^;;;

どうなってんだ……？