フリーランチなど無い - There ain't no such thing as a free lunch

BaiduSpiderを拒否

最近、アクセス数が徐々に増えてるのでサイトをリニューアルした甲斐があったと喜んでいたら、アクセスの半分が百度ことBaiduのクローラだったことが判明。別段大した負荷もかかってないのだが、他社のBotと比べてちょっと行儀が悪いんじゃないかということで、robots.txtに以下を追加。

User-Agent: baiduspider Disallow: /