またまたアクセス制限

しばらく落ち着いたなーと思っていたのですが、お行儀の悪いクローラ(検索エンジン用、サイト取得プログラム。BOT)が増えてきました。

 制限の方法は、UserAgent(UA)で弾いているので、UAを変えてしまえばアクセスできてしまいますが、それなりの効果がありますので実行しました。

robot.txtで制限してもいいのですが、これを使わない行儀が悪いのがいますので、.htaccessでやりました。


以下.htaccessソース

SetEnvIf User-Agent "libwww-perl" deny_ua
SetEnvIf User-Agent "e-SocietyRobot" deny_ua
SetEnvIf User-Agent "Twiceler-0.9" deny_ua
SetEnvIf User-Agent "BecomeJPBot" deny_ua
SetEnvIf User-Agent "MJ12bot" deny_ua

Order allow,deny
allow from all
deny from env=deny_ua


ご参考までに...

今までのアクセス制限など...Wisp's Garden:更新情報 : アクセス制限
2008.10.07

コメント投稿フォーム