2009年11月26日 星期四

擋掉(block) Baidu Spider

影響主機負載過重與頻寬傳輸量最有可能的原因就是 Robots 機器人作祟,而其中又以 百度(Baidu) Spider 為最。

.htaccess:

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ^Baiduspider [NC]
RewriteRule .* - [F]

Or

SetEnvIf User-Agent ^Baidu baidu
Deny from env=baidu


httpd.conf

SetEnvIfNoCase User-Agent "^Baidu" bad_bot

Order Allow,Deny
Allow from all
Deny from env=bad_bot



Module Identifier: setenvif_module

沒有留言:

wibiya widget