ngnix防采集过滤规则

1.根据访问地址过滤。

检测到访问地址有test=这些关键词，自动跳转到公安备案网。

if ($request_uri ~* test=) { 

return 301 http://www.beian.gov.cn; 

}

2.根据访问地址过滤。

检测到来源地址有Baiduspider，自动跳转到公安备案网。

if ($http_referer ~* Baiduspider) { 

return 301 http://www.beian.gov.cn; 

}

3.根据ua过滤

检测到ua，有Baiduspider直接过滤。反正被打也会打不开，跟过滤蜘蛛一个性质！

if ($http_user_agent ~* Baiduspider) { 

return 444; 

}

4.检测代理IP

检测代理IP是否设置

if ($proxy_add_x_forwarded_for != $remote_addr){ 
return 444; 
}