針對(duì)UA屏蔽Yisouspider的方法:
例如 apache 服務(wù)器,.htaccess 文件:
SetEnvIfNoCase User-Agent "YisouSpider" bad_bot Deny from env=bad_bot
或者:
RewriteEngine on
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} YisouSpider [NC,OR]
RewriteRule .* - [F,L]Nginx 服務(wù)器:
if ($http_user_agent !~* "YisouSpider")
{
return 403;
}原理是通過(guò)檢測(cè)爬蟲(chóng) UA 中的“"YisouSpider"”來(lái)屏蔽該爬蟲(chóng),返回403禁止訪(fǎng)狀態(tài)碼。
我是有底線(xiàn)的
掃描二維碼手機(jī)查看該文章
文章引用:http://www.qingbaosc.com/news/webzhishi/1405.html




