pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的
4 x% B0 ^+ }( H; w: {8 Z9 i! v: \' N0 |9 h* g
[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot
' j C' l- e% p4 k: _SetEnvIfNoCase User-Agent .*exabot.* bad_bot
0 Q4 Y" F. J6 Q. S; v N) OSetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
5 u6 L. J2 N8 ~) x8 {2 FSetEnvIfNoCase User-Agent .*dotbot.* bad_bot! t; P# J, ^9 j: V) B
SetEnvIfNoCase User-Agent .*gigabot.* bad_bot' R& o: b4 I( ]# U- z3 a/ H
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot
) f- e) O4 O3 c* T/ pSetEnvIfNoCase User-Agent .*sitebot.* bad_bot8 {! f) i! L) m* L0 v6 Y. `: d
<Limit GET POST HEAD>
' D) |4 X8 Z$ q" @3 T, W6 N/ KOrder Allow,Deny
- U# ?" g5 a9 qAllow from all
$ b0 `' F; p2 z4 SDeny from env=bad_bot
. x. l& a& G- r</Limit>[/mw_shl_code]0 s Z0 X3 |- P% z) C
1 T$ ]0 l! W2 `! U- f但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!0 ~, \- X# [9 H; d) v
5 L, c. G- H8 Z
|