PBN的自我保護（1）

為了我們的月亮女神，我決定定期分享一些pbn的技巧和思路
. b. y0 l6 K& G
- s# F- A: O# I今天說一下，如何讓pbn不被競爭對手察覺
1 K& r9 B" J# _
- d4 I5 T0 u0 L, R+ x. I原理：
不被各種分析工具的蜘蛛給抓到

方式：
有很多種，，我只說一下robot的寫法
! T8 ?$ B$ W) P; D8 C! P
* p" y7 Y0 m& y8 l( A我們先認識一下幾個通用的robot

rogerbot (SEOmoz)
exabot (3ds.com)
! l5 b. J; z  J! o( MMJ12bot (majesticseo.com)
+ w4 B4 E) _: Mdotbot (dotnetdotcom.org)
gigabot (gigablast.com)
1 T8 p% T+ e* D' J' v+ K- MAhrefsBot (ahrefs.com)

我們robot可以這麼寫：
5 Y# ~) t4 n2 r

User-agent: rogerbot
/ d7 y7 D4 C6 a# U' ~* U8 ODisallow: /

" |/ O; ?7 |9 ]2 P/ SUser-agent: exabot
Disallow: /

' K+ y# z+ S- m7 [3 i7 o/ |4 ^User-agent: MJ12bot
5 `# u1 j9 N/ E6 JDisallow: /

5 T5 E' D, \! I" _( p5 W( n  PUser-agent: dotbot
Disallow: /
8 S9 R1 r' N! q
User-agent: gigabot
Disallow: /
7 f4 ~8 _6 q/ E/ M4 i: ?0 j5 D4 j
User-agent: AhrefsBot
Disallow: /

當然，如果想隱藏的非常好，這些還是不夠的，還需要屏蔽大概幾百個蜘蛛。
: @1 ~) ^. L  ]/ B
' O0 i2 Z* s* }" G% U

只要你不屏蔽googlebot，總會露出點蛛絲馬跡的

支持小黑同學出PBN專輯。。可以好好學習下了。

這個基本上是沒有用的，而且如果每個站都加上這樣的robots本身就是明顯的足跡

還不如不加。。特意屏蔽掉這幾個。。別人一看就知道。

謝謝樓主的分享，等待後續
7 _( U. S- _! W8 r' E

謝謝樓主分享經驗      
* Q- U- p8 R3 C! j- T6 }* z

隱性判斷，不使用robots.
* k2 Y8 `5 S% \  u2 R$ N

禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
5 d  q% J1 K% j8 a
" B+ n5 G' H- l: y6 c+ I# y

misca 發表於 2014-4-26 21:23
! E3 L) J3 [: E) m8 |禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
5 `3 S7 c  s& u7 w. @6 J
4 k1 [9 [& H7 b3 K1 h) Q8 u3 t ...

可以的。。。只支持 google、bing等幾個。
+ b& W2 A5 n/ i# x5 z# ^1 C; p

User-Agent: Googlebot
Allow: /
User-Agent: *
Disallow: /

0 u2 U* L( v" ]3 a* u! _