摘要:误封过Baiduspider,想把所有BaiduspiderIP放入白名单?发现一只名为Baidu的spider行径可疑,该如何判断?
\# W& O& J1 k0 Y' C" g
+ ~" B( j% L% X" | 上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。2 @4 V$ l' U9 k7 K: V" l. j% A; v
: `; Y7 o. W7 \2 }
除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。
! J! c1 \, l( E& }* L& W7 f那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?# z! w: w4 Y0 t! e* j
& c1 R K( }9 ~0 L+ y! t 可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
% R1 ^' T, I3 N 8 F4 n, i+ g0 f' D0 Z T" N6 m# f! @/ `1 k
1,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
3 k6 p- H2 S4 J/ ?
百度站长平台教你如何识别Baiduspider
+ _' m) P& p0 k. |
' x% J8 K3 h* I, d3 I 2,在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
~8 r1 y# E! P, F' {& k/ b8 d x
9 m5 u4 i3 E/ N$ U 3,在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
' k T3 f6 F2 D' s3 e/ K
6 y/ K4 f' Q3 e( t9 m! i7 g1 V8 hseo论坛 |