得知互动

标题: 百度站长平台教你如何识别Baiduspider [打印本页]

作者: gevaemaidovef    时间: 2015-3-27 12:49
标题: 百度站长平台教你如何识别Baiduspider
摘要:误封过Baiduspider,想把所有BaiduspiderIP放入白名单?发现一只名为Baidu的spider行径可疑,该如何判断?5 R4 U  h9 `0 N0 b' I; i

9 B( e: i& W5 v9 q; Z   上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。
5 r6 G9 T$ Y/ Q5 ]; F, L & L/ g; ~* q/ D. ?& x
    除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。1 \! @% X4 p: C
那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?. P& ^/ s: ]& Z
( i2 Z( Z( |" r* J) v  X3 V
   可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下: 2 ]- r- t; z# y* W/ l7 ~: N' e* w

" ^+ k4 l0 e+ v2 o. c! J   1,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
2 g* s6 Z+ x6 D8 a1 t# T (, 下载次数: 14) 5 o$ g; C1 @: l2 J
. h9 ]9 |+ A1 [# U1 |
  2,在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。   m. }. z' R; x+ d2 m, M

8 K4 ~9 Q) u3 {. k  3,在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
6 c! _9 A$ o) c8 x! ? 4 z0 i0 w+ f- p& t) W' S! w
seo论坛
作者: 匿名    时间: 2015-4-5 17:19
这是怎么了啊??
作者: 匿名    时间: 2015-4-5 17:25
(⊙o⊙)…好长啊,我虽然回复不了那么多字,但十五字还是有的。
作者: 匿名    时间: 2015-4-5 17:29
此贴有意思~
作者: 匿名    时间: 2015-4-5 17:32
楼主说的是什么?我是小白,好像还没看明白!
作者: 匿名    时间: 2015-4-5 17:34
那个家 让它沉下去吧! 不要啦
作者: tohme    时间: 2016-2-18 19:21
老大,我好崇拜你哟
作者: tohme    时间: 2016-2-18 19:22
为了不让帖子沉得太快!!!为了人人知道这个~!! 我不是原创~!!但是我要把他发扬广大~!!!
作者: bqtklouu    时间: 2016-2-18 19:22
我起来了 哈哈 刚才迷了会




欢迎光临 得知互动 (https://bbs.dezhifl.com/) Powered by Discuz! X3.4