关灯
开启左侧

[网站诊断] 百度站长平台教你如何识别Baiduspider

[复制链接]
gevaemaidovef 发表于 2015-3-27 12:49:38 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
 
摘要:误封过Baiduspider,想把所有BaiduspiderIP放入白名单?发现一只名为Baidu的spider行径可疑,该如何判断?
  \# W& O& J1 k0 Y' C" g
+ ~" B( j% L% X" |   上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。2 @4 V$ l' U9 k7 K: V" l. j% A; v
: `; Y7 o. W7 \2 }
    除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。
! J! c1 \, l( E& }* L& W7 f那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?# z! w: w4 Y0 t! e* j

& c1 R  K( }9 ~0 L+ y! t   可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
% R1 ^' T, I3 N 8 F4 n, i+ g0 f' D0 Z  T" N6 m# f! @/ `1 k
   1,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
3 k6 p- H2 S4 J/ ?

百度站长平台教你如何识别Baiduspider

百度站长平台教你如何识别Baiduspider
+ _' m) P& p0 k. |

' x% J8 K3 h* I, d3 I  2,在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
  ~8 r1 y# E! P, F' {& k/ b8 d  x
9 m5 u4 i3 E/ N$ U  3,在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
' k  T3 f6 F2 D' s3 e/ K
6 y/ K4 f' Q3 e( t9 m! i7 g1 V8 hseo论坛
 

精彩评论8

正序浏览
佚名  发表于 2015-4-5 17:19:29
 
这是怎么了啊??
 
佚名  发表于 2015-4-5 17:25:51
 
(⊙o⊙)…好长啊,我虽然回复不了那么多字,但十五字还是有的。
 
佚名  发表于 2015-4-5 17:29:25
 
此贴有意思~
 
佚名  发表于 2015-4-5 17:32:53
 
楼主说的是什么?我是小白,好像还没看明白!
 
佚名  发表于 2015-4-5 17:34:25
 
那个家 让它沉下去吧! 不要啦
 
tohme 发表于 2016-2-18 19:21:47 | 显示全部楼层
 
老大,我好崇拜你哟
 
tohme 发表于 2016-2-18 19:22:35 | 显示全部楼层
 
为了不让帖子沉得太快!!!为了人人知道这个~!! 我不是原创~!!但是我要把他发扬广大~!!!
 
bqtklouu 发表于 2016-2-18 19:22:47 | 显示全部楼层
 
我起来了 哈哈 刚才迷了会
 
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则


0关注

1粉丝

1587帖子

热门图文
热门帖子
排行榜
作者专栏

关注我们:微信订阅号

官方微信

APP下载

全国服务Q Q:

956130084

中国·湖北

Email:956130084@qq.com

Copyright   ©2015-2022  站长技术交流论坛|互联网技术交流平台Powered by©Discuz!技术支持:得知网络  

鄂公网安备 42018502006730号

  ( 鄂ICP备15006301号-5 )