得知互动
标题:
百度站长平台教你如何识别Baiduspider
[打印本页]
作者:
gevaemaidovef
时间:
2015-3-27 12:49
标题:
百度站长平台教你如何识别Baiduspider
摘要:误封过Baiduspider,想把所有BaiduspiderIP放入白名单?发现一只名为Baidu的spider行径可疑,该如何判断?
5 R4 U h9 `0 N0 b' I; i
9 B( e: i& W5 v9 q; Z
上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。
5 r6 G9 T$ Y/ Q5 ]; F, L
& L/ g; ~* q/ D. ?& x
除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。
1 \! @% X4 p: C
那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?
. P& ^/ s: ]& Z
( i2 Z( Z( |" r* J) v X3 V
可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
2 ]- r- t; z# y* W/ l7 ~: N' e* w
" ^+ k4 l0 e+ v2 o. c! J
1,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
2 g* s6 Z+ x6 D8 a1 t# T
(, 下载次数: 14)
上传
点击文件名下载附件
5 o$ g; C1 @: l2 J
. h9 ]9 |+ A1 [# U1 |
2,在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
m. }. z' R; x+ d2 m, M
8 K4 ~9 Q) u3 {. k
3,在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
6 c! _9 A$ o) c8 x! ?
4 z0 i0 w+ f- p& t) W' S! w
seo论坛
作者:
匿名
时间:
2015-4-5 17:19
这是怎么了啊??
作者:
匿名
时间:
2015-4-5 17:25
(⊙o⊙)…好长啊,我虽然回复不了那么多字,但十五字还是有的。
作者:
匿名
时间:
2015-4-5 17:29
此贴有意思~
作者:
匿名
时间:
2015-4-5 17:32
楼主说的是什么?我是小白,好像还没看明白!
作者:
匿名
时间:
2015-4-5 17:34
那个家 让它沉下去吧! 不要啦
作者:
tohme
时间:
2016-2-18 19:21
老大,我好崇拜你哟
作者:
tohme
时间:
2016-2-18 19:22
为了不让帖子沉得太快!!!为了人人知道这个~!! 我不是原创~!!但是我要把他发扬广大~!!!
作者:
bqtklouu
时间:
2016-2-18 19:22
我起来了 哈哈 刚才迷了会
欢迎光临 得知互动 (https://bbs.dezhifl.com/)
Powered by Discuz! X3.4