鸿 网 互 联 www.68idc.cn

当前位置 : 主页 > seo > >

根据Baiduspider ua(User Agent)识别百度蜘蛛

来源:互联网 作者:佚名 时间:2017-10-15 19:27
早前的时候,有问过我说百度蜘蛛是不是有专门的pc蜘蛛和移动蜘蛛,其实(事实上)Baiduspider(百度蜘蛛)并不存在PC和移动蜘蛛之分,目前统一都是Baiduspider/2.0。区分移动端抓和pc抓取或者访问的方法就是看ua。 下面是 鸿网互联 根据Baiduspider ua(User Agen

早前的时候,有问过我说百度蜘蛛是不是有专门的pc蜘蛛和移动蜘蛛,其实(事实上)Baiduspider(百度蜘蛛)并不存在PC和移动蜘蛛之分,目前统一都是Baiduspider/2.0。区分移动端抓和pc抓取或者访问的方法就是看ua。

ua

下面是鸿网互联根据Baiduspider ua(User Agent)识别百度蜘蛛相关资料:

Baiduspider(百度蜘蛛)ua介绍:

1、PC ua:Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

2、移动 ua:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

识别Baiduspider(百度蜘蛛)ua的小技巧:

既然我们知道百度蜘蛛都是Baiduspider/2.0,那我们在做网站访客日志分析的时候,就可以通过这一关键词来分析是不是百度蜘蛛的访问了。如果是想要区分pc和移动抓取或者访问的话

1. 在日志的ua数据中包含关键词“Android”或者“Mobile”,并且带有“Baiduspider/2.0”,则是百度蜘蛛移动访问或者抓取;

2. 反之,在日志的ua数据中仅有关键词“Baiduspider/2.0”,没有“Android”或者“Mobile”,则判断为百度pc蜘蛛访问或者抓取。

虽然我们正确的识别了Baiduspider ua,但是并不代表者这就是真正的百度蜘蛛的访问或抓取。

上一篇:近来对百度算法调整的几点看法
下一篇:没有了
网友评论
<