实战剖析:学会辨仔细假baidu蜘蛛?

来源:网络 日期:2015-05-09 11:16:03

  许多刚入行的SEO兄弟,网站日志剖析都不生疏,但关于真假baidu蜘蛛仍是无法区分,摸不着脑筋。站长在剖析网站日志会看到baidu蜘蛛来匍匐咱们的页面,跟着技能越来越兴旺,许多的收集程序也会假充baidu蜘蛛来匍匐咱们的网站,致使咱们无法辨出哪个才是真的baidu蜘蛛,笔者依据自个操作阅历,给咱们同享怎样辨出真假baidu蜘蛛?

  

  关于Apache效劳器,运用光年日志剖析东西作用可以看到,当天蜘蛛抓取网站的ip排行状况,咱们关于这三个ip来验证真假baidu蜘蛛,有两种验证办法:

  1、点击开端,查找中输入“cmd”指令符,接着输入“nslookup+ip”呈现的作用如下,可以看到作用闪现称谓“baiduspider-123-125-71-97.crawl.baidu.com”,阐明这个是真的baidu蜘蛛。

  

  2、点击开端,查找中输入“cmd”指令符,接着输入“tracert+ip”呈现的作用如下,可以看到作用闪现称谓“baiduspider-123-125-71-97.crawl.baidu.com [123.125.71.97]”,这个也是真的baidu蜘蛛。

  

  接下来咱们来看看假baidu蜘蛛的比方:

  这是兄弟担任的一家电商网站,我看了下该网站的日志,截图如下:

  

  对以上3个ip用指令符“nslookup+ip”查询的作用如下:

  

  

  

  假蜘蛛的损害:1、占用网络带宽,无效流量上涨。2、在有限的带宽状况下,影响正常蜘蛛抓取页面。3、对咱们SEO作业发作搅扰。

  期望经过这篇文章,SEO菜鸟能精确区分真假baidu蜘蛛,可以防止网站不必要的丢掉,让SEO作业正常进行。

----本文章搜集于网络且经过处理,仅学习测试使用,有疑问请联系站长----