当前位置:首页从百度蜘蛛IP段爬行日志分析收录情况是否可信 举报文章

从百度蜘蛛IP段爬行日志分析收录情况是否可信

作者:admin    来源:用户投稿    时间:2015.6.10   

  笔者近日刚刚上线一个新站,于是开始关注一些有关SEO的信息,偶然间搜索到一篇文章,题为:“百度蜘蛛IP段详解”,内容为介绍通过分析网站日志中百度蜘蛛爬行的IP段来了解网站首页或内页的收录放出情况。看后,笔者便亲自试验了一下,发现可能并不可信。

  文中曾提到:“220.181.108.95这个是百度抓取首页的专用IP,如是220.181.108段的话,基本来说你的网站会天天隔夜快照,绝对错不了的,我保证。”

  那么笔者查询了下日志中,IP为220.181.108.95的蜘蛛爬行日志:“220.181.108.95 - - [31/Dec/2013:12:04:42 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"”,笔者的站地址为:一问网日志爬行时间为2013年12月31日中午12点,截止投稿前,首页快照还停留在几个月以前,并未如文章中所说隔夜快照。

  此时笔者便有了疑问,于是又找了一个文中作者曾经保证过的另外一个IP,文中原文为:“220.181.108.*段IP主要是抓取首页占80%,内页占30%,这此爬过的文章或首页,绝对24小时内放出来和隔夜快照的,这点我可以保证!”

  而笔者又查询了下日志中是否存在此IP,发现确实存在,而且还不少:

  220.181.108.116 - - [31/Dec/2013:03:17:17 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.112 - - [31/Dec/2013:07:56:58 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.108 - - [31/Dec/2013:08:55:43 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.80 - - [31/Dec/2013:09:57:11 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  由于内容过多,便不过多列举,像文中作者所保证的("220.181.108.*段IP主要是抓取首页占80%,内页占30%,这此爬过的文章或首页,绝对24小时内放出来和隔夜快照的"。)结果并未出现,一问网www.yiwen.cn,至今距离百度蜘蛛爬过已经过48小时,并未放出。

  由此可见,网上所流传的百度蜘蛛IP段详解可能并不可信。以上是笔者的一人之见,请大家多多批评指教,欢迎大家找我讨论,邮箱:z#yiwen.cn(请把#换成@)。

好文打赏,给Ta鼓励
扫一扫用手机阅读本文
Tags:百度  蜘蛛  爬行  日志  分析  收录  情况  是否  可信  
  • 相关搜索
图片推荐
    谈谈外链对SEO优化的作用

    谈谈外链对SEO优化的作用

    在2015年,百度依然牢牢占据了搜索引擎老大的位置,而针对百度进行的关键词优化也依然成为各大网站SEO、品牌优化布局的重中之重。而在众多提升权重的方法中,外链以稳定性备受站长们的青睐,特别是新闻外链的
    O!What追星神器:被妖魔化的“粉丝经济”

    O!What追星神器:被妖魔化的“粉丝经济”

    明星以及追星永远是一条不归路,吸引着众多的民众前去跃跃欲试,而且,在这条道路之上也催生了更多的经济,尤其是在互联网时代,越来越多的粉丝经济已经成为互联网电商发展的重要方式,而且,随着互联网科技的发展,
    云指建站:传统企业互联网+转型方案

    云指建站:传统企业互联网+转型方案

    从李总理的大力倡导,到互联网+行动计划的制定,都表明着未来经济离不开互联网+。国家在行动,行业在行动,现在已经不是要不要转型的问题,而是传统企业该如何转型。  当然,从构建平台、功能布局、活动策划到网
    生态农场创业项目如何向网络要顾客创市场

    生态农场创业项目如何向网络要顾客创市场

    笔者与朋友合伙创办的生态农场项目经过两年的培育,目前进入到了赢利阶段,而说到生态农场,可能有不少的朋友还没听说过,然而在许多地方它已经成为了最热门的致富项目和创业项目,它的特色与优势就在于面临目前食品
    揭秘GIF动图的吸金方法,营销推广新利器

    揭秘GIF动图的吸金方法,营销推广新利器

    今天,给大家揭秘gif动图的吸金方法,要知道它可是营销推广的新利器哦!  gif动图被我视为营销推广的新利器,引流的效果很好。  原来我讲过这张图片引流的案例。    这张图片的素材是来源于新闻视频,
你是怎么知道非凡网赚网的?
  •   
  • 联系QQ 邮箱:976382653@qq.com 微信:976382653
    在线留言
    发布软文
    广告自助购
    文章调用
    常见问题
    保存到桌面