当前位置:首页从百度蜘蛛IP段爬行日志分析收录情况是否可信 举报文章

从百度蜘蛛IP段爬行日志分析收录情况是否可信

作者:admin    来源:用户投稿    时间:2015.6.10   

  笔者近日刚刚上线一个新站,于是开始关注一些有关SEO的信息,偶然间搜索到一篇文章,题为:“百度蜘蛛IP段详解”,内容为介绍通过分析网站日志中百度蜘蛛爬行的IP段来了解网站首页或内页的收录放出情况。看后,笔者便亲自试验了一下,发现可能并不可信。

  文中曾提到:“220.181.108.95这个是百度抓取首页的专用IP,如是220.181.108段的话,基本来说你的网站会天天隔夜快照,绝对错不了的,我保证。”

  那么笔者查询了下日志中,IP为220.181.108.95的蜘蛛爬行日志:“220.181.108.95 - - [31/Dec/2013:12:04:42 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"”,笔者的站地址为:一问网日志爬行时间为2013年12月31日中午12点,截止投稿前,首页快照还停留在几个月以前,并未如文章中所说隔夜快照。

  此时笔者便有了疑问,于是又找了一个文中作者曾经保证过的另外一个IP,文中原文为:“220.181.108.*段IP主要是抓取首页占80%,内页占30%,这此爬过的文章或首页,绝对24小时内放出来和隔夜快照的,这点我可以保证!”

  而笔者又查询了下日志中是否存在此IP,发现确实存在,而且还不少:

  220.181.108.116 - - [31/Dec/2013:03:17:17 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.112 - - [31/Dec/2013:07:56:58 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.108 - - [31/Dec/2013:08:55:43 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  220.181.108.80 - - [31/Dec/2013:09:57:11 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" "-"

  由于内容过多,便不过多列举,像文中作者所保证的("220.181.108.*段IP主要是抓取首页占80%,内页占30%,这此爬过的文章或首页,绝对24小时内放出来和隔夜快照的"。)结果并未出现,一问网www.yiwen.cn,至今距离百度蜘蛛爬过已经过48小时,并未放出。

  由此可见,网上所流传的百度蜘蛛IP段详解可能并不可信。以上是笔者的一人之见,请大家多多批评指教,欢迎大家找我讨论,邮箱:z#yiwen.cn(请把#换成@)。

好文打赏,给Ta鼓励
扫一扫用手机阅读本文
Tags:百度  蜘蛛  爬行  日志  分析  收录  情况  是否  可信  
  • 相关搜索
图片推荐
    关键词如何分类?看完本文你会了解很多

    关键词如何分类?看完本文你会了解很多

    【导读】只有明确关键词的分类后,才可以根据网站的目的来筛选、布局和重点优化关键词。关键词的分类有很多种形式,每一种形式都可以指导网站SEO策略和方向的规划。不同网站所使用的关键词分类方式也会不同。在为
    如何打造一家有特色的微店?小编助你一臂之力

    如何打造一家有特色的微店?小编助你一臂之力

    当我们想要认识一个人时,首先会思考怎样让这个人记住自己、印象深刻,以此达到事半功倍的效果。就像两个人谈恋爱一样,追求从来不是最好的方式,关键在于吸引,在于你身上的特色和亮点。人如此,微店同样如此。让别
    轻社交重沟通 微信真心不是营销工具

    轻社交重沟通 微信真心不是营销工具

    微信真的需要群发吗?  前段时间钛媒体发了一个消息称微信要取消群发,震动了整个微信界,很多人以为微信要取消公众账号群发功能了,不少人都开始考虑该往那个平台转移了,但其实原文的标题是有一个问号的,只是后
    当病毒遇到情感:10个引爆全美的线上营销

    当病毒遇到情感:10个引爆全美的线上营销

    导语:让消费者通过社交媒体注意你的产品似乎变得越来越难。让公司的品牌从这些海量内容中脱颖而出完成病毒式传播不亚于天方夜谭。其实,引爆情感就是引爆病毒式传播。    如今,让消费者通过社交媒体注意你的产
    河北省信息安全研修班 创宇盾再受关注

    河北省信息安全研修班 创宇盾再受关注

    8月15日,河北省信息安全风险评估高级研修班在张家口举行,本次研修班由河北省信息安全测评中心主办,省工信厅网络信息安全处处长范卫国、省人社厅培训教育处处长董军虎等出席本次研修班并致辞。研修班由信息安全
    人人网陈一舟往事回顾

    人人网陈一舟往事回顾

    陈一舟把人人网卖给了他曾经收购过来的多牛传媒。这句话听起来有点绕,但也正好符合陈一舟闪躲腾挪的行事风格。2005 年,陈一舟的千橡集团收购刘韧的DoNews(多牛传媒前身); 2008 年之后,千橡从
    1号店之殇:创始人丧失控股权被迫去职

    1号店之殇:创始人丧失控股权被迫去职

    [摘要]编者按:随着创始人于刚的离去,1号店这个曾经靠沃尔玛大树而快速成长随后又掉队的电商又一次引起业界关注。换帅风波因何而起?1号店又将走向何处?腾讯科技推出系列文章为你还原和解读。  刘峻岭(左)
你是怎么知道非凡网赚网的?
  •   
  • 联系QQ 邮箱:976382653@qq.com 微信:976382653
    在线留言
    发布软文
    广告自助购
    文章调用
    常见问题
    保存到桌面