当前位置:首页如何打造适合百度抓取的网站 举报文章

如何打造适合百度抓取的网站

作者:admin    来源:用户投稿    时间:2016.7.29   

  拥有良好的网站收录是SEO的基础工作,只有网站的内容进入了百度的索引库才有机会在关键词搜索的时候出现在搜索的结果中。下面老郭观察从三个维度给大家分享一下如何打造适合百度抓取的网站。

  一、站点结构

  1、逻辑清晰的链接层次结构

  比较好的站点结构还是树状结构,以首页为节点的树状连通,可以通过首页的链接访问到网站的任意页面。在建立站点树状结构的时候要注意避免过于扁平化的结构,所有的内容页面全部放在根目录也不利于网站的目录权重传递。在建站的时候还需要注意的是要避免孤岛链接,所谓孤岛链接就是一个页面通过站内的正常访问是不能找到页面的,只有通过直接入网址或地图提交才能找到的页面。这样的页面搜索引擎不容易抓取也不利于用户对内容的浏览和访问影响用户体验。

  2、PC/移动适配

  现在移动搜索的流量越来越大,通过建立适配,使PC端URL和移动端URL,有规则级的对应关系,且相互关联。这样在移动搜索的时候网站才有机会进入移动索引库中。对于网站在建立适配的时候推荐建立规则级对应关系,符合一定的正则表达式映射规则。目前百度推荐的视频方式有:跳转适配、代码适配、自适应。例如:

  www.domain.com/124.html → m.domain.com/123.html

  www.domain.com/456.html → m.domain.com/456.html

  在建立页面适配的时候不建议的做法:

  单一域名下采用多种是配方式;

  把移动站作为PC站下的一个目录:www.domain.com/wap/*

  如果使用跳转适配的方式,请不要使用JS对ua进行适配跳转

  建立完成:主动、同事通过链接提交工具提交PC端URL和移动端URL

  建立完成:尽量通过链接提交工具提交对应规则

  3、站带你主动提交

  目前百度在站长工具中有主动推送、自动推送、sitemap三种方式供站长对新产出资源,更新资源及时提交,在对内容提交的时候站长要注意避免死链和低质内容被搜索引擎抓取。在出现死链接的时候可以通过死链接提交工具进行死链和失效资源及时提交。

  对于移动站也需要通过提交工具对移动链接对适配后的链接进行提交,方便搜索引擎对移动页面的充分及时抓取。

  4、避免目录被黑/出售

  百度蜘蛛的站点评级会综合网页、目录等多个维度考虑。一旦发现被黑或垃圾内容会是百度指数对整个站点的质量存疑,进而影响整个站带你的收录效果,进而影响到排名。

  通常购买网站目录的人都是利用站点已有的权威和搜索引擎评级做灰色产品的页面排名,很容易伤害到网站的用户体验,百度对伤害到用户体验的行为是零容忍的。

  二、页面结构

  1、不建议使用JS加载页面内容

  百度蜘蛛对网站抓取的时候包含在JS中的内容是不能抓取的,所以站长希望用户见到的内容不要放在JS中加载,会影响网页的正常索引,对希望百度抓取的链接也不要放在JS中加载,会影响会影响链接发现。

  2、布局符合移动有好标准

  移动设备有其特殊性,在对移动页面设计的时候,有区分于PC端的特殊要求。例如:移动设备通常使用的是3G,4G的网络信号,加载速度远不如电脑网线的速度快,页面的加载速度超过3秒的页面就不会出现在移动搜索的结果中。具体的移动友好标准可以参考百度官方的《移动站点对百度友好全解》。

  3、索引页&索引页翻页友好型

  在做PC端的索引页和翻页的时候如果可能尽量列举全部翻页,至少要包含最近一段时间的所有内容。在翻页的时候只使用“上一页”“下一页”是不利于搜索引擎对页面的充分抓取的。另外对移动端也有特殊性,在使用下拉触发加载的时候建议下拉加载次数上限为3次,一定要避免无线下拉加载的设计。

  三、抓取限制

  1、避免预期以外的封禁

  常见的预期意外的封禁有:建站模板中的封禁信息,服务器自动封禁策略,网站所在空间服务商封禁IP导致,在网站内容抓取异常时候可以考虑以上因素进行逐一排查。

  还有最常见的屏蔽百度蜘蛛抓取的是robots屏蔽,这种情况多是站长失误导致希望抓取的目录被屏蔽了抓取。

  2、使用标准重定向

  在对网站改版的时候经常会出现页面的重定向跳转,在使用重定向的时候建议使用301跳转,不建议使用JS冲定性。

  3、死链反馈

  对于网站中出现死链接的时候,要设置百度蜘蛛抓取返回404的状态码以便百度蜘蛛能得到正确的反馈。如果出现的死链接较多的时候可以参考上文中的死链接提交工具。

  以上是搭建符合百度蜘蛛抓取站点的三个解读,希望对大家有帮助。

  “搞笑视频高清”入驻搜狐公众平台原创稿件,特此声明!

好文打赏,给Ta鼓励
扫一扫用手机阅读本文
Tags:如何  打造  适合  百度  抓取  网站  
  • 相关搜索
图片推荐
    谈谈企业如何做好邮箱推广 充分利用好大数据

    谈谈企业如何做好邮箱推广 充分利用好大数据

    在互联网时代,如何利用好大数据,是企业网络营销最重要的法宝,可以说,数据就是用户,用户给企业带来利润,在众多的推广方式中,移动端的微信公众号似乎成了炙手可热的热门推广,而传统的一些互联网推广方式,好像
    细数企业微信营销中存在的问题

    细数企业微信营销中存在的问题

    微信是日常交流和沟通的必要介质,同时是移动终端最具代表性的点对点式营销平台,给更多的个人和企业带来了新的市场机遇和发展前景,但诸多优点的背后也会存在诸多问题,再好的产品运营不好只会不断造就问题,这对于
    芒果TV的市场化桎梏:难摆脱对湖南台依赖?

    芒果TV的市场化桎梏:难摆脱对湖南台依赖?

    在高度市场化竞争的网络视频行业,从传统电视台走出的芒果TV无疑是一个陌生的闯入者,在以70亿元估值完成A轮5亿融资后,外界关心的是,芒果TV未来能否威胁现有视频行业市场格局?先看一下芒果TV的发展现状
    探讨百度微博搜索排序影响因素

    探讨百度微博搜索排序影响因素

    如今微博越来越流行,已经成为年轻网民的最爱,由此引来了微博营销,现在微博最大的竞争对手是微信,百度也推出了微博搜索。也就是可以直接搜索到微博信息,数据来源主要是:新浪微博、腾讯微博、网易微博、搜狐微博
    怒抢荣耀7风头 小米Note全网通版本6月29日发布!

    怒抢荣耀7风头 小米Note全网通版本6月29日发布!

    月16日消息,自从小米Note推出一来,有一点一直让不少用户不满,那就是缺少电信版,当初小米Note顶配版发布的时候,雷军介绍手机信息的微博被没有电信版等类似的字眼刷屏了。经过一段时间的等待,小米No
    内页收录停滞不前 你是否考虑过以下致命原因

    内页收录停滞不前 你是否考虑过以下致命原因

    网站的收录情况一直是站长们所关注的一项关键指标数据,很大程度上,收录情况影响到站点的排名流量情况。在随着百度推出的绿萝和石榴算法之后我们可以发现百度蜘蛛对于内页的爬行要求越来越高了,假如我们的内页在一
    阿里京东互进对方后院:两大电商的自由与尴尬

    阿里京东互进对方后院:两大电商的自由与尴尬

    面对这样一幕,京东创始人刘强东的心理也许很复杂吧:昨日,淘宝跑到江苏沐阳,牵手与当地政府,将帮助化解当地优势花木产业电商化进程中的诚信问题。双方为此专门成立一个1000万元的诚信保障基金,主要解决当地
你是怎么知道非凡网赚网的?
  •   
  • 联系QQ 邮箱:976382653@qq.com 微信:976382653
    在线留言
    发布软文
    广告自助购
    文章调用
    常见问题
    保存到桌面