您好,欢迎来到分类目录网!本站提供网站免费收录和快审收录
广告联系QQ:158925126当前位置:分类目录网 » 站长资讯 » SEO优化 » 文章详细 订阅RssFeed

SEOER必须关注百度蜘蛛抓取体验

来源:本站原创 浏览:32次 时间:2018-05-16

  百度蜘蛛抓取体验,听上去是一个新名词,其实它和用户体验一样,很早就出现在SEO行业里面了。百度蜘蛛抓取体验,可能是潜伏在资深SEOER脑海里的一个词。


       什么是百度蜘蛛抓取体验呢?良好的代码结构,良好的URL结构。相信很多站长都有采集经验,很多CMS都带有采集功能。


       百度蜘蛛抓取体验和你写采集规则是一样的,一个网站有良好的代码结构,良好的URL结构,你可以轻易写出采集规则,顺利完成这个网站内容采集工作。


       URL,一个网站的URL如果很复杂,经过几次302或301跳转后才能到达目的页面。这样的URL,如果你要用CMS写采集规则,是不是增加了采集规则的难度。有些URL甚至通过JS跳转,才能到达内容页面,这些URL链接,请问该如何写采集规则。


       代码结构,一个网站的列表页面和内容页面,代码非常复杂。有可能是word编辑的内容,直接复制到网站后台编辑器,直接发布。一个列表页面,可能是JS,iframe嵌入页面,这样的代码结构,该如何写采集规则?你可能就直接放弃采集这个网站。百度蜘蛛也一样,可能计划来1万次抓取的,由于分析效率太低,它可能只能来3000次。


       如果SEOER有编程经验,通过对代码复杂的分析,针对网站写出采集规则是没问题的。那么,百度蜘蛛呢?百度蜘蛛该如何来抓取这些内容,百度蜘蛛可不会针对某个网站写采集规则。



       前几天Loghao一个蜘蛛分析案例,他网站的百度蜘蛛状态码40%都是302?笔者仔细看了他网站的链接结构,都是/xxxx结尾的,访问后链接后面自动加了/,变为/xxxx/。百度蜘蛛访问/xxxx后通过302跳转,到了/xxxx/。请问,这样的跳转访问,百度蜘蛛抓取体验是怎么样的?答案很明确,造成了蜘蛛多访问一次,如果这个网站有100万页面,蜘蛛就会多访问100万次,才能抓取到目标内容。



       所以,一个良好的URL规则,和代码规则,可以很大程度提高百度抓取体验,提高收录几率。



推荐站点

  • 白城网之窗白城网之窗

    白城网之窗,瀚海明珠吉林白城市综合信息门户。提供白城概况、地图、旅游、特产信息,白城购物信息、企业黄页大全,白城房屋出租出售、二手交易、招聘求职信息、问事、法律在线服务、美食查询,社区论坛交友!白城结婚

    www.bcdv.com.cn
  • 站酷 (ZCOOL)站酷 (ZCOOL)

    站酷 (ZCOOL),中国人气设计师互动平台。深耕设计领域十年,站酷聚集了470万优秀设计师、摄影师、插画师、艺术家、创意人,设计创意群体中具有较高的影响力与号召力。

    www.zcool.com.cn
  • 重庆租帐篷重庆租帐篷

    重庆原始人户外提供:重庆租露营帐篷的地方,重庆户外露营帐篷出租,重庆帐篷租赁,重庆哪里可以租帐篷,重庆大学城租露营帐篷,租登山包,租睡袋,更多请联系:18428354726

    www.g88a.com
  • 菜鸟教程菜鸟教程

    菜鸟教程(www.runoob.com)提供了最全的编程技术基础教程, 介绍了HTML、CSS、Javascript、Python,Java,Ruby,C,PHP , MySQL等各种编程语言的基础知识。 同时本站中也提供了大量的在线实例,通过实例,您可以更好的学习编程。..

    www.runoob.com
  • 每日财经网每日财经网

    每日财经网是中国财经综合网站,包括最新经济行情、最全基金投资理财产品、今天股市行情、财经郎眼、产业经济商业模式。(每日财经网www.mrcjcn.com)

    www.mrcjcn.com