用户名: 密 码:
您现在的位置:首页 >> SEO开发技巧 >> 内容

搜索引擎蜘蛛爬行原理

时间:2012/9/15 23:39:34 点击:6269

  核心提示:搜索引擎蜘蛛,以下简称为蜘蛛;蜘蛛是如何爬行网站的;又是如何收录的;爬行的顺序以及规律是什么?蜘蛛牌型规律与网站收录及排名有关系吗?搜索引擎蜘蛛爬行入口一切网站及互联网内容,都是通过“链接”来给蜘蛛提供抓取“入口”的;无论是外链还是內链,可以这么说没有超链接的世界,就没有互联网。蜘蛛爬行类型纵向抓取...
搜索引擎蜘蛛,以下简称为蜘蛛;蜘蛛是如何爬行网站的;又是如何收录的;爬行的顺序以及规律是什么?蜘蛛牌型规律与网站收录及排名有关系吗?
搜索引擎蜘蛛爬行入口
一切网站及互联网内容,都是通过“链接”来给蜘蛛提供抓取“入口”的;无论是外链还是內链,可以这么说没有超链接的世界,就没有互联网。
蜘蛛爬行类型
纵向抓取:也叫“以深度抓取”,蜘蛛沿着一个链接逐步深入,逐层抓取,直至底层,然后再返回爬行另外一个链接。
横向抓取:也叫“广度抓取”,不是顺着链接来进行,而是以单个界面内的所有链接为抓取目标。把第一层的链接全部抓取完成,再沿第二层链接进行抓取。
抓取需要时间
网站友好度对于收录速度和抓取频率是有影响的;这是因为搜索引擎蜘蛛每次爬行的时间是有限的,搜索引擎要照顾所有要爬行的网站,所以,结构不好的网站,会影响蜘蛛来访频率及收录量。
如果时间足够,蜘蛛足以把网站的所有内容抓取一遍;一般来说,大型门户站,蜘蛛用3个月时间可完全更新一遍内容;而小网站,组要1个月左右的时间。
蜘蛛来访频率,体现了搜索引擎对网站的信任度。这也就是为什么有些网站内容不够好,结构不理想而影响了蜘蛛的来访频率,导致快照减慢,收录减少,甚至删除掉收录。
如何提升蜘蛛来访频率
首先要保证你网站的结构没有问题,重要内容,避免js、flash等蜘蛛不喜欢的东西来展示(因为无法、或者不容易去抓取其中的内容)。
其次要有内容:更新频率,及内容治疗都很重要。对于新站来说3个月的时间才能获得稳定的快照和收录速度,而每天足够量的高质量内容更新,是可以提升快照提升速度的,1个月的时间,就可以获得足够的搜索引擎信任度。
第三,良好的內链:包括:面包屑路径、导航、内容页中的锚文本,以及相关性链接锚文本,提升用户粘性,用户体验;这都可以提升文章,栏目的“热度”从而提升收录速度,和权重。
四、稳定发展的外链:发布外链一定要稳定,而不要有风险的外链。生存期要够,而且要持续稳定的发展,而不是忽高忽低;忽上忽下;一定要杜绝垃圾外链,尤其是新网站。

文章来源:http://www.xinxilong.com

作者:佚名 来源:不详
相关评论
发表我的评论
  • 大名:
  • 内容:
  • 论坛群发大师(www.xinxilong.com) © 2008 版权所有 All Rights Resverved.
  • Email:4984672[at]qq.com 沪ICP备12025887号-1
  • Powered by 论坛群发大师