做了一段时间的seo人员应该知道，seo网站优化中需要吸引“蜘蛛”，这样才能建立索引，让大量用户搜索点击，从而提升排名，但是蜘蛛不是每个页面都能抓取，只抓取质量较高的页面，呢么一个网站如何让蜘蛛认为质量比较好呢？怎么才能更好的抓取所有页面呢?今天西风seo就为大家解析一下。

首先我们先了解一下搜索引擎工作的三个阶段：

(1)爬行和抓取:搜索引擎蜘蛛通过跟踪链接访问网页，获得页面HTML代码存入数据库。

(2)预处理:索引程序对抓取来的页面数据进行文字提取、中文分词、索引等处理，以备排名程序调用。

(3)排名:用户输入关键词后，排名程序调用索引库数据，计算相关性，然后按一定格式生成搜索结果页面。

爬行和抓取是搜索引擎工作的第一步，完成数据收集的任务。

何为“蜘蛛”

搜索引擎用来爬行和访问页面的程序被称为蜘蛛(spider)，也称为机器人(bot)。

搜索引擎蜘蛛访问网站页面时类似于普通用户使用的浏览器。蜘蛛程序发出页面访问请求后，服务器返回HTML代码，蜘蛛程序把收到的代码存入原始页面数据库。搜索引擎为了提高爬行和抓取速度，都使用多个蜘蛛并发分布爬行。

蜘蛛访问任何一个网站时，都会先访问网站根目录下的robots.txt文件。如果robots.txt文件禁止搜索引擎抓取某些文件或目录，蜘蛛将遵守协议，不抓取被禁止的网址。和浏览器一样，搜索引擎蜘蛛也有标明自己身份的代理名称，SEO站长可以在日志文件中看到搜索引擎的特定代理名称，从而辨识搜索引擎蜘蛛。

吸引蜘蛛

吸引蜘蛛的重要因素是网站和网页的质量高，当然老域名或者老的网站会被被认为权重比较高的，当然这样的网站会被抓去的页面比较多。

采用百度官方方法

在百度算法里，在用户搜索相同标题或关键词的时候，原创内容会优先展示。因此提高文章的原创度，自然是最好的，但是往往我们服务客户的网站专业性质很强，而我们的知识面有限，也只能通过伪原创实现，但是提升伪原创的质量也是可取的。

页面更新频率

蜘蛛喜欢更新频率较高的网站，蜘蛛每次爬行后都会存储页面，第二次爬行发现与第一次爬行完全一样说明为更新，如果你的更新频率降低了，时间长了，蜘蛛也会变懒惰。如果你能每天固定点的更新就更好了，通过日志分析你会发现蜘蛛这个点会来很多次。当然，如果你不知道蜘蛛什么时候来抓取，担心自己的更新没有效果，建议可以通过日志分析来获取蜘蛛的爬行规律，这样更便于蜘蛛抓取收录页面。经常更新，蜘蛛也就是会频繁抓取，如果页面出现新链接，也自然会被蜘蛛更快的跟踪，进行抓去，所以在原创的同时也要注意更新频率。

友链与外链择优而用

很多SEO优化人员都觉得做优化就是做外链，所以不管站内，一味的追求站外。这种大量发外链的做法在最开始确实起到了一定的效果，但是随着算法的改变，如今已经没有效果。当然1，外链对于网站排名和收录都是有好处的，适当的增加外链对网站有好处。不过，做SEO不是发外链那么简单，有本事的SEO优化人员，即使不发外链也同样能拥有好的排名，这也是为什么有的网站优化人员觉得外链没用的原因所在。想要让蜘蛛知道你的网站链接，就要去蜘蛛经常爬行的一些地方放网站的链接，比如百度就有一个专门的网站链接提交平台，将网站链接提交上去，有助于蜘蛛抓取从而收录。也可以在贴吧等地发链接，至于能否留住就看个人本事。至于友链，是外链的一种，但是实际效果却比外链更高，因为友链往往都是一些等级差不多的相关链接，带来的权重和好处更多。友链的作用，每个SEO都知道，它对于网站的排名有一定的帮助，同时又是引导蜘蛛在网站之间来回爬行的一种方式，对于网站的排名和收录都是非常有利。所以我们要经常和一些更新比较频繁的网站交换链接。

url的访问深度

页面深度并非越深越好，一方面，深度越深，用户越不容易搜索点击，另一方面，蜘蛛抓取也不易，更不用说收录，所以通常情况下，大家会将页面深度控制在二三级目录，多了的没有。当然，也有一些深度比较大的网站收录不错，这样的往往都是行业网或者是门户网，个人企业站能做到的极少。

链接位置问题

与首页点距离越近的，也就容易被抓取，页面权重越高，因为一般网站最高的是首页，大部分链接都是指向首页的，蜘蛛访问最频繁，所以距离首页较近的，抓取的几率较高。

站内页面之间链接

不论是文章之间还是栏目和网站首页之间，全部要有一个或者几个链接的路径互通，这个路径是蜘蛛在网站上面爬行的一种链接，同时也可以让用户点击的链接，对于网站的收录，排名和权重的提高都是比较不错的。

总结：一般吸引蜘蛛的方方法大体就这么多，重点是原创，很多seo人员通过采集的网站经过搜索引擎“去重”之后收录的页面很少，所以我们看到很多网站发了1000+左右的文章但是收录的很少，原因也就在于此了，另外就是“老域名”“资格老的域名”对于吸引蜘蛛也是至关重要的，这样方法得到很多好的seo快速排名案例。