如何捉住百度蜘蛛的腿

　　首先需要明确一点，只有被搜索引擎蜘蛛爬行和抓取的网页，才有展示和排名的机会。而搜索引擎不会抓取互联网上所有的网页，通常只会抓取它以为比较重要的页面，这个比率占整个互联网的40%左右，几率不到一半，也就是说在正常情况下，我们网站大部门内容是不会被蜘蛛爬行和抓取的。如何突破这个瓶颈，让我们网站的收录量达到80%以上，甚至100%呢?这就是体现SEOer价值的地方了。

　　能够实现这种效果的方法有良多种，而我把握了一种有效的方法，现在广州seo 就把这种方法免费传授给你，当你把握了这种方法之后，可以很轻松的增加你网站1倍以上的收录量，收录的增加是进步你网站 排名 和 流量 的行之有效的方法。

　　要达到上述效果，我们要对搜索引擎蜘蛛的工作原理有一个清楚明确的熟悉和了解。

　　蜘蛛是如何抓取网页的?

　　互联网由众多链接构成，蜘蛛就是顺着这些链接在爬行每一个页面、抓取页面信息。当某个页面不再有新链接的时候，它就返回，在这个过程当中，他不断的向服务器提供信息，站长在进行日志分析的时候，假如发现某一个页面被蜘蛛爬行并成功抓取数据，这个页面就很有可能被索引，所以进步网页的索引数据(收录量)对于一个网站的搜索引擎优化(SEO)长短常有利的。

　　然而蜘蛛为了进步其抓取效率，在抓取的过程一般会采用广度优先和深度优先策略。

　　广度优先是指蜘蛛从起始页面A(0层)开始，先抓到B 和 D (1层)，然后沿着1层爬到第2层抓到E、C、G，以此类推。如下图所示：

　　深度优先是指蜘蛛会从起始页开始，一个链接一个链接跟踪下去，处理完这条线路之后再转入下一个起始页，继承跟踪链接。如下图所示：

　　实在不论采用哪种策略，只要有足够是时间，理论上蜘蛛都能够爬完整个互联网，但实际情况下，蜘蛛却不会这样做，这主要受到抓取瓶颈、存储、下载和提供搜索结果的效率方面的影响，让蜘蛛只选择了抓取重要的页面，判定页面是否重要的主要依据是“链接深度”。 如下图所示：

　　假如A是起始页(0层)，BCD是第一层，EFG是第二层，H是第三层，假如蜘蛛的抓取深度设置为2，则H不会被索引到。 假如蜘蛛抓取深度设置为1，则 EFGH 全都不会被抓取，这也是为什么在设置网站结构的时候建议设置成扁平结构，如下图：

　　把握了蜘蛛爬行的原理之后，让我们来看一个简朴的SEO链轮模型。

　　在这个图中，假如站点1做为起始页(0层)，那么站点2 和 主站是第一层，站点3是第二层，假如搜素引擎设置的索引层数是2的话，站点4和站点5不会被索引到，但是站点2 也有被做为起始页的可能性，那么站点4就能被索引到，这无疑增加了站点4被索引到的几率，然而实际上每个站点都有被做为起始页的可能性，而且搜索引擎设置是索引层数也是远弘远于2的。那么这样一个小链轮模型就不会存在索引盲区，对主站的索引也就会更加充分。

　　我们再举一个例子，假如我有100个用于链轮的小站点，我分别用三种链轮模型对这100个站点进行规划，如下图所示：

　　规划方式一：这100个小站点通过单向链接组成一个大圈，每个小站点都链到主站

　　规划方式2：这100个小站点5个一组，分成20个组，且全部指向主站

　　规划方式三：在方式二的基础长进行变形

　　现在郑州网站推广就以上链轮模型进行分析，

　　模型一：长处是规划和操纵都非常简朴，缺点也很显著，因为站点过多导致链接深度非常大，很轻易造成索引盲区，不利于所有站点的收录。

　　模型二：通过分组，将一个大链轮拆分成20个小链轮，每个小链轮链接深度适中，只要有一个站点被索引到，就会让所处链轮组的站点被索引到，效果比较好。

　　模型三：在模型二的基础上，增加了各个小链轮之间的链接，一个链轮的收录也能促进另一个链轮的收录，效果优