seo搜索引擎优化 中山(不要低估了搜索引擎蜘蛛爬虫对google收录算法的简单解读)

　　seo搜索引擎优化 中山(不要低估了搜索引擎蜘蛛爬虫对google收录算法的简单解读)

　　seo搜索引擎优化中山团队工作群号：192742559不要低估了搜索引擎蜘蛛爬虫对google收录算法的简单解读搜索引擎蜘蛛爬虫的爬行机制

　　一、搜索引擎的爬虫爬行机制搜索引擎的爬虫爬行机制，主要有七个指标。

　　分别是：

　　1）爬行的粒度和速度。例如，日爬行记录、url爬行路径、爬行深度、浏览频率、浏览速度。一般说来，日爬行记录越小，表明其算法更准确，路径更精确，应该更放心的使用google，因为其爬行的粒度和速度可能会更高，只是google服务器够大，应该不会出现精度的问题。

　　2）爬行的方向。例如，某词，在同类中的搜索算法，可能是对搜索记录路径分析，还是更重视关键词和网站设置和内容结构，例如，battribute方式，应该会更清楚哪些的爬行方向，更容易分析对哪个网站提交的权重更有帮助。

　　3）最大频率。最大频率的更新频率，不是非要有目的性，例如某行业排名第一的网站，如果排名稳定，由于榜单有效，其下的网站排名也应该是第一位的，而排名第一的网站，其他网站排名也是不断增加的，这也是最大频率，例如,2012-12-21更新，新增关键词241444条。

　　4）变体检索算法。例如，在google中，一些小网站会变体检索权重来提高其他网站排名。

　　5）爬行的数量。爬行的数量，一般大于10以上，爬行的数量与网站、关键词和网站内容相关。

　　6）爬行速度。这个不用多说了吧。

　　7）爬行正常结果的有效率。如果爬行的结果，没有收录的结果中，比例大，则是有效率的，爬行量小的结果，没有收录的情况下，比例大，也是有效率的。有很多人不了解爬虫爬行的算法，为了排名而爬行，不去想着去合理有效的提高排名，例如某些点击率有高有低，导致搜索结果的评分不好，这种情况下，爬行起到的作用并不大。

　　二、爬虫爬行的机制，工作流程。例如，爬行15条记录和爬行15次，谁的爬行效率更高，谁爬行的更便宜，哪个更节省人力和时间，爬行收货多少金额（例如按照1012来算），爬行的精确度，搜索引擎蜘蛛爬行的网站有多少个，

　　三、爬虫爬行机制的7个指标里面，对于第2点更加重要，工作机制的更新速度，决定了爬行速度，又和页面浏览量（包括以前出现的页面被删除的情况），爬行频率，爬行粒度有关，页面浏览量越少的，爬行的速度越快。

　　四、爬虫爬行的流程解析搜索引擎爬虫爬行的第二步，算法的更新是由爬虫进行，第一个automapping的选择，这个关键字后，实际浏览器能够得到哪些url，就会记录多少个搜索结果页面，爬行的数量，