seo优化搜索引擎工作原理(几个常见的搜索引擎蜘蛛分类：1.1(百度蜘蛛))

　　seo优化搜索引擎工作原理(几个常见的搜索引擎蜘蛛分类：1.1(百度蜘蛛))

　　在互联网信息爆炸式增长的时代，要想做好SEO，需要简单了解搜索引擎的基本工作原理和自然排名机制。

　　搜索引擎的工作过程非常复杂。本章介绍的内容与真正的搜索引擎技术相比只是一个小插曲，但对于新手 SEO 来说已经足够了。东靖试图用通俗易懂的方式来解释它。

　　, 搜索引擎蜘蛛

　　搜索引擎蜘蛛也称为网络爬虫。目的：抓取高质量的网页内容。以下是一些常见的搜索引擎蜘蛛类别：

　　1.1 百度蜘蛛

　　百度还有其他几个蜘蛛：Baiduspider-news（新闻）、Baiduspider-mobile（wap）、Baiduspider-image（图片）、Baiduspider-video（视频）。站长们经常看到Baiduspider和Baiduspider-image。

　　1.2 Googlebot（谷歌蜘蛛）

　　还发现了一个Googlebot-Mobile，名字应该是爬取wap内容。

　　1.3 360蜘蛛（360蜘蛛）

　　它是一种非常“勤奋”的蜘蛛。

　　1.4 搜狗新闻蜘蛛

　　还包括：搜狗网络蜘蛛，搜狗inst蜘蛛，搜狗蜘蛛2、搜狗博客，搜狗新闻蜘蛛，搜狗猎户蜘蛛，看权威的百度robots.txt，搜狗搜狗蜘蛛消耗了很多字节，占据很大的面积。

　　其他的蜘蛛还有很多，我就不过多介绍了。SEO优化主要针对这四个。有兴趣的可以看一下搜索引擎蜘蛛的这篇文章文章。

　　二、搜索引擎的工作原理

　　搜索引擎如何工作

　　小编认为，一个搜索引擎的工作原理大致可以分为三个阶段：1.爬取爬取；2.预处理（索引）；3.输出结果。

　　2.1 爬行和爬行

　　搜索引擎蜘蛛通过链接查找链接访问网页，从而获取页面HTML代码并存入数据库。

　　那么搜索引擎蜘蛛是如何抓取网页的呢？

　　A：找到链接→下载本网页→添加到临时库→提取网页中的链接→下载网页→循环。

　　搜索引擎蜘蛛爬行*敏*感*词*

　　2.2 预处理（索引）

　　蜘蛛（专业术语：索引程序）需要对爬取的网页内容进行关键词提取，生成倒排索引，计算页面的PageRank值和TrustRank值，处理页面关键词相关性等准备调用排名程序，这也是搜索引擎在很短的时间内返回搜索结果的关键，其中我们关心的是PR值和相关性。

　　2.3 输出结果

　　用户输入关键词后，排名程序调用索引数据库数据，程序自动匹配关键词，然后按照一定的规则生成搜索结果展示页面。这是因为之前的预处理，搜索引擎可以在时限内返回输出结果。这里需要提醒一下，自然搜索排名和竞价推广排名是有区别的。