完整内容请戳如何让搜索引擎爱上我们的网站结构足够合理

　　完整内容请戳如何让搜索引擎爱上我们的网站结构足够合理

　　上一章我们讲了如何优化我们的网站结构，包括TDK如何运作，不要滥用H1标签，如何挖掘关键词，以及如何使用工具帮助我们优化网站和轻松导航。技巧和内容应该怎么写更符合蜘蛛的胃口。完整内容请戳如何让搜索引擎爱上我们的网站

　　SEO 工作在网站中非常重要。只有网站做得好，关键词合理分配，结构足够合理，才能让搜索引擎尽可能多的抓取我们的内容； 收录的页面越多，用户越多，找到我们的机会就越大。

　　如何让我们的网站结构足够合理？除了上一篇提到的几点，还有以下几个方面。接下来，我会按照我们的顺序，从网站建设到运营，一一开始。

　　▌机器人

　　这是网站和搜索引擎之间的协议。机器人会直接告诉搜索引擎我是否欢迎你，这也是搜索引擎的关键。

　　机器人必须先放在网站root 目录下。当爬虫进入我们的网站时，它首先要寻找的就是这个文件。当这个文件存在时，它会按照这个文件中指定的范围进行爬取。如果禁止所有蜘蛛爬行行为，则直接走，不爬行。 .

　　所以我们使用这个robots功能来隐藏我们不想发布的目录结构，比如后台管理等敏感目录。当然，你也可以利用这个功能进行导流，这样搜索引擎就不用在无用的目录或页面上浪费精力，只爬我们想让它爬的页面。

　　▌面包屑导航设计，小功能大效果

　　这是一种很容易被忽视的技术，尤其是对于新手网站管理员。我们一般认为导航上有主页或标志。为什么多出一行文字？面包屑导航具有以下功能：

　　1、 标识位置，方便访问

　　除了面包屑，它还可以告诉我们用户当前所在的位置。它还可以让用户返回上一级目录。同时，蜘蛛喜欢面包屑导航，因为当蜘蛛爬取文章时，很容易回到上级目录，进入父目录继续爬取。

　　2、增加内部链关键词

　　我们也可以用这个函数为我们的父目录指定关键词，我们的目录关键词通常有2-3个，网站navigation只能给这个目录一个关键词点，我们在做第二个的时候关键词通过不同的子页面指向父目录，相当于增加了内链。

　　3、王牌辅助，无敌。

　　面包屑导航是一个辅助功能，可以告诉用户当前所在的位置，但不能完全替代主导航。

　　4、level 关系而不是浏览历史

　　面包屑导航应该表达层次关系，而不是浏览历史。我看到很多网站使用动态生成的面包屑，主要是记录用户的浏览历史。这是一种错误的做法，用户浏览量很大。现在，它会很复杂，逻辑也不清楚。

　　面包屑可以告诉用户他们目前处于哪个级别以及他们的父母是谁，让用户有一个清晰的想法。如果他们对当前列的其他内容感兴趣，可以轻松进入其他页面。

　　Breadcrumbs 不要在导航的最后一级放链接地址，因为当前页面本来就是这个地址，放链接没有意义。

　　5、分隔符清晰

　　分隔符清晰，逻辑看起来很清晰。比较常用的方法是直角括号，比如上面苹果官网的设计，斜线“/”或者空格的使用。这可以清楚地表达递减关系。

　　6、最后一层可以作为标题存在

　　比如在方舟博客中，当你切换栏目时，标题中的文字保持不变，但栏目地址发生了变化。我们将最后一层改为H1标签，告诉搜索引擎这个页面的标题是this。

　　▌图片应用让不可能成为可能

　　搜索引擎无法解析图片的编码，因此搜索引擎将图片视为空白。他们不知道图片中有什么内容。现在图片的识别技术在进步，相信有朝一日会实现图片内容的识别。

　　有鉴于此，我们在做网站开发时需要注意以下几点：

　　网站避免*敏*感*词*的图片应用；

　　图片多，尺寸大，影响页面加载速度，所以上传前要对图片进行无损压缩，保证图片的清晰度，尽量小。推荐一个小工具：/;

　　给图片添加一个alt标签。 alt 标签可以被搜索引擎读取。把图片的主题放在这里，让搜索引擎了解图片的作用。

　　▌sitemap，给蜘蛛一个地图

　　蜘蛛根据链接地址抓取页面，但每个网站的权重不同。蜘蛛在这个网站抓取页面上的深度和停留时间不同，这会导致一些页面更有层次感。深，不被蜘蛛抓住。我们需要一种方法来直接告诉蜘蛛我的页面在哪里，地址是什么？

　　这是站点地图。我们将网页地址放在此文件中，以便搜索引擎蜘蛛更好地抓取我们的网页。

　　这个文件可以告诉搜索引擎哪些页面重要，哪些是次要的，哪些应该关注，哪些更新频率高等等。目前sitemap格式有txt格式、XML格式和sitemap索引格式三种。

　　txt格式适合small网站，链接不多，可以一一放链接地址。

　　XML 格式适用于中小型网站，主要收录标题和链接地址。它也是最常用的格式。但是由于文件大小限制，又考虑到蜘蛛爬行的流畅性，文章太多的话，文件会过大。

　　这里需要使用sitemap index的形式进行文件分割，将一个大的sitemap分割成多个小的sitemap，然后将子sitemap文件的地址放在主sitemap中。

　　如何正确使用sitemap网站map？

　　文件中的 URL 数量不应超过 50,000，文件大小不应超过 10M。这样可以保证我们的文件被爬虫更好的抓取，不会造成抓取压力；

　　保持更新频率。爬虫在抓取sitemap的时候是断断续续的，那我们要确保我们的sitemap下次来之前有我们的新内容；

　　动态更新站点地图，开发功能实现每当文章更新时，同时在站点地图中添加一条URL记录，保证站点地图中的数据是最新的。

　　▌链内，尽量让蜘蛛爬行

　　除了关键词排名的好内容，还有链接指向。

　　比如我们知道长沙有臭豆腐，做这种臭豆腐的公司很多。说到臭豆腐，怎么能想到一个品牌呢？当大家都说臭豆腐好吃的时候，久而久之就会想到臭豆腐；链接也是如此。当有很多词指向你时，你可以排名更高。

　　链接指向网站内部的链接，我们称之为内部链接，外部链接是外部链接。

　　内部链接是我们网站的关键词点。例如，在易观官网，我们将所有用户行为都指向了产品介绍中的用户行为分析页面。当爬虫来找我们网站的时候，看到这么多链接指向一个页面，那么这个词就是这个页面关键词的目标。当用户在搜索引擎上搜索这个词时，会先显示这个页面。

　　内链是我们做SEO时比较重要的方向，因为外链资源不确定性多，质量也参差不齐，内链完全由我们自己主导。

　　每个页面都有一个目标关键词。当页面B的目标关键词出现在页面A时，这个词应该被定向到页面B。一个页面最多可以有5个内部链接，因为我们要考虑用户体验。一个页面上的所有链接都会让访问者认为这是一个广告网站，因为我们会加粗或改变颜色以突出这个关键词，像这样关键词太多，让人很反感，所以要注意到内部链接词的密度。经实测，5%为推荐的内链密度。

　　如何采集内部链接关键词？我们使用方舟频道分析来探索关键词的近期分布，并采集这些词作为我们的页面关键词。方舟比百度采集的关键词采集更有价值。我们可以看到这个词来自哪个搜索引擎，跳出率是多少，留存率是多少等等，我们也可以深入分析这组用户，了解这些用户。你接下来做了什么，为什么你失去了它。

　　我们还应该注意我们网页上的内部链接。例如，这个页面是关于用户行为分析的。然后我们将这个词链接到产品页面。相关性非常高。这是一个高质量的内部链接。性不强的链接，效果会大打折扣。

　　如果网站文章很多，我们可以开发一个内部链接关键词库，把我们的关键词和链接地址存入数据库；当页面出现该词时，链接地址会自动替换为目标页面，这样可以大大节省我们编辑文章的时间。

　　▌分页技巧

　　分页是为了让更长的内容可以分段显示。比如分类列表页面的内容很多，我们可以把它分成每页10条内容。这可以使用户体验非常好且易于阅读。

　　以及如何处理这种分页，让搜索引擎也能很好的体验？我们在抓取页面时需要了解搜索引擎的规则，也就是当你看到一个页面链接时，你就会钻进去。想想如果我们展示一个分类页面和20个页面链接，就会多出20个条目，这样爬虫在爬取文章时，不会因为文章深度问题而减少爬取量。

　　我们看到很多网站喜欢点击加载更多，然后加载10条内容。其实这种方式对搜索引擎非常不友好，因为js请求的一些数据，搜索引擎是不会触发这样的链接的。这也会影响我们的收录 音量。

　　比较这两个标签，哪个更受搜索引擎欢迎？

　　▌整合营销思维，事半功倍

　　什么是标签聚合，我们先来说说聚合的含义。聚合是指对同类型内容的聚合。主要目的是方便用户阅读，方便访问者的存在，同时也会被搜索引擎识别。

　　网站 由页面组成。页面分为两类，单页和聚合页。聚合页面将单个页面按照一定的规则聚合生成新的页面，比如内容分类，就是聚合页面。

　　既然可以生成新的页面，我们就可以通过适当的操作，将我们现有的内容重新洗牌，重新组合聚合成新的页面，可以帮助我们事半功倍地增加收录页面。

　　标签其实就是我们内容的关键词，目前的文章主要阐述几点。 文章 可能有多个标签。对于不同的标签，我们会生成一个单独的标签页。里面的文章是同一个标签的文章。

　　这个标签是我们的聚合页面，自动生成，节省我们人力，增加我们的页面数量。

　　需要注意的是，tabs并不是我们在建站初期就需要用到的技术。它是一种只有在我们的内容达到一定程度后才能被唤醒的技能。因为tabs不适合内容很少的网站，内容很少使用。聚合会导致页面之间的内容重复度非常高，导致页面没有新意，反而会影响搜索引擎的抓取；如果网站有很多重复的内容，可能会减少蜘蛛来的频率。

　　我们来看看旅游类网站，比如携程。一个文章可以聚合多个类别，比如自驾游文章，可以按地区、旅行时间、价格等聚合。有不同的主题页面聚合同一个主题，比如酒店聚合页面食宿类型、国家类型酒店聚合页面等。

　　分类聚合

　　专题聚合

　　每个标签或类别对应一个页面，每个标签代表不同的含义，不仅方便用户浏览，也增加了收录在搜索引擎中的数量。

　　至此，我们讲了网站网站建设初期应该注意的网站优化知识点，结构优化，关键词挖掘，导航技巧，内容技巧，机器人，面包屑导航，图片技巧，分页，站点地图，内链关键词也有聚合页面。

　　只有前期打好基础，才能更好的进行后续的持续优化。蜘蛛对我们网站的好感度会继续增加。我们应该按照上面的注意事项仔细打磨我们的网站。

　　让我们网站这样的搜索引擎，收录就够用了，让更多的人可以进入网站，了解网站，很多新手站长因为缺乏数据支持网站很难找到现在有什么问题？结果网站一直处于爬虫不想看到的状态。

　　建议站长在网站开头部署用户行为分析工具。插入硬广，易观方舟确实很不错。

　　欢迎有数据分析需求的朋友免费使用易观方舟。