技术性SEO的六个基本方面，做好这六大方面

　　技术性SEO的六个基本方面，做好这六大方面

　　无论您的网站 是使用 Shopify、Wordpress 还是 Magento 创建的，请注意您的网站 必须进行优化

　　

　　

　　我们谈到对网站的优化，尤其是网站的优化，其实主要包括

　　2个主要方面：

　　一个是页面的SEO（一页）

　　另一个是网站结构优化，也叫技术SEO

　　由于搜索结果的竞争越来越激烈，对SEO的技术优化提出了更高的要求。

　　表现良好的网站 必须是可抓取、快速且安全的网站。

　　技术SEO收录的内容很多，涵盖网站的结构设计、URL、网络地图等，是一个技术性很强的方面。

　　今天主要讲一下网站技术SEO的六个基本方面。如果这六个方面做得好，网站的表现就会更加优化和健康。

　　这一章可能很多人觉得枯燥，但其实很重要。

　　为什么？

　　因为一个网站，如果你花很多时间在获取流量上，比如广告，比如名人，但是基本的文章审核（review）没有通过，那么无形中增加了你的网站营销费用。

　　想象一下网站 的打开速度为 2 秒，网站 的打开速度为 10 秒。效果能一样吗？

　　所以从网站优化的角度，尤其是从技术优化的角度，我们需要从以下几点来优化：

　　01

　　确保网站可以被抓取

　　对于搜索引擎优化，高质量的内容是必须的。但只有高质量的内容是不够的。如果搜索引擎无法抓取这个页面，那么你辛苦写出来的内容不是白费了吗？

　　为了保证网站可以被爬取，首先检查robots.txt文件。该文件是任何网络爬虫软件到达站点时的第一个调用点。

　　robots.txt 文件会指定应该抓取的部分和不应该抓取的部分，显示它允许或禁止某些用户代理。

　　通过在根域末尾添加/robots.txt，即可公开使用robots.txt文件。来看看我的网站例子：

　　

　　

　　如您所见，Hallam网站 不允许抓取以 /wp-admin（网站 后端）开头的 URL。通过指定禁止这些网址的位置，您可以节省带宽、服务器资源和抓取预算。

　　同时，不应该禁止搜索引擎爬虫爬取网站的重要部分。

　　因为robots.txt是爬虫在爬取网站时看到的第一个文件，所以最好将robots.txt指向站点地图。您可以在旧版 Google Search Console 中编辑和测试 robots.txt 文件。

　　

　　

　　在robots.txt测试工具中，在下方网址栏中输入任意网址，检查该网址是否可以抓取，以及robots.txt文件中是否有错误和警告。

　　因为旧版的Google Search Console比新版的功能更多，所以旧版在技术SEO方面会更有用。

　　比如在老版本中，可以在站长工具上查看爬取统计区（Craw Stats），会更方便了解网站爬取方式。

　　

　　

　　

　　

　　此报告有 3 个图表，显示过去 3 个月的数据。

　　每天抓取的网页数、每天下载的千字节数、下载网页所用的时间（以毫秒为单位）可以显示网站的抓取速度以及与搜索引擎爬虫的关系。

　　搜索引擎爬虫会定期访问某个网站，这是一个快速且容易爬取的网站，这个网站会有非常高的爬取速度。

　　图表数据最好能保持一致。任何大的波动都会引起问题。可能是 HTML 损坏、内容过时或 robots.txt 文件阻止了过多网址。

　　如果页面加载时间过长，说明爬虫爬取时间过长，索引速度慢。

　　您还可以在新版 Google Search Console 的覆盖率报告中查看抓取错误。

　　

　　

　　这些地方是有爬虫问题的页面，点击显示这些页面。检查是什么导致了这些页面的抓取问题。对于不是很重要的页面，最好尽快解决这些问题。

　　如果您在 Craw Stats 或覆盖率报告中发现重大抓取错误或波动，您可以分析和查看日志文件。

　　从服务器日志中访问原创数据可能很麻烦，因为分析是一项高级设置，但它有助于准确了解哪些页面可以被抓取，哪些不能被抓取。

　　哪些页面会被优先处理，哪些区域浪费预算，爬虫在爬取网站的过程中会收到哪些服务器响应。

　　02

　　检查网站可以编入索引

　　检查爬虫是否可以抓取网站后，需要查明网站上的网页是否已经被Google收录。

　　有很多方法可以检查这个问题。之前使用的 Google Search Console 覆盖率报告可用于检查每个页面的状态。

　　

　　

　　从这份报告中我们看到四个数据：

　　您还可以使用网址检查工具来分析特定网址。

　　如果某个首页的流量下降了，请检查新添加的网站是否已被索引，或者对该网址进行排查。

　　检查网站 是否可以被索引的另一个好方法是使用爬虫工具。推荐使用尖叫青蛙。

　　Screaming Frog 是最强大、最常用的爬虫软件之一。有付费版和免费版，可以根据网站的大小选择。

　　免费版功能有限，抓取次数限制为500个网址。付费版年费149英镑，可用的功能和API很多，没有爬虫限制。

　　

　　

　　运行爬取软件后，可以看到与索引相关的两列结果。

　　Indexability：Indexability，显示 URL 是否可以被索引，是“可索引”还是“不可索引”。

　　Indexability Status：可索引性状态，显示 URL 不可索引的原因，是否编译为另一个 URL，或者没有索引标记。

　　这个工具是批量审核网站的好方法，您可以了解哪些网页正在被索引，哪些网页不能被索引，这些都会显示在结果中。

　　对列进行排序并发现异常情况，使用Google Analytics API，可以有效识别可编入索引的重要页面。

　　最后，您还可以使用这个网站 来检查您的网页有多少被编入索引：域 Google 搜索参数。

　　在搜索栏中输入 site:yourdomain 并按 Enter，您可以看到网站 上已被 Google 编入索引的所有网页。

　　示例：

　　

　　

　　在这里我们看到大约有 95,000 个 URL 已被编入索引。通过此功能，我们可以了解 Google 当前存储的网页数量。

　　如果您的网页数量与 Google 索引的数量相差很大。

　　那么你应该考虑：