搜索引擎优化含义(IIS日志的用途能够观察搜索引擎的蜘蛛来我们网站的爬取情况)

　　搜索引擎优化含义(IIS日志的用途能够观察搜索引擎的蜘蛛来我们网站的爬取情况)

　　其实我们做的seo网站优化一般都是一个无所不知、无所不能的职位，因为在做优化的时候影响排名的因素太多了，比如我们今天要讲的话题，如果分析日志没有分析它。如果你不了解蜘蛛的爬行轨迹，那么如果优化过程中出现问题，很可能是思路不对，你不知道。

　　IIS日志的目的是为了能够观察到我们网站来的搜索引擎蜘蛛的爬行情况，更密切的分析和联系蜘蛛。爬取次数、爬取时间点、爬取高峰期、爬取反映的HTTP状态码给我们带来了清晰的分析方便。

　　一、 各大搜索引擎的蜘蛛名：

　　百度爬虫名称（Baiduspider）

　　Google (Google) 抓取工具名称 (Googlebot)

　　雅虎爬虫名称 (YahooSlurp)

　　有道（Yodao）蜘蛛名（YodaoBot）

　　搜狗蜘蛛名（sogouspider）

　　MSN的蜘蛛名：msnbot

　　二、IIS分析：

　　案例日志：61.135.168.22--[11/Jan/2009:04:02:45+0800]"GET/thread-7303-1-1.htmlHTTP/1.1"2008450"-""百度蜘蛛(+http:-www-baidu-com/search/spider.htm)"

　　分析：

　　1、61.135.168.22是这个网站的服务器IP。

　　2、11/Jan/2009:04:02:45 表示蜘蛛爬行时间

　　3、GET/thread-7303-1-1.htmlHTTP，表示蜘蛛爬取了这个页面。

　　4、200状态码表示蜘蛛抓取页面成功；404表示蜘蛛抓取页面失败。

　　5、8450 表示这次捕获了8450个字节

　　6、baiduspider(+http:-www-baidu-com/search/spider.htm)代表百度蜘蛛的名字

　　三、基本状态码：

　　200：请求已完成，蜘蛛正常访问页面

　　301：移动，永久重定向

　　302：临时重定向

　　304：蜘蛛爬取后，发现页面没有修改

　　305：使用代理

　　400：请求错误

　　404页面不存在

　　

　　四、IIS详细状态码含义：

　　100-表示请求的一部分已收到，其余的正在发送。

　　101-交换协议。

　　2XX-Success 服务器成功接受客户端请求。（只要是2XX状态就代表成功）

　　200-OK。客户端请求成功。

　　201-创建。

　　202-接受。

　　203-未知信息。

　　204-无内容。

　　205-重置内容。

　　206-部分内容。

　　300-响应收到的请求，服务器可以执行各种操作。

　　301-永久移动转移，请求的内容已被永久移动到另一个新位置。

　　302-temporary move transfer，请求的内容已经临时移动到了新的位置

　　304-未修改。自上次请求以来，请求的内容没有被修改。

　　307-临时重定向。服务器当前响应来自不同位置的请求，但请求者应继续使用原创位置进行未来的请求。

　　400-错误请求。

　　401-访问被拒绝。IIS 定义了许多不同的 401 错误，它们指示更具体的错误原因。这些特定的错误代码显示在浏览器中，但不在 IIS 日志中：

　　401.1-登录失败。

　　401.2- 服务器配置导致登录失败。

　　401.3-由于ACL对资源的限制而未授权。

　　401.4-过滤器授权失败。

　　401.5-ISAPI/CGI应用授权失败。

　　401.7-访问被Web服务器上的URL授权策略拒绝。此错误代码专用于 IIS6.0。

　　403-Forbidden：IIS 定义了许多不同的 403 错误，它们指出了更具体的错误原因：

　　403.1- 禁止执行访问。

　　403.2-禁止读访问。

　　403.3-禁止写访问。

　　403.4-需要 SSL。

　　403.5-需要 SSL128.

　　403.6-IP 地址被拒绝。

　　403.7-需要客户端证书。

　　403.8-站点访问被拒绝。

　　403.9-用户太多。

　　403.10-配置无效。

　　403.11-密码更改。

　　403.12-访问映射表被拒绝。

　　403.13-客户端证书被吊销。

　　403.14-拒绝目录列表。

　　403.15-超出客户端访问权限。

　　403.16-客户端证书不可信或无效。

　　403.17-客户端证书已过期或尚未生效。

　　403.18-请求的URL在当前应用程序池中无法执行。此错误代码专用于 IIS6.0。

　　403.19-无法为该应用程序池中的客户端执行CGI。此错误代码专用于 IIS6.0。

　　403.20-Passport 登录失败。此错误代码专用于 IIS6.0。

　　404-未找到请求的内容。

　　404.0-未找到文件或目录。

　　404.1- 无法通过请求的端口访问网站。

　　404.2-Web 服务扩展锁定策略阻止此请求。

　　404.3-MIME 映射策略阻止此请求。

　　405 - 用于访问此页面的 HTTP 动词是不允许的（方法不允许）

　　406 - 客户端浏览器不接受请求页面的 MIME 类型。

　　需要 407-代理身份验证。

　　412 - 先决条件失败。

　　413-请求实体太大。

　　414 - 请求 URI 太长。

　　415 - 不支持的媒体类型。

　　416-无法满足请求的范围。

　　417-执行失败。

　　423-锁定错误。

　　500内部服务器错误。

　　500.12-应用程序正忙于在 Web 服务器上重新启动。

　　500.13-Web 服务器太忙。

　　500.15-不允许向 Global.asa 直接请求。

　　500.16-UNC 授权凭据不正确。此错误代码专用于 IIS6.0。

　　500.18-URL 授权库打不开。此错误代码专用于 IIS6.0。

　　500.100-内部 ASP 错误。

　　501-服务器无法完成请求的功能。

　　502-服务器在用作网关或代理服务器时收到无效响应。

　　502.1-CGI 应用程序超时。

　　502.2-CGI 应用程序错误。

　　503-服务不可用。此错误代码专用于 IIS6.0。

　　504-网关超时。