seo网站日志分析工具(为什么要来被蜘蛛访问的网站,有什么用应该找到了吧)
优采云 发布时间: 2022-03-28 08:07seo网站日志分析工具(为什么要来被蜘蛛访问的网站,有什么用应该找到了吧)
W3SVC1328191266 这是日志记录的标准 网站
59.188.69.102 被蜘蛛访问过的网站知道互联网的基础知识。域名只是为了方便我们记忆和传播。当我们访问网站的时候,其实需要后台运行解析,把域名转换成IP地址,所以这个IP就是网站的IP。
GET /biji/11.html 是访问路径。看到这里,相信聪明的朋友已经知道了,为什么要分析网站的日志呢?因为只有通过分析日志,我们才能知道我们网站是否有蜘蛛要爬,哪些目录和页面被爬过网站,哪些页面和目录没有被爬过,作为站长网站,我们来分析一下为什么没有被蜘蛛爬取的原因。
80 这是网站的端口,服务器和你的电脑通信的端口
123.125.71.54 访问者的IP,我们可以通过日志知道谁在哪里访问我们,通过IP查询工具。
Mozilla/5.0+ 访客使用的客户端浏览器版本
compatible;+Baiduspider-cpro;++ 这是百度联盟的蜘蛛。在这里,我还要提一下什么是百度蜘蛛。百度蜘蛛是百度搜索引擎的自动程序。它的功能是访问互联网上的网页。建立索引库,让用户可以在百度搜索引擎中搜索到你网站上的网页,蜘蛛通常被称为搜索引擎蜘蛛。百度每款产品使用不同的user-agent:也代表不同的用途,如无线搜索Baiduspider、图片搜索Baiduspider-image、视频搜索Baiduspider-video、新闻搜索Baiduspider-news、百度紫藏Baiduspider-favo、百度联盟Baiduspider- cpro、商业搜索Baiduspider-ads、网页等搜索Baiduspider 这也是最喜欢看的蜘蛛。
200是网站的返回码,证明蜘蛛在索引页面时可以正常访问。
通过以上对网站日志的讲解,相信你应该了解网络联盟分析中的网站日志有什么用!分析网站日志可以让网络联盟清楚了解网站我们在分析日志时只需要注意几个常见的spider和网站访问时间、返回码、响应速度网站 日志。
以上就是百度网站蜘蛛日志分析的全过程,希望对大家有所帮助,感谢阅读。请继续关注潘少君恒。
买手交流群:377963052