php 搜索引擎优化(搜索引擎爬虫管理z-blog插件RobotsMng管理管理)
优采云 发布时间: 2022-03-19 16:14php 搜索引擎优化(搜索引擎爬虫管理z-blog插件RobotsMng管理管理)
玩了网站很久的人应该知道,通过设置robots.txt,可以限制网站哪些内容不是来自搜索引擎收录,从而达到网站SEO优化的效果。不过有些新博主可能不懂Robots.txt的写作规范或语法,所以一些z-blog爱好者制作了RobotsMng,一个搜索引擎爬虫管理z-blog插件,z-blog博主通过它只需点击几下即可标准化鼠标。生成 robots.txt 文件。
zblog插件RobotsMng的说明:
使用该插件不会导致zblog系统变慢,不存在可被*敏*感*词*利用的漏洞。插件安装成功后,博主可以通过后台网站设置管理中的管理引擎爬虫进入管理页面,也可以通过插件管理中机器人管理器后面的管理进入管理页面。插件操作说明:
Allow All:表示允许任何搜索引擎爬虫爬取你的网站的任何内容;
Block all:表示不允许搜索引擎爬虫爬取你的网站上的任何内容(谨慎使用);
在Robots.txt中显示网站图:这样便于爬虫读取网站地址并进行爬取,所以此项不允许更改;自定义爬网规则:定义此规则需要第一步选择允许全部。
如果要禁止所有引擎爬虫爬取你的网站的IMAGES目录,可以在操作中选择“拦截”,爬虫选择“所有引擎机器人”,在“/IMAGES/”中输入文件; 如果要禁止多个目录,可以使用“||” 进行拆分,例如“/ADMIN/||/SCRIPT/||/FUNCTION/”将生成三个记录。
插件下载:RobotsMng.zip
题外话:ZBLOG的哪些文件应该被屏蔽?
不允许被搜索引擎抓取的文件应该是你不想被收录的文件。对于zblog博客,博主可以选择屏蔽以下文件:
/ADMIN/
/SCRIPT/
/DATA/
/FUNCTION/
/PLUGIN/
/login.asp
不想安装插件的博主可以直接写Robots.txt,内容可以参考:《Z-Blog博客创作与设计Robots.txt文件》