搜索指定网站内容(网站图片、MP3、rar等文件被百度盗链的问题)
优采云 发布时间: 2021-10-24 03:01搜索指定网站内容(网站图片、MP3、rar等文件被百度盗链的问题)
很多站长都存在自己的网站图片、MP3、rar等文件被百度黑的问题。一旦这些文件成为热门搜索内容,那么你的网站很可能会造成被百度“攻击”的现象,通常表现为你的网站带宽消耗是几十倍甚至几百倍高于正常。如果你是虚拟主机,那么你的网站肯定是会被主机关闭的。如果您租用或托管独立服务器,则带宽很可能已满。当然,当你遇到这样的问题时,如果你能及时查出是什么被盗了,如果链接结束了,你可以换目录,但是如果你不能及时查明原因,那你就心烦了一阵子。明显地,以上问题都是搜索引擎造成的。随着互联网的发展,现在每个人都可以拥有自己的网站,为了让自己的网站优于别人的网站,之后依靠自身的不懈推广,最重要的是尽可能让搜索引擎收录拥有自己的内容。当搜索引擎收录找到你的内容时,可能是收录你的一些其他资源,比如图片、音乐、软件等,其实你可以为搜索引擎指定一些具体的内容到收录,并指定一些具体的内容来防止搜索引擎收录,方法很简单。首先,您必须创建一个 Robots.txt。更改文件文件可以告诉蜘蛛程序可以在服务器上查看什么文件。不允许:这个词的意思是禁止搜索引擎访问。参考资料很详细。比如你想禁止搜索引擎访问你的ADMIN文件夹,只需要写User-agent: * Disallow: /admin/后台管理文件-------------- ----- --------------------------------------------- ----- - - - - - - - - - - - - - - - - - - - - - - - - 用户代理: * 不允许:。jpg$ 这句话的意思是在百度百科上搜索robots.txt。示例10.百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) 参考资料很详细。比如你想禁止搜索引擎访问你的ADMIN文件夹,只需要写User-agent: * Disallow: /admin/后台管理文件-------------- ----- --------------------------------------------- ----- - - - - - - - - - - - - - - - - - - - - - - - - 用户代理: * 不允许:。jpg$ 这句话的意思是在百度百科上搜索robots.txt。示例10.百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) 参考资料很详细。比如你想禁止搜索引擎访问你的ADMIN文件夹,只需要写User-agent: * Disallow: /admin/后台管理文件-------------- ----- --------------------------------------------- ----- - - - - - - - - - - - - - - - - - - - - - - - - 用户代理: * 不允许:。jpg$ 这句话的意思是在百度百科上搜索robots.txt。示例10.百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) /admin/ 后台管理文件-------------------------------------- -------------------- ------------------------------ -------------------- -- 用户代理:* 禁止:。jpg$ 这句话的意思是在百度百科上搜索robots.txt。示例10.百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) /admin/ 后台管理文件-------------------------------------- -------------------- ------------------------------ -------------------- -- 用户代理:* 禁止:。jpg$ 这句话的意思是在百度百科上搜索robots.txt。示例10.百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) 百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...) 百度蜘蛛禁止抓取网站上的所有图片。只允许抓取网页,禁止任何图片。User-agent:Baiduspider Disallow: .jpg$ Disallow:.jpeg$ Disallow: .gif$ Disallow:.png$ Disallow: .bmp$ (待续...)