网站改版 内容排序(网站改版中规则迟迟不生效、同样内容多套URL被收录)

　　网站改版 内容排序(网站改版中规则迟迟不生效、同样内容多套URL被收录)

　　飞影同学要火，要火！这个文章又是他的！许多站长批评了网站 修订工具。事实上，他们可能真的需要从自己身上寻找原因。怎么了？分享如下：

　　本次经验分享主要是为了帮助一些朋友在日常网站改版规则长时间不生效，多组相同内容的url为收录。其实这个问题很久以前就一直困扰着我。经过man_hok高手指导，发现问题的最终原因是旧链接仍然存在，所以网站修改无效，新内容的旧url还是收录。

　　如果遇到以下问题，应考虑旧入口是否未关闭：

　　网站修改不生效，部分不生效，有效期过长。

　　一个相同内容的百度收录多个网址。

　　百度经常会抓取一些不存在的页面。

　　主要问题的症结在于：

　　网站里面有一个旧的链接条目。

　　如果是多组相同内容的url的问题，还应该考虑网站是否有pan-parsing，或者把目录换成pan-parsing。

　　外部链接有误。

　　解决方案概述：

　　网站内部旧链接可以由程序员或 SEO 检查，从程序或页面中删除，或替换为新的 url 格式。

　　关闭泛解析，记得处理它引起的死链问题。

　　如果外面有错误的链接方向，可控参考（1）解决，不可控必须返回站内错误的链接到404.

　　如何在网站上找到错误的链接

　　和很多朋友一样，技术很难解决这类问题。

　　老板又骂我们了，怎么办？或者我们可以自己想办法解决。

　　我推荐 XENU 用于本教程。相信大家都听过。为了方便大家调查，我给大家做一个简单的教程。通过XENU，我们可以遍历整个站点，发现一些没有上述问题的错误。朋友们也可以用这个工具来遍历了解网站存在的错误，不错！废话不多。

　　1.首先，让我们创建一个新的遍历网站。一般情况下，我建议多域多页面一一检查，否则容易造成死角。打开 xenu 文件后 - 检查 URL 以创建一个新项目。

　　2.配置项，我们可以在这里输入我们要查看的URL。如果有多个子域且子域内容较多，建议逐个子域检查。不建议检查外部链接。在使用过程中，可以排除一些不必要的要检查的项目，这样会提高遍历的速度。

　　3.高级配置。这一步一般是少量站点收录，对性能要求不高的可以不设置跳过这一步。

　　在更多选项中，我们可以设置线程数。线程数越高，速度越快，对系统资源的占用也越高，对站点的压力也越大。如果站点的服务器空间性能不是特别好，或者在使用工具的过程中站点宕机。这里可以减少和增加线程数，一些比较卡的电脑也可以减少线程数来缓解卡顿。

　　这里有很多层需要特别注意，因为涉及到遍历的逻辑。一般可以写3-5个。要看网站的层次是否复杂。如果遍历的结果不完整，可以调整High maximum layers。

　　4.设置完成后点击OK，程序开始遍历URL。此时，建议不要将程序放在本地计算机上，以免影响工作。

　　5.程序运行后会询问是否需要报表，如果需要可以自动生成报表，不过这里我建议一些朋友，第一次运行后点击菜单栏：文件-重试无法访问的链接。让程序确认这些链接是否真的无法访问。

　　6.注​​意一下，除了200的状态，这里列出的链接都在里面，包括301的。从上图可以看出，我还有很多这样的错误301链接在外部仍然存在。然后我必须用新的链接格式删除或替换这些链接。查看方法非常简单。点击链接的右键属性，可以看到哪些页面错误的链接保留了条目。通用标准化页面中的错误可以通过此工具一次性检查出来。一般301 302这里会返回no return信息，404会返回status not found。当然，如果金额较大，建议导出到excel中查。

　　这里排查的时候有个窍门：点击菜单栏中的“查看”——勾选“只显示无效链接”，这样正确的链接就没有了。

　　此外，该工具还可以挖掘页面内部链接的数量和位置等信息。如果您有更多问题，请与我联系。

　　点击“阅读原文”进入站长社区，与即将走向人生巅峰的飞影同学交流讨论！