网站内容抓取(谷歌搜索网站各个页面的情况统计信息的小错误!)

优采云 发布时间: 2021-12-23 16:19

  网站内容抓取(谷歌搜索网站各个页面的情况统计信息的小错误!)

  在下一课中,您可以手动将自己的链接页面提交到 Google 搜索引擎;

  1、 像 Googlebot 一样爬行

  1) 点击左侧导航栏中的“Troubleshooting-Crawl like Googlebot”;

  

  2) 右侧显示一个文本框,在里面输入正确的网页相对地址,然后点击右侧抓取;

  

  3) 向下滚动查看获取链接的处理过程。如果显示“未找到”,请检查链接是否正确;

  

  4)提交完成后,等待谷歌的处理结果,当显示“success”时,点击右侧的“submit to index”;

  

  5) 弹出一个对话框,如果是单独的页面,直接点击提交,如果是目录页面,选择第二个“URL和所有链接的页面”,然后点击“提交”;

  

  6)稍等,提示“URL已提交索引”;

  

  7) 每周手动提交500个链接地址,“URL及所有链接页面”每月可提交10个;

  

  本节学习了像 Googlebot 一样抓取的基础知识。如果您成功完成练习,请继续下一课;

  下一课可以查看谷歌搜索爬取统计网站;

  1、获取统计信息

  1) 点击左侧导航栏中的“故障诊断-捕获统计”;

  

  2) 网站 右侧会显示爬取概况,包括每天的爬取量,提交sitemapsitemap时会有一个峰值;

  

  3) 每天下载的数据量也会有高峰和低谷。可以在站点地图中告诉Google,网站每个页面的更新频率,避免重复抓取未更新的页面;

  

  4)下载页面所用的时间,可以查看网站的访问速度;

  

  本节学习了捕获统计信息的基础知识。如果您成功完成练习,请继续下一课;

  下一课,你可以在这里检查网页中的一些小错误;

  1、HTML 建议

  1) 点击左侧导航栏中的“疑难解答-HTML 建议”;

  

  2)右侧显示各种HTML建议;

  

  3) 点击“Duplicate Meta Description”链接,显示收录重复描述(description)的元描述的网页链接;

  

  4) 点击链接进入查看重复网页链接,根据情况修改;

  

  5) 点击返回查看“简短元描述”链接,根据情况修改;

  

  6) 点击返回查看“Missing Title Tag”,为列出的网页添加标题标签(title);

  

  7) 点击返回查看“Duplicate Title Tag”,其中列出了收录重复的网页标题;

  

  8)点击进入查看哪些页面收录相同的标题,根据实际情况进行修改;

  

  本节学习了 HTML 建议的基础知识。如果您成功完成练习,请继续下一课;

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线