谷歌抓取网页视频教程(如何查看谷歌搜索抓取网站的情况统计信息；左边导航栏中的)

　　谷歌抓取网页视频教程(如何查看谷歌搜索抓取网站的情况统计信息；左边导航栏中的)

　　下一课可以查看谷歌搜索抓取的统计数据网站；

　　1、 爬取统计

　　1）点击左侧导航栏中的“疑难解答-爬取统计”；

　　2）右侧会显示网站爬取的概况，包括每日爬取量，提交站点地图时会有峰值；

　　3）每天下载的数据量也会出现波峰和波谷，可以在sitemap中告诉谷歌，网站每个页面的更新频率，避免重复爬取没有更新的页面；

　　4）页面下载时间，可以查看网站的访问速度；

　　本节学习了爬取统计的基础知识，如果你成功完成了练习，请继续下一课；

　　网站 页面中的错误链接可以在这里找到下一课；

　　1、 抓取错误

　　1）点击左侧导航栏中的“疑难解答-抓取错误”；

　　2）右侧会显示google获取的错误信息，一般是url错误；

　　3）下拉，可以看到具体的错误链接，按优先级排列，其次是检测日期；

　　4）点击链接输入错误详情，链接是否在站点地图中，链接所在页面；

　　5）单击站点地图选项卡以检查此链接是否收录在网站地图文件中；

　　6）点击第三个“Link to your domain on 网站”，可以查看在哪个网页，然后到这个页面查看；

　　7）bug修复后，可以点击下方“标记为已修复”按钮，然后确认已修复；

　　8）一一修复所有错误，提交正确的sitemap.xml，等待google更新；

　　本节学习了爬取错误的基础知识，如果你成功完成了练习，请继续下一课；

　　在下一课中，您可以手动将自己的链接页面提交到 Google 搜索引擎；

　　1、 像 Googlebot 一样抓取

　　1）点击左侧导航栏中的“疑难解答-像Googlebot一样抓取”；

　　2）右侧显示一个文本框，在里面输入正确的网页相对地址，然后点击右侧的抓取；

　　3） 下拉查看爬取链接的处理。如果提示“找不到”，请检查链接是否正确；

　　4）提交完成后，等待谷歌处理结果，当显示“成功”时，点击右侧“提交索引”；

　　5）会出现一个对话框。如果是单独的页面，直接点击提交。如果是目录页面，选择第二个“URL和所有链接页面”，然后点击“提交”；

　　6）过一会会提示“URL已提交索引”；

　　7）每周手动提交500个链接地址，“URL和所有链接页面”每月10个；

　　本节学习了像Googlebot一样爬行的基础知识，如果您成功完成了练习，请继续下一课；