解决方案:搜索引擎页面抓取方式？（附网站结构应该怎样部署才能实现双赢呢）

　　解决方案:搜索引擎页面抓取方式？（附网站结构应该怎样部署才能实现双赢呢）

　　8.2 搜索引擎抓取重要页面 搜索引擎如何抓取网站中比较重要的页面。

　　由于互联网信息量巨大，为了向用户展示更有价值的信息，搜索引擎会优先抓取每个网站@中比较重要的页面（即权限较高的页面） >。但是，搜索引擎是如何发现这些相对重要的页面的呢？根据重要页面的链接指向的页面也可能是重要页面的思路，搜索引擎会首先从权限比较高的页面（即源页面1）开始，跟踪其中的链接，从而去爬取其他比较重要的页面（即目标页面1）页面1）。

　　1 在链接关系中，我们称存储链接的页面为源页面，链接指向的页面为目标页面。

　　1 在链接关系中，我们称存储链接的页面为源页面，链接指向的页面为目标页面。

　　例如，一般情况下，搜索引擎会从网站的首页开始，跟随其中的链接，爬取网站中其他比较重要的页面。

　　由此我们了解到，增加页面成为收录的机会的最佳方法是缩短页面与重要页面之间的链接路径。

　　站长在搭建网站的时候，会接触到网站的各种元素。其中，网站结构是一个非常重要的环节。关于网站结构不否认有些人会直接忽略，但是网站结构可以涉及到网站的很多方面，在网站的优化中，关于网站结构的优化也是必不可少的。有的站长甚至将结构优化划分为单独的优化重点。可见，网站结构的重要性我们就不用多说了。 网站后期收录包括用户体验好不好很大程度上取决于网站的结构。如果网站遵循用户的操作习惯，符合搜索引擎的爬取状态，那么网站自然会受到用户的喜爱，所以网站应该结构清晰，导航简洁，方便用户找到在最短的时间内获得相应的内容，还可以促进搜索引擎对站点信息和收录的爬取。聊了这么久，我们应该如何部署网站结构才能实现双赢呢？别着急，往下看。

　　首先要说的是网站构造前的排版问题。每个站长对于网站的排版都有自己的想法，但有些是为了突出网站的区别个性化，违反用户操作习惯在网站上部署，这样的行为会适得其反首先要保证用户打开页面的第一印象不会恶心，这样网站才有机会留住用户，包括前期的页面加载时间。如果时间过长，用户可以直接关闭页面。电路板的布局应根据用户习惯进行设计。一个与用户体验背道而驰的网站，必然要进行有效的改进。

　　我们在上面谈到了页面加载速度的问题。造成这种现象的因素很多。其中最重要的因素之一是在 网站 页面中部署了大量的 image flash 格式的文件。虽然网站的视觉效果有了一定的提升，但是由于文件比较大，网页的加载时间也受到了影响，包括网站JS等，建议减少尽可能多的这样的文件。使用div+css更好的迎合搜索引擎的爬取，包括网站的404页等，可以在一定程度上提升网站的用户体验。

　　接下来说一个常见的，就是网站的面包屑导航。相信大家都接触过这种导航方式。面包屑导航有优点也有缺点。 网站简洁明了的结构是为了让用户在最短的时间内找到自己需要的信息，所以面包屑导航可以引导用户方便快捷地浏览网站，告知用户当前位置等信息，这样用户就不会在网站上迷路。通过面包屑导航的部署，用户可以清楚的知道自己的页面在整个网站中的具体位置，也方便用户返回上一级。另一方面，也能很好地迎合搜索引擎对网站信息的抓取。蜘蛛可以通过面包屑导航路径一一抓取网站信息，从而达到促进网站收录改进的目的，所以面包屑导航也是一个重要且不可缺少的功能站长优化网站.

　　​

<p>最后说一下网站框架的问题。大家一定听说过，在网站的优化中尽量避免框架的出现会影响收录的问题。错了，对于页面中的某个block，frame是固定的，其他部分的信息可以通过滚动点来显示。虽然框架使用起来很方便，但是在这样的页面中，搜索引擎无法抓取到更多的信息，所以会影响到网站整体收录，建议在