输入关键字 抓取所有网页(1.URL要简单规范，简单就是不要标签10.目标关键词)

　　输入关键字 抓取所有网页(1.URL要简单规范，简单就是不要标签10.目标关键词)

　　1.URL 应该是简单和标准化的。所谓简单，就是不要那么冗长复杂，方便蜘蛛爬行。所谓标准就是不能打开动态和静态的url或者不同的url指向同一个Content页面，如果有用的话，301永久跳转

　　2.网站采用树形结构，比如首页-栏目页-内容页，这种结构更有利于蜘蛛的抓取

　　3.购买更好的服务器或空间。最好有更快的速度，最好是独立IP。速度快有利于蜘蛛爬行。独立IP不会因为其他网站作弊而受到牵连

　　4.网站不要在JavaScript中封装导航和重要内容，因为蜘蛛无法抓取JavaScript中的内容

　　5.如果网站的内容不多，不要使用二级域名，而是使用二级目录

　　6.安装百度统计，百度统计已经升级到最新版本，该版本可以自动将网页推送给百度蜘蛛，有利于网页被蜘蛛抓取和索引

　　7.使用robots.txt文件禁止一些蜘蛛经常抓取的无效页面，有利于提高蜘蛛的抓取效率，让蜘蛛抓取到更有效的页面

　　8.target关键词 将出现在页面标题和 文章title 中

　　9.文章标题应该使用H1标签

　　10.目标关键词应该出现在文章中，最好出现3次以上。首段、中段、尾段可酌情概括。这个seo技巧不能过度使用，否则是关键塞，很容易被判断为作弊

　　11.内容应保证原创*敏*感*词*内容，不得简单复制粘贴。内容可以深度整合，与其他页面不能重复超过30%。最好是所有 原创。原创内容很重要，原创内容很重要，原创内容很重要，说三遍。