网页爬虫抓取百度图片(搜索引擎排名原理分析讲解、基本必学常识SEO学习心态)

　　网页爬虫抓取百度图片(搜索引擎排名原理分析讲解、基本必学常识SEO学习心态)

　　一、搜索引擎排名原理解析讲解

　　没有。一、基本必须学习常识

　　1.SEO学习心态和方法

　　2.搜索引擎（百度、谷歌、360、搜狗、爱问、有道、中搜、中国雅虎）；搜索引擎蜘蛛（蜘蛛，又称爬虫、机器人，是一套信息抓取系统程序；如百度蜘蛛：Baiduspider，谷歌蜘蛛：Googlebot，360蜘蛛：360Spider，搜狗蜘蛛：搜狗新闻蜘蛛）

　　3.SEO（搜索引擎优化）

　　4.关键词：用户在搜索信息、产品或服务时，在搜索引擎界面输入的词。

　　5.排名（单页参与排名）

　　二、搜索引擎爬取收录的原理

　　爬取：（1.爬虫蜘蛛跟随网页中的超链接，发现并采集互联网上的网页信息；2.蜘蛛的爬取方式：深度爬取、广度爬取；3.它不利于蜘蛛识别爬取内容：如JS、图片ALT属性辅助识别、Flash添加文字辅助、层级多的iframe框架、嵌套表格、需要登录信息后的页面）

　　过滤器：（低质量内容页面：1.采集，低价值；2.不当文字；3.没有丰富内容）

　　存储索引库：（质量提取和组织信息建立索引库）

　　显示排序：(1.根据用户输入的查询关键词，检索器可以快速的查出索引库中的文档，对文档和查询进行相关的阅读评价，对结果进行排序待输出，并将查询结果返回给用户；2.当我们在搜索引擎中只看到一个结果时，搜索会在首页的第一位显示某一个关键词根据各种算法）

　　三、 节日常注意事项

　　1.已被收录的页面不可随意删除或移动；2.显示结果需要一定的时间（2个月内正常）；3.丰富的内容阅读；4. 吸引蜘蛛，比如主动提交给搜索引擎，外部链接吸引蜘蛛；5. 蜘蛛跟踪，网站IIS 日志。

　　页面摘要 四、

　　心态：不要试图依赖所谓的捷径；SEO学习需要长期的坚持和努力；不断的努力。

　　二、建站工具原理详细操作讲解

　　学习网站构建工具

　　1、域名：购买和租用年限，名词解析（前缀、后缀：国际通用域名.后三个字母；国家域名.dot.后两个字母。 cn; 国内域名。），购买说明（尽可能简单，知道你在这个域名之前做过什么，搜索顶级域名，查看记录，站长安全联盟，选择常用域名后缀）

　　2、空间：需购买租用、远程管理（控制面板、FTP远程工具）、常用功能（301重定向、解压/压缩、备份/恢复、服务器日志、自定义页面）、购买注意（速度够快，够稳定，够安全，服务好），选择正规的空间商。

　　3、 网站建设者（wordprss 博客、discuz 论坛、phpwind 论坛、dedecms织梦cms、empirecmsempirecms、shopex 在线商店, ecshop 网上商店）

　　4、其他：解析、域名级别（一级域名、二级域名）、归档、类型

　　三、匹配最快排名的关键词选择

　　第一个一、基础理论：三大标签（标题、描述、关键词）；品牌词

　　文章二、单核心标题写作

　　基本思路：

　　1、标题似乎是一句流畅的句子；

　　2、关键词 层级，例如：电梯和客梯分别属于上下两层；客梯与货梯为同级关系；需求词是从核心扩展而来的，不是同级关系。如电梯及电梯价格、电梯规格；客梯和客梯价格、客梯安装、客梯维修都是需求词。单核标题最容易排名和争夺符号（核心词+需求词=单核，同级关系，考虑多核）；

　　3、标题和内容的关系；

　　4、核心关键词+服务内容

　　选前思考：谁是我的用户？他们会搜索什么字词？（核心关键词+我们的网站服务加上我们的服务，我们的服务就是用户的需求）

　　标题组合：

　　1、确定网站核心词（产品/服务）；

　　2、挖掘相关词并过滤（取整）；

　　3、合格的标题组合：关键词1_关键词2_关键词3-品牌词；

　　4、不错的标题组合，组合成流畅的句子；

　　5、优秀的标题组合（时间需求，如：最新、2016；信息量大，如：百科；可信度，如：专家、专业；稀缺需求扩展）。标题示例：_长沙网站生产专家-提供网站施工详细报价单。

　　基本优化：基本优化原则（1、关键词前面的话权重越高，2、字数大于4字，小于32字，标题符号应该是英文）；常见错误（1、描述性词语太多；2、标题内容不到位；3、标题多核，设置太多;

　　修改标题：一次修改很重要

　　三、 描述（deion）

　　1、描述捕获和显示；2、描述是标题的扩展（吸引点击）；3、60-80字

　　部分 四、关键词（关键字）

　　四、创建用户友好的导航和布局

　　不。一、什么样的网站导航适合用户体验？

　　不是。二、什么样的网站布局才符合用户体验？

　　三、网站导航开发部分

　　1、用户注意事项：简明扼要；容易明白; 多少？

　　2、 蜘蛛考虑：有利于识别（图形或文字）；它有利于爬行（不要使用 JS 调用）；符合SEO（level、DIV、不使用table）

　　编号四、网站布局思路

　　1、抓问题；2、展示问题；3、需求找难；4、DIV布局代替表格

　　第一个五、使用地图规划导航（会使用地图布局导航，比如百度脑图、XMind）

　　五、排名最高网站 内容创作

　　1）内容你需要知道你需要什么内容网站

　　2）内容制作

　　1.判断内容质量的三个维度（搜索引擎维度要内容丰富；用户维度；网页打开速度）

　　2.内容模板制作（用户想了解这个产品的哪些信息；二次标题策划；内容填充）

　　3. 内容注释（字体：14字号比较好；颜色；图片优化，一个文章中的图片大小要一样，alt属性文字要和图片相关；模板文本）

　　4.避免垃圾内容（除非强制，否则不要添加锚文本；字体颜色应相同；除标题大小外，文本大小应相同；文本中不应有广告）

　　5.内容创作采集（第一步：采集内容；第二步：根据模板整合内容，根据自己设置的标题填写内容；第三步：微调；第四步：差异化体验调整）

　　3）超牛B的内容创作秘诀（每天坚持做文章，持续更新网站）

　　六、推进网站排名的内容更新计划

　　1、关键词挖矿方式

　　常用方法：百度文库、*敏*感*词*、百度知道、工具（百度推广后台、金华挖词工具、追词助手）、相关论坛、相关搜索等（客户搜索长尾关键词 成为我们的 文章 标题）

　　挖掘思想：分割思维

　　2、内容更新

　　更新思维：匹配；关联

　　常用文章：名词解释、常见问题、知识解答、使用说明、季节性、及时性

　　分类长尾：例：装修包括家装、工装、Q&A、材料等。家装可根据客厅、房间、厨房、浴室进行更新

　　注意事项：上线是指被百度抓取时在线。上网时，绝对不允许有空页。内容必须是完整的才能上线。文章在线栏数（至少6个以上），新站更新（内容应该每天更新）

　　3、更新问答：避免重复文章；网站是否需要经常更新（可以找到关键词表示有内容要更新）

　　七、通用链接规范和链接集中化

　　一、基本常识小节

　　(1)权重集中

　　权重在网站的每个页面上继承。权重越高，关键词的排名就越好，但并不决定排名。

　　如何提高网站的权重，搜索引擎会使用网站的整体表现：例如网站内容、外链投票、网站结构、网站 >权重、及时性、稀缺资源等综合因素来判断这个重要性，这个重要性称为网站的权重。

　　(2)http状态码：200正常访问；301永久重定向；404页面未找到，分为不存在页面和人为错误；500服务器内部错误；503服务不可用，服务器临时维护 要么超载，服务器当前无法处理； 505 服务器不支持，或拒绝支持请求中使用的 HTTP 版本

　　路径标识二、

　　(1)静态路径是指静态的网站地址，纯静态形式，通常以.html、htm为后缀，以目录结构结尾；特点：完全静态的HTML网页文档，无需其他语言调用或加载，适合企业网站适应企业网站，单页网站等内容较少

　　(2)动态路径：有一个或多个参数和字符，不是.html .asp .php 等形式，不带后缀

　　(3)伪静态路径：将原来的动态路径通过技术转化为伪静态

　　第一个三、的实际链接权重集中

　　(1)路径优化注意事项：1）建议上线前优化道路强度，收录不建议优化；2）道路强度应不能太长，参数太多；3）卢晋不要太深；4）最好不要出现中文；5）卢晋名字要描述性；6）https是http安全版；7）网址拦截；8）最好每页只留一个链接

　　(2)优化操作：1）处理有尾，统一路径；2）301重定向（空间控制面板，DNSpod）；3）使用工具查看.http状态码

　　八、学习html代码优化

　　1、网页标签理解：CSS+DIV标签、class、id标签、A标签、img标签

　　2、代码优化：图片优化，图片的alt描述，图片大小要一致，图片要清晰，中间不要放水印；标签应整齐；一个标签，站点中的链接建议不要使用nofollow标签，即使使用了，也是用于无意义的链接；h标签，h1代表一个页面的核心；标签整洁，标签越简单，搜索引擎就越容易分析你的网站。

　　（学习SEO，懂得建站，懂html标签，熟悉程序的基本代码原理。）

　　九、黄金分割原理操作布局网站

　　一、网站节结构优化

　　1）网站结构

　　1.定义一般认为是根据客户需求分析结果，准确定位网站目标群体，设置网站整体架构规划、设计网站栏目及其内容，制定网站@网站开发流程和顺序，最大限度的设计高效的资源配置和管理；

　　2.Category：物理结构，一般指虚拟空间中很多目录和文件的层次关系；逻辑结构，网站上线后，我们可以看到网站接口与肉眼链接关系在

　　3.重要性：网站结构是seo优化过程中不可忽视的一个非常重要的环节；合理的内部链结构和合理的网站布局在网站中可以有效引导蜘蛛爬行；方便搜索引擎更好收录；可以建立良好的用户体验；适当的网站结构优化有利于页面权重的合理分配（一般网站首页权重最高，分类页面次之，但对于电商网站略有不同，专注于产品页面，所有依赖网站的内链都可以很好的将首页的权重传递给其他页面，从而实现权重的整体提升，并最终让更多的长尾词获得好的排名）；优化网站结构有利于内部锚文本的构建（通过大量的内部链接，加强相关性）

　　2）网站结构设计目标

　　1.明确列结构的上下文，层次清晰明了；2.体现特色，注重特色设计；3.方便用户使用；4.网页功能分布合理；5.扩展性极佳；6.用户反思中网页设计与结构的完美结合；7.对于搜索引擎优化，布局是基于关键词竞争力网站首页

　　3）网站结构考虑

　　1.用户体验与优化相结合；2.网站地图、搜索引擎地图、用户地图导航；3.面包屑的使用；4.用户浏览的重点

　　二、Practice网站 页面的页面布局