利用采集器采集的平台为斗米*敏*感*词*平台采集方法

　　利用采集器采集的平台为斗米*敏*感*词*平台采集方法

　　利用采集器采集的平台为：斗米*敏*感*词*平台采集方法可按以下步骤操作：

　　一、批量采集引擎所需素材；

　　二、爬虫抓取网站所需素材；

　　三、分析网站规则，定向采集相应的内容。一般情况下，用户使用采集器快速完成网站采集操作，平台会通过系统提供的网站数据抓取源来保证网站内容的质量，采集的效率，不过，引擎所提供的采集源对爬虫是进行了限制的，比如，同一网站同时可抓取50条素材，但仅限于主要的50条，且系统会隐藏50条中途因网站无法打开的素材等，防止爬虫恶意抓取某些网站中的站点素材。

　　并且爬虫对网站数据的抓取是有规则的，建议爬虫使用严格规则的爬虫。如何使用采集器批量采集素材，建议先用采集器填充采集素材，并修改采集提示，初步定向素材，还需将方向和页数修改后重新做个简单的引擎库。其次是对爬虫进行限制，设置爬虫平台首页无法爬取关键词等限制条件。对采集数据做正确的把控。为提高爬虫抓取效率，建议不要将采集数据存放在系统页面，建议存放在二级页面。

　　1、采集器批量采集模板

　　2、*敏*感*词*平台模板

　　3、源码采集器

　　4、cms系统公开页面

　　简单说就是所有的都可以采集，谁都可以采集，当然能采集的内容也有限制（选择什么平台方面，来进行采集，例如引擎采集，看你平台对方平台提供的给你什么操作方式）自己也要找网站源码去采集，