如何玩转采集器--如何选择合适的采集工具？

　　如何玩转采集器--如何选择合适的采集工具？

　　站群自动采集器可以在众多软件中脱颖而出，尽管成本低，但是效率很高，可以发布更新，实现自动化采集。今天我们就教大家如何玩转采集器--如何选择合适的工具。具体为如何选择到合适的采集工具。采集器的好坏可以说是采集软件综合体验最好的体现，市面上目前主流的采集器有以下几种：国外浏览器采集器国内各大应用市场采集器国外各大浏览器市场采集器那么小白用户应该用哪种采集器呢？首先可以从网页爬虫安全性考虑，其次可以考虑采集对象的兼容性，选择二者兼容性比较好的。

　　国内某软件市场采集器国外浏览器采集器：针对某些特定网站采集速度很快，主要是页面质量高，但是大多数是实验性质。针对个人项目选择即可。国内某软件市场采集器：速度上有些优势，但兼容性不如国外，对于一些小型项目可以使用。下面逐个讲解。

　　一、国外浏览器采集器：这个理论上来说成本最低，但是不管是像登录火狐还是谷歌等知名网站，经常会很慢。所以对于大公司（如：rediscache）大型网站(如：twitter,amazon,ebay等)的页面收集，应用频率不高的时候，首选国外浏览器采集器。

　　1、setapp-国内支持服务器配置，可以使用java/.net等语言开发，

　　2、seed-国内支持服务器配置，可以实现1天500万pv的采集，不过主要是小站用的，

　　3、hackerhobby-简单便捷，采集速度比较慢，基本用不上。速度上与setapp相比主要是加载较慢。但是对于一些站点速度上没有太大影响。

　　二、国内浏览器市场采集器：推荐国内网站用自己的市场采集器，

　　三、对应用市场的兼容性要求一定要高

　　四、根据采集对象选择合适的采集工具针对单纯小站推荐使用pythonexcel或者ie,如果你的站点对设备要求较高，

　　1、shter-主要在于网站

　　1、

　　2、3级域名上的数据采集，不管是cookie还是返回的html等文本信息，不管是否缓存，

　　2、phantomjs-主要是在ie上采集，不论是mime还是xpath都不太在行。当然想要ie付出点努力，

　　3、javascript-只要想的到的都可以采集。还有云采集器,可以添加到浏览器云端，或者api。但是保证你的网站不被黑客入侵。

　　4、curl-u只支持网站，还不是很懂网站算法等等。而且说实话，