自动采集器对于正常的应用而言存在两种意义吗？

　　自动采集器对于正常的应用而言存在两种意义吗？

　　自动采集器对于正常的应用而言存在两种意义。1.提高效率：发现好的网页，一次性采集，省时省力省心。2.去重：用于网页联盟，每个网页不止一个url，为了尽可能的去除重复的url，可以使用自动采集器去重。

　　现在网站的重要问题并不是你们认为的那样..大多数没什么价值的网站都是没几个人浏览的.真正有价值的网站收录多了你才能感觉到对你有意义

　　从现在数据对比来看，不算靠谱，bta数据太多，很多频道排行都是靠运气，例如你找了一个冰山频道，好不容易上了几十页，然后又被熊猫频道抢走一大部分，那就看的比较心累了。

　　差，上面人说的不全面。自动抓取的优势在于便于统计和分析，对某些频道或者部分主题可以进行处理。当然，也是有缺点的。1.网页量多的时候，被你抓的概率会大大增加。2.被你抓取的概率增加，对服务器压力也大，特别是bat这种量级。从你提供的几张图片来看，你网站现在比较少人用，但是对于精准数据抓取来说，优势并不明显。

　　当然，如果你仅仅是想利用自动抓取来分析各个栏目位置的数据。那是可以的。从定制化抓取需求，以及你所在城市的人口，包括曾经用过你们的产品，都可以通过各种数据定制化来满足你，很多公司都有这样的产品。