自动采集器(自动采集器适合的功能是题主所说一样)

　　自动采集器(自动采集器适合的功能是题主所说一样)

　　自动采集器适合的功能就像题主所说一样，一般我们并不想去花时间去采集数据，而且像题主提到的就是“在采集过程中会被人工干扰进行数据修改，或加入上级库存”。而自动采集器，针对的就是这类用户。自动采集器通过脚本引擎跟爬虫脚本抓取整个网站内容然后存储到自己的服务器上面。因为是采集整个网站的内容，只是针对用户来进行采集，所以只针对固定某些网站或者网页进行采集。

　　再来说说题主说的上级库存问题，其实爬虫采集很多网站信息的时候都会在数据源头再加入数据库查询表，此表存储了对源网站里面的所有的数据库索引信息，也就是说可以爬取到别的网站的信息库，存储到自己的服务器里面，而这个数据库就是上级库存。像题主举例的链家网这个爬虫，会自动去下载linkedin13年就开始上传的所有的房源信息，并且针对自己网站的内容匹配以及数据搜索等工作全部是由爬虫自动完成。

　　最后说说下级库存方面，像常见的爬虫下载资源库和上级下载资源库，两者其实就是多的共享资源的两种爬取方式，用爬虫去下载资源库可以避免人工对数据库的增加上级库存的问题，用自动采集器去下载资源库可以减少一部分对自己网站的需求内容，以及减少上级下载资源库的数量，即采集器的自动化工作可以使自己网站的资源更加完整。