解决方案:云端自动采集和本地调取一般云计算支持两种模式
优采云 发布时间: 2022-11-09 13:12解决方案:云端自动采集和本地调取一般云计算支持两种模式
云端自动采集和本地调取一般云计算支持两种模式:①通过通过点云服务器的采集服务或者ccbp等进行采集②通过easyeasyshell等本地应用程序处理数据
云上采集+本地调用。云上采集有丰富的点云sdk,采集设备也基本是基于微软的here地址采集,支持中文搜索。
我也觉得云采集性价比比较高,一套case下来都不到300块。但是依赖性是比较强的,除非云采集本身有自己的爬虫服务器,其他程序都不能采集;同样这些程序也不能通过云采集随意的二次开发。
knapsacker是个不错的方式,分为云采集和本地采集两种模式。只需要你有个免费服务器就可以采集baidu的海量数据。如果再进一步提供爬虫代码就完美。关键是采集质量和页面特征的查找非常方便。
能找到微博数据就好了。跟下api接口很多代码都不用自己写。现在谷歌的文章,
还是走社交范畴的,你只需要知道对方是谁,想采集谁,
个人觉得我们现在可以提供比较好的这种数据采集方案跟大数据集采购服务的。