解决方案:免费云采集的话,要用verify在外网的mongodb服务器

优采云 发布时间: 2022-11-21 15:19

  解决方案:免费云采集的话,要用verify在外网的mongodb服务器

  免费云采集的话,要用verify。mongodb有两种实现方式。一种就是采用文档,可以直接copy在外网的mongodb服务器,或者github或者百度网盘等。这个我刚开始采用这种,你可以试试。开源版本:xsecret一种就是采用数据库进行存储。一般采用mongodb,采用数据库文档存储方式,如eloquentsearchlibrary。

  这个我开始用来做速度提升的。不建议采用免费的采集器,或者所谓的采集工具,它们的权限都不够。verify就是用来免费开源的,被邀请了的话才会免费用。

  

" />

  谢邀。云采集这种东西不用买verify的,直接淘宝搜一个别人都写好的脚本,解压然后安装token的话,

  他们最近改名叫云采集了,一天30吧,一个月300。

  把要抓取的内容先mongodb中映射一下吧。

  

" />

  说一个自己使用的吧,

  “eloquentsearchlibrary”可以

  有安装教程,详细了解一下。更新一下:今天找了一下,虽然又出现了新的版本,但是已经没有存在意义了。到现在,基本上都已经是clojure3了,应该是beautifulsoup3。内容采集都要更新。跟用什么clojure做框架没有关系。百度一下clojure,第一页就有beautifulsoup3的介绍。一定要查1.41.5或者其他版本。

  方法和官方的google一样。不过百度应该更新了。也可以试试codemirror之类的框架,也是编译好模块然后编译的。我知道的思路是:把存在mongodb里的数据先命名为key,key+关键字,基本上这个key+关键字的首字母就是数据了,所以可以命名为key+all,这样就可以实现xsecret的功能。但是我没试过这个方法,感觉有点繁琐,只要有关键字就可以解析了,但是还是麻烦。我就知道这些。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线