网站自动采集发布系统(超多县城并发,真实多线程7、强大的过滤、分类功能)

优采云 发布时间: 2021-12-18 21:13

  网站自动采集发布系统(超多县城并发,真实多线程7、强大的过滤、分类功能)

  6、超级多县并发,真正的多线程

  7、强大的过滤分类功能

  8、支持图片、音乐等所有二进制文件

  主要功能

  1、强大的信息采集 功能

  采集几乎任何类型的网站信息,包括静态htm、html类型和动态ASP、ASPX、JSP等,都可以关联N级页面采集并自动集成到一个完整的记录。

  2、 支持网页框架、链接和网页加密,支持完全采集和增量采集(断点续传),可以自动下载二进制文件,如图片、软件、mp3等。 ,可以采集本地磁盘信息,支持Post数据请求采集方法。

  3、网站登录

  需要登录才能看到的信息,先在任务的登录设置中登录,然后可以采集登录查看信息。

  4、速度快,运行稳定

  真正的多线程、多任务,运行时占用系统资源极少,可以稳定运行很长时间(明显区别于其他软件)。

  5、 丰富的数据存储格式

  采集的数据可以保存为Txt、Excel和多种数据库格式(Access sqlserver Oracle Mysql等)。

  6、支持脚本

  可以设置脚本类型任务,类似于javascript,提交格式也可以很方便采集。

  7、强大的新闻采集,自动处理功能

  可自动保留新闻格式,包括图片等(可通过设置自动去除广告),可通过设置自动下载图片,可自动将文中图片的网络路径更改为本地文件路径(你也可以保留原来的);可以将采集新闻自动处理成自己设计的模板格式;采集 分页格式的新闻可用。有了这些功能,无需人工干预,只需简单的设置就可以在本地建立一个强大的新闻系统。

  8、强大的自动信息再处理功能

  采集的信息可以分两批重新处理,使其更符合您的实际需求。还可以设置自动处理公式。在采集的过程中,根据公式自动处理,包括数据合并、数据替换等。

  9、 提供从采集,到自动处理,到数据导出(发布)的一站式自动化功能

  通过任务调度、实时监控和发布实现。指定某些任务自动运行,在采集的数据自动移除后将数据导入数据库(可指定唯一组合)。它可以循环运行。您可以指定在某个时间点运行的任务。可以设置采集,达到一定数据量后,会自动存入库,内存会自动清空。该功能可以连续采集10万级和百万级数据不占用系统资源,做到无人值守采集。

  更新日志

  网络信息采集大师8.6个新功能

  1、增加网络抓包功能

  2、增强的脚本类型任务功能

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线