解决方案:航天知识服务平台
优采云 发布时间: 2020-09-01 18:01航空知识服务平台
平台介绍
KSpider网络信息资源采集系统是一个网络信息资源集成系统,它集成了网络数据采集,分析,存储,管理和检索. 能够根据用户设置的站点定向采集数据,在网络上采集各种形式的文档,例如图片,word文档,ppt,pdf等,并根据采集返回信息用户设置的分类规则进行一定的智能分类处理,可以根据关键字规则进行分类,也可以基于样本模型进行智能分类,也可以根据采集源站点或频道目录进行分类(即根据(针对网站的URL特征)分类),用户可以通过分类导航进行搜索,系统采用门户,数据库,搜索引擎等发布形式,可以更有效地挖掘出用户所需的信息.
产品功能
高级智能代理: 集成了多种智能信息处理算法,并且可以基于高级语义规则技术执行浅层语义分析
强大的信息采集能力: 高效的信息采集技术完成了网络数据获取,可以快速,全面而准确地从Internet获取数据
灵活的体系结构: 采集蜘蛛集群,智能代理集群,应用服务器智能调度,每个子系统可以随时断开并连接到系统,而不会影响整个系统的运行
基于KBase的海量数据存储和全文检索: 支持海量非结构化数据的存储管理,具有成熟的全文检索技术,检索速度达到500G / S,处于行业领先地位