网站内容采集系统(只抓公开的合法数据，对于隐私/个人信息的数据不提供服务！ )

　　网站内容采集系统(只抓公开的合法数据，对于隐私/个人信息的数据不提供服务！

)

　　只采集公开合法数据，不提供私人/*敏*感*词*服务！！

　　案例：网站建筑项目整合采集分析整合----房地产评估网站建筑项目

　　案例背景：客户需要通过采集5房网站的社区名称、单价、面积，对来自采集的数据进行分析，得到一个相对接近的市场。价格数据存储在数据库中，搭建系统平台（包括收费控制等功能）供客户使用。目的是构建一个集采集、分析、查询、输出于一体的评价体系。

　　案例特点：

　　1）Data采集 实时数据采集

　　2）群组权限管理系统

　　3）集成数据建模（使用R进行统计建模，准确率99%）

　　4）打印评估报告

　　案例——NLP项目

　　顾客：

　　需求分析：NLP系统（自然语言处理），作为系统的应用端，需要添加搜索、采集、下载、上传、用户界面和分析界面、支付系统

　　案例——项目销售管理系统

　　1、三级权限管理系统中不同角色的内容管理不同

　　2、文件和流程管理，管理和审批不同的文件

　　3、商品及品类管理

　　案例：我们自己的大数据采集平台（）

　　1.易建抓取各大平台数据

　　2.灵活的数据发布方式

　　3.强大的实时爬取

　　4.团队跟踪新平台

　　案例：爱江法律搜索

　　项目背景：用户需要一个合法的搜索引擎，使用采集技术为客户提供实时的在线法律法规进行搜索

　　项目特点：

　　1）实时多网站采集抓取，使用scrapy技术

　　2）毫秒级数据库存储和检索技术，使用elasticsearch数据库及相关技术

　　3） 灵活复杂的过滤和排序

　　Case-Pure Big Data 采集 Project 5T Text Project