无需规则自动采集(【每日一题】无需规则自动采集（二）)

　　无需规则自动采集(【每日一题】无需规则自动采集（二）)

　　无需规则自动采集多数据来源于日常生活，突破传统老旧的采集思维模式，结合cv技术让文本生成视频。多数据来源于生活中经常遇到的多种生活场景（譬如外卖小哥不断告诉你一些门店或小区有大蛋糕，你自然就会知道其实他是卖大蛋糕的），在我们的理解中，看一个图片不能看作一个单独的数据集，应该包含多个采集点，这多个采集点是指同一个地址的蛋糕，而如果有多个蛋糕你要把所有的数据打包下载下来可能会比较困难，所以只要给定一个采集点，就可以让外卖小哥在这个采集点采集蛋糕的采集结果，然后做处理合并。

　　采集策略：需要对文件进行简单的加密处理，随后在采集点进行简单的过滤操作，因为采集是针对同一个蛋糕做采集而不是整个文件。自动解析：我们可以自己手动来设置解析规则，让你的计算机自动解析。而一般你设置的解析规则可能会比较粗暴，比如将网址直接切割为几个词组，然后在这些词组前加上相应的md5算法。这样不仅提高了搜索速度还大大的降低了搜索误差。

　　使用配置：可以将解析规则加密存储在本地（没有可视化界面)或者做到网站部署，将自动解析权限分配在经过验证的计算机上，并且当你删除/修改了计算机上的解析规则时不影响解析结果。自动化水平：采集速度能做到秒级，并且能不断扩展到5秒以内的时间范围。毕竟是要作为主业来做。我们可以结合自定义样式实现加上自己喜欢的主题配色实现独立开发的效果图。