解决方案:大数据可视化三种设计方案:mongodb、unity3d、python3d
优采云 发布时间: 2022-11-21 12:29解决方案:大数据可视化三种设计方案:mongodb、unity3d、python3d
工具采集文章的话,推荐用java爬虫或者python爬虫。如果你想把爬来的数据可视化的话,有大数据可视化三种设计方案:webgis、unity3d、python3d。大数据可视化分析将数据进行可视化是工具对数据进行处理的最主要目的,这个过程中就会涉及到数据的处理原理,比如对一个图形的处理可能涉及到各种基本的处理函数,比如点图像、面图像、面图像等等。
webgis是指在web上实现谷歌地图或百度地图上的数据可视化功能,python3d就是使用c#来实现python程序中与数据处理相关的程序。
" />
mongodb
java可以用zapier,python建议看看pysparkjavaspark的话,除了graphx可以用nlp数据挖掘算法,或者常见的gbk编码,
akkasparkmlib
" />
建议看看pyspark,资料多,社区大,
hadoop基本功
关于大数据,如果是深度学习数据分析等这类的,可以python,java,linux三者整合起来用。如果是用java,可以涉及到多进程服务器,hadoop,spark等,甚至可以用hadoop做网站服务器(计算型数据,几百g到几tb不等),当然这些计算型数据一般在小机器上跑,在主机上用个大机器跑就是了。
mongodb(国内相对收录慢些)java可以尝试embedding-mongodb或redis