excel抓取网页动态数据(腾讯员工一样:为什么会变成这个样子阿!(上))

优采云 发布时间: 2022-02-27 07:16

  excel抓取网页动态数据(腾讯员工一样:为什么会变成这个样子阿!(上))

  友情提示:文末有福利和精彩视频~

  你最近最关心什么?一定是疫情,不能出门真的很不舒服,不是吗?

  我的心和腾讯员工一样:

  

  为什么会变成这样!不吃野味会死吗?(这里没有省略数字......)

  但是生活还要继续,我们能做的就是不要添乱,保护好自己。

  为了让大家更好地了解疫情,我用数据可视化来分析国内的疫情。

  根据国家卫健委公布的数据,我们可以看到,重灾区依然是整个湖北省,浙江、广东也因为人流量大而成为重点地区。

  

  一、数据从何而来?

  网站 的数据会定期更新。可能上午看到的数据下午会更新,差别很大。但是通过Excel汇总数据时,效率不高,很难做到完全同步。

  

  因此,我正在考虑使用 Python 来捕获包并将其封装成 .exe 文件。点击自动下载数据,并以csv格式进行结构化存储,方便大家使用。

  

  该工具每次运行都会抓取并更新《腾讯新闻》疫情实时直播的数据网站,并存储在你电脑的D盘(C盘往往需要更高的读写权限) .

  下载的csv文件格式如下:

  

  

  事实上,这些数据对于企业、个人,对于我们了解疫情的变化和发展趋势都是非常有用的。而且我看到网上有很多人会从不同维度分析问题,作为基础数据也会有所帮助。

  二、什么分析?

  如前所述,使用Excel等工具进行数据分析的最大缺点是数据无法同步,需要手动录入,熟悉数据行业的人应该都知道Excel遇到大数据会卡顿。

  其实分析工具更多的价值在于在分析过程中辅助数据的处理,可以直观的展示结论,最终解决问题。如果能避免在函数方面写公式和代码,而且易于使用和使用,那就更好了。

  Python 和 Matplotlib 都可以进行可视化分析,但是需要一定的代码库,而且大部分不会编程的人还是占了大多数。所以我想到了BI,或者商业智能。

  这里我用的是FineBI,一个企业级的数据分析工具,可视化和前端分析操作比较丰富,可以直观的进行数据钻取、数据切片、数据轮换等多维分析操作;同时内置ETL,实时数据分析,同时可以快速处理大数据,业务人员再也不用等待IT分析数据了!

  FineBI 完成的数据可视化:

  

  

  在这里,帆软还特别推出了疫情追踪APP版,让企业及时了解每一位员工的身体变化:

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线