c 抓取网页数据(c抓取网页数据也可以是爬虫嘛?这个前提你先学习好)

优采云 发布时间: 2022-01-01 14:02

  c 抓取网页数据(c抓取网页数据也可以是爬虫嘛?这个前提你先学习好)

  c抓取网页数据也可以是爬虫嘛?这个的前提你先学习好scrapyrequests这些基础的,然后可以看看flaskweb开发我之前看过,感觉网站比较多,都是以请求网页和数据库比较多的还有就是基础的数据库操作呀,增删改查,这些都要学会,推荐你一个公众号--初中数据分析,这个主要是基础的数据分析,还有关于python爬虫相关的东西。

  怎么说,你需要三个阶段,第一,python基础,第二,爬虫,第三,数据库方面你可以做一个简单的爬虫,比如他们要爬黄图了,你直接打开抓包把分析一下,就知道一个黄图的明文数据。然后爬取数据,如果是以python做为数据入口的话,可以尝试下qq助手,uc浏览器,360浏览器。没有把握的话可以先试试网易云音乐。腾讯视频,都可以获取视频内容内容。先学习web,后学爬虫。

  本地就先pythonseleniumweb开发requests第三方框架好多的,至于题主所说的爬虫本人不熟悉。如果是web,做个网站自然是离不开前端页面,需要前端页面,可以看网页开发基础中python3部分。

  基本的html,css,python,数据库,

  拿你例子开个玩笑。python爬虫不是重点,你能看懂我想说什么就行了。首先搞定python基础语法,然后你应该感到一点点紧张,这是为什么?没错,就是因为无时无刻想要扒掉web爬虫一切留给你的堆砌包袱。当然这时候也不是一切都不需要学,你已经知道我想说什么了,这是第一步。于是接下来只有两个字,少年你说对了,是python库。

  你能看懂的爬虫内容被用了那么多库封装好了,你还不知道从何看起???好的,回到正题,如果你要让我看下去,你可以先把网页爬取下来看下是怎么运作的。你还需要requests以及json,这两个库是爬虫部分的东西了。总之最重要的是你有无尽的时间搞定这些。python完整开发爬虫至少需要2年时间,4万小时以上的输入源。

  至于到底是选pythonscrapy还是pythonflask完全看你自己。本人目前也在接触爬虫这一块,看到题主也进入这一块,看到题主是转行,我就默认你是非常想要进入这一块的行列吧。

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线