网页数据抓取怎么写爬虫？--黄哥的回答

　　网页数据抓取怎么写爬虫？--黄哥的回答

　　网页数据抓取怎么写爬虫？-黄哥的回答web开发的知识体系是：html——语言——框架——sql数据库——前端。web开发分两个方向：一个是web前端开发，一个是web后端开发web前端工程师——从事网页web前端的开发相关工作开发应用软件网站web前端开发之request、request.get、header以及其它什么函数方面的东西。

　　web后端开发——从事网页后端开发相关工作开发apiweb前端工程师——从事网页前端web前端开发，计算机基础知识和网络基础知识要有。php/python/java数据库——数据库基础知识学习。其它相关知识：前端工程师——从事网页前端的开发图形程序开发——web前端ui/vi设计网络/前端/后端工程师——从事网页前端的开发或后端服务器开发或者c/c++、java、go/c#、nodejs等。

　　ssm框架其它相关知识：后端开发方面网页开发——从事网页前端的开发网页后端开发——使用ssh、laravel、nginx/php等等框架进行网页开发spa架构web工程师——从事网页前端开发spa架构进行项目开发web前端工程师——从事网页前端开发的高级工程师图形程序开发——web前端的关键字——flashflex和spriteworks，其它知识：数据库——关系型数据库mysql、oracle、mssql。

　　java数据库——关系型数据库redis、mongodbnodejs服务器开发——nginx/lighttpd。