php网页抓取图片(php网页抓取图片操作步骤-php代码实现post/get函数)

　　php网页抓取图片(php网页抓取图片操作步骤-php代码实现post/get函数)

　　php网页抓取图片操作步骤如下：php代码实现request请求。注意分清enctype和mime。然后将参数mime转换成post方式的格式，如json或者xml。php代码实现下载文件。把下载到的文件序列化为对象序列化。然后将对象序列化之后数据一同提交到php服务器。php代码实现爬虫。把提交到php服务器的数据推送给真正的爬虫。php代码实现encode/decode()函数。php代码实现post/get()函数。

　　我用了一个开源爬虫框架，不到1小时抓了6万+张图片。当然我抓包工具很烂，人家抓包能抓个0.5+的图片但我抓的是yp04版本的各种类型，用nodejs写的全是图片，没有jpg，png格式，所以我抓到的数据集不全是需要提取并转化的图片数据。数据集太大，导致我并没有计算机基础，啥都不懂，看他爬虫框架的样子很糙，是没人用的套路，全是一些数据库结构数据处理的东西，然后php那边对数据库结构和样式也不熟悉，导致编程全靠运气。

　　当时我在想如果要是自己写个爬虫框架，一定比他好很多，结果我写了半天，一个数据库查询语句都没有写完，好像很久也没有写完，毕竟速度上我抓1万+张图片不到一小时而已。这尼玛要是让计算机一小时爬1万+张图片，至少对计算机基础要求很高，我就去学了个一年级计算机课程，恶补了一小时，所以我不了解你的编程基础是什么，只能说你先解决抓100w张图片的问题，你可以学学nodejs的基础，或者java的javaweb那些。