采集案例一:采集京东商品列表页数据

优采云 发布时间: 2020-08-27 07:20

  采集案例一:采集京东商品列表页数据

  一、结果预览

  通过下边的操作文档,你将可以得到某个商品评价的excel文档,如下图:

  

  二、工具

  1、优采云采集工具

  

  官网下载、安装、注册及登陆后,就能直接使用,操作过程非常简单,故略过程!

  三、采集总体步骤

  1、使用优采云软件爬取商品信息,将采集的信息保存为Excel文档

  ☆这是本文主要内容

  2、根据优采云采集到的商品图片链接URL,批量下载商品主图

  ☆优采云不能直接爬取图片,只能爬取图片链接URL,将在其他文章中介绍批量下载图片的形式

  四、制定采集目标

  Step 1:在易迅搜索框输入你想要搜索的商品关键词,比如我选的是“儿童电动牙刷”。

  

  Step 2:查看易迅商品列表页中商品信息的组成部份,并明晰每一部分的属性。如下图,商品价钱、商品名称、评价条数及店面名称等信息是以文本的方式呈现的,可以直接用采集器采集;而商品图片是以图片的方式呈现的,采集器只能采集到相应的链接(URL),需再用其他软件批量下载图片。

  ☆注:可能你会好奇,为什么页面上没有显示商品SKU,但却可以采集到。原因是商品名称上是有一个商品链接的,商品链接收录了商品SKU信息。如:“4.html”(链接中宋体为商品sku)

  

  五、优采云模板采集

  Step 1:在易迅搜索框输入关键词,打开商品列表页,复制链接。

  

  Step2:在优采云中选择相应的模板,例这么处我选易迅的商品列表页数据采集模板。

  

  

  Step 3:了解模板基本信息,如模板介绍、采集字段预览、示例数据等,看看模板采集的数据是否符合要求。并点击“立即使用”。

  

  Step 4:设置采集参数,并点击“保存并启动”。此处只有一个配置参数,即列表页的网址,只须要将商品列表页的链接复制到配置参数框中。

  

  Step 5:选择运行模式,此处选择“启动本地采集”,其余两种都须要付费。完成这一步,采集器就开始采集信息了。

  

  Step 6:下图为采集框,当采集到自己想要的商品数量,就可以点击“停止采集”,并选择“导出数据”。

  

  

  Step 7:选择导入的文件格式,一般选Excel格式,然后采集就结束啦!

  

  

  六、查看Excel文件

  由右图可见,该手动辨识流程可以采集到商品名称、商品SKU、商品价钱、商品主图链接等。

  

  本文使用优采云的智能模板采集功能,采集京东列表页的商品信息。由于采集模板有一定的限制,你也可以参照案例三,使用流程手动辨识功能来采集。

  如果你也想直接在Excel中,批量将图片链接URL转换为图片(如结果预览所示),可以查看下方链接①的内容。

  链接①:如何通过链接URL批量下载图片

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线