淘宝聚划算商品采集
2018-01-08 17:15:20 阅读量: 11417
本文介绍如何使用八爪鱼采集聚划算商品信息的方法。
采集网站:
https://ju.taobao.com/search.htm?words=%C5%A3%C4%CC
本文仅以聚划算牛奶商品搜索结果页面举例说明,大家如果有其他采集聚划算商品的需求,可以更换搜索关键词进行采集。
采集的内容包括:商品价格,商品标题,商品描述。
使用功能点:
l 分页列表信息采集
l 切换UA
l AJAX点击
步骤1:创建聚划算商品采集任务
1)进入主界面,选择“自定义采集”
聚划算商品信息采集步骤1
2)将要采集聚划算商品列表的网站网址复制粘贴到输入框中,点击“保存网址”
聚划算商品信息采集步骤2
网址保存后,页面会在八爪鱼采集器中打开。
步骤2:创建循环翻页
1)鼠标选中“下一页”,在弹出的提示框中选择“循环点击下一页”。
聚划算商品信息采集步骤3
2)然后鼠标选中第一个聚划算商品的价格,系统会自动识别出相似的元素,在提示框中选择“选中全部”。
聚划算商品信息采集步骤4
接着选择“采集以下元素文本”。
聚划算商品信息采集步骤5
步骤3: 聚划算商品信息采集
1)移动鼠标,选中第一个商品链接,系统会自动识别出相似的元素,在提示框中选择“选中全部”
聚划算商品信息采集步骤6
接着选择“循环点击每个元素”
聚划算商品信息采集步骤7
2)进入聚划算商品详情页面以后,选择商品名称,然后鼠标选择提示框中“采集该元素文本”
聚划算商品信息采集步骤8
同样,可以选中评价数目,然后选择“采集该元素文本”
聚划算商品信息采集步骤9
3)因为网页涉及Ajax技术。鼠标选中流程中的“点击元素”打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒”。完成后,点击“确定”
聚划算商品信息采集步骤10
4)点开右上角的流程按钮,可在数据信息自定义字段,然后点击确定,
聚划算商品信息采集步骤11
5)然后再选择‘’启动本地采集”
聚划算商品信息采集步骤12
步骤5:数据采集及导出
1)采集完成后,会跳出提示,选择“导出数据”选择“合适的导出方式”,将采集好的数据导出这里我们选择excel作为导出为格式,一份完好的聚划算商品信息就导入出来了,数据导出后如下图
聚划算商品信息采集步骤13