本文介绍使用八爪鱼采集1688-热门词-运动鞋的方法

采集网站:

https://recidaogou.1688.com/PaoBuXie.html?spm=a260k.635.201704051642.31.qqoMdZ&wordId=305

 

使用功能点:

    分页列表及详细信息提取

    Ajax点击和翻页

 

阿里巴巴:阿里巴巴以批发和采购业务为核心,通过专业化运营,完善客户体验,全面优化企业电子商务的业务模式。目前1688已覆盖原材料、工业品、服装服饰、家居百货、小商品等16个行业大类,提供从原料采购--生产加工--现货批发等一系列的供应服务。


阿里巴巴商品采集数据说明:本文进行了阿里巴巴-热门词-运动鞋页面的商品信息采集,并点击并进入每条商品的详情页,采集详情页的信息。本文仅以“阿里巴巴-热门词-运动鞋页面的商品信息采集”为例。大家在实操过程中,可根据自身需求,更换阿里巴巴的其他内容进行数据采集。

 

阿里巴巴商品采集字段详细说明:商品标题、商品价格、商品起批量、商品价格、商家名称、成交次数,评价数量,经营模式。

 

步骤1:创建采集任务

1)进入主界面,选择“自定义模式”

1

 

2)要采集的网址制粘贴到网站输入框中,点击“保存网址

2

 

步骤2:创建翻页循环

1)打开“流程”,以更清楚地看到每一步操作。将页面下拉到底部,点击“下一页”按钮,在右侧操作提示框中,选择循环点击下一页

3

由于此网页涉及Ajax技术,我们需要进行一些高级选项的设置。选中“点击元素”步骤,打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒”

4

注:AJAX即延时加载、异步更新的一种脚本技术,通过在后台与服务器进行少量数据交换,可以在不重新加载整个网页的情况下,对网页的某部分进行更新。

表现特征:a、点击网页中某个选项时,大部分网站的网址不会改变;b、网页不是完全加载,只是局部进行了数据加载,有所变化。

验证方式:点击操作后,在浏览器中,网址输入栏不会出现加载中的状态或者转圈状态。

 

步骤3:创列表循环

1)移动鼠标选中页面里的第一条搜索结果的链接。系统会自动识别此页面中的同类链接,点击“选中全部”

5

 

2)选择“循环点击每个链接”,以创建一个列表循环

6

 

步骤4:提取商品信息

1)在创建列表循环后,系统会自动点击第一条商品信息的链接,进入商品详情页。点击需要的字段信息,在右侧的操作提示框中,选择“采集该元素的文本”

7

 

2)继续点击要采集的字段,选择“采集该元素的文本”采集的字段会自动添加到上方的数据编辑框中选中相应的字段,可以进行字段的自定义命名自定义命名完成后,点击“保存并开始采集”

8

 

3)选择“启动本地采集

9

 

 

步骤5:数据采集及导出

1)采集完成后,会跳出提示,选择导出数据”。选择合适的导出方式,将采集好的数据导出

10

 

2)这里我们选择excel作为导出为格式,数据导出后如下图

11