1688热门商品采集
2017-08-25 15:05:58 阅读量： 17994
本文介绍使用八爪鱼采集1688-热门词-运动鞋的方法
采集网站：
https://recidaogou.1688.com/PaoBuXie.html?spm=a260k.635.201704051642.31.qqoMdZ&wordId=305
使用功能点：
分页列表及详细信息提取
Ajax点击和翻页
阿里巴巴：阿里巴巴以批发和采购业务为核心，通过专业化运营，完善客户体验，全面优化企业电子商务的业务模式。目前1688已覆盖原材料、工业品、服装服饰、家居百货、小商品等16个行业大类，提供从原料采购--生产加工--现货批发等一系列的供应服务。
阿里巴巴商品采集数据说明：本文进行了阿里巴巴-热门词-运动鞋页面的商品信息采集，并点击并进入每条商品的详情页，采集详情页的信息。本文仅以“阿里巴巴-热门词-运动鞋页面的商品信息采集”为例。大家在实操过程中，可根据自身需求，更换阿里巴巴的其他内容进行数据采集。
阿里巴巴商品采集字段详细说明：商品标题、商品价格、商品起批量、商品价格、商家名称、成交次数，评价数量，经营模式。
步骤1：创建采集任务
1）进入主界面，选择“自定义模式”
2）将要采集的网址复制粘贴到网站输入框中，点击“保存网址”
步骤2：创建翻页循环
1）打开“流程”，以更清楚地看到每一步操作。将页面下拉到底部，点击“下一页”按钮，在右侧的操作提示框中，选择“循环点击下一页”
由于此网页涉及Ajax技术，我们需要进行一些高级选项的设置。选中“点击元素”步骤，打开“高级选项”，勾选“Ajax加载数据”，设置时间为“2秒”
注：AJAX即延时加载、异步更新的一种脚本技术，通过在后台与服务器进行少量数据交换，可以在不重新加载整个网页的情况下，对网页的某部分进行更新。
表现特征：a、点击网页中某个选项时，大部分网站的网址不会改变；b、网页不是完全加载，只是局部进行了数据加载，有所变化。
验证方式：点击操作后，在浏览器中，网址输入栏不会出现加载中的状态或者转圈状态。
步骤3：创建列表循环
1）移动鼠标，选中页面里的第一条搜索结果的链接。系统会自动识别此页面中的同类链接，点击“选中全部”
2）选择“循环点击每个链接”，以创建一个列表循环
步骤4：提取商品信息
1）在创建列表循环后，系统会自动点击第一条商品信息的链接，进入商品详情页。点击需要的字段信息，在右侧的操作提示框中，选择“采集该元素的文本”
2）继续点击要采集的字段，选择“采集该元素的文本”。采集的字段会自动添加到上方的数据编辑框中。选中相应的字段，可以进行字段的自定义命名。自定义命名完成后，点击“保存并开始采集”
3）选择“启动本地采集”
步骤5：数据采集及导出
1）采集完成后，会跳出提示，选择“导出数据”。选择“合适的导出方式”，将采集好的数据导出
