微店商品采集
2018-01-12 10:00:32 阅读量: 18045
本文介绍如何使用八爪鱼采集微店商品信息的方法。
采集网站:
https://weidian.com/?userid=338785556
采集内容包括:商品标题,商品价格
使用功能点:
l 分页列表信息采集
l 切换UA
l AJAX点击
步骤1:创建微店商品采集任务
1)进入主界面,选择“自定义采集”
2)将要采集的网站网址复制粘贴到输入框中,点击“保存网址”
网址保存后,页面会在八爪鱼采集器中打开。
步骤2:UA切换
1)根据情况如网页打开受限,可以切换UA,首先鼠标选中左上的“保存”按钮,然后选中“设置”。
2)打开设置界面以后,在采集设置中切换到火狐手机版,然后保存设置。
步骤3:创建列表循环
1)网页打开后,鼠标选中前三个商品链接,系统会自动识别出其他相似的元素,然后在右面的提示框中选择“循环点击每个元素”
步骤4: 微店商品信息采集
1)移动鼠标,选中商品定金,根据右面的提示框选择“采集该元素文本”
相同的方法,在右面的提示框中选择“采集数据”可以采集微店商品的详情
此步骤涉及Ajax技术。打开“高级选项”,勾选“Ajax加载数据”,设置时间为“5秒”。完成后,点击“确定”
点开右上角的流程按钮,可在数据信息自定义字段,然后点击确定
选择“保存”和“开始采集”
然后再选择‘’启动本地采集”
步骤5:微店商品数据采集及导出
1)采集完成后,会跳出提示,选择“导出数据”选择“合适的导出方式”,将采集好的数据导出这里我们选择excel作为导出为格式,数据导出后如下图