链家租房信息采集
2017-08-15 15:41:06 阅读量: 61676
本文介绍使用八爪鱼7.0采集链家房源数据的方法(以深圳出租房为例)
采集网站:
https://sz.lianjia.com/zufang/
使用功能点:
l 分页列表页信息采集
链家网:链家是一家集房产交易服务、资产管理服务为一体以数据驱动的价值链房产服务平台,业务覆盖二手房交易、新房交易、租赁、装修服务等。链家目前已覆盖北京、上海、广州、深圳、天津、成都、青岛、重庆、大连、合肥等28个地区,全国门店数量约8000家,旗下经纪人超过13万名。为不断提高购房服务体验,链家积极布局线上平台。
链家租房信息采集数据说明:本文进行了链家网-租房信息的采集。本文仅以“链家网-租房信息采集”为例,大家在实操过程中,可根据自身需求,更换链家网的其他内容进行数据采集。
链接网采集字段详细说明:房源信息标题,房源小区信息,房屋面积,房屋户型,房屋朝向,房屋楼层,房屋事件年份,房屋特性。
步骤1:创建采集任务
进入主界面选择,选择自定义模式
将上面网址的网址复制粘贴到网站输入框中,点击“保存网址”
保存网址后,页面将在八爪鱼采集器中打开,红色方框中的列表内容,就是本次演示要采集的数据
步骤2:创建翻页循环
l 找到翻页按钮,设置翻页循环
将页面下拉到底部,找到下一页按钮,鼠标点击,在右侧操作提示框中,
选择“循环点击下一页”
步骤3:房源信息采集
l 选中需要采集的字段信息,创建采集列表
l 编辑采集字段名称
如图,移动鼠标选中列表中标题的名称,右键点击,需采集的内容会变成绿色
注意:点击右上角的“流程”按钮,即可展现出可视化流程图。
移动鼠标选中红色方框里任意文本字段后,列表中所有适配内容会变成绿色,在右侧操作提示框中,查看提取的字段,可以将不需要的字段删除,然后点击“选中全部”
注意: 鼠标放在该字段上会出现一个删除标识,点击即可删除该字段。
点击“采集以下数据”
修改采集字段名称,点击下方红色方框中的“保存并开始采集”
根据采集的情况选择合适的采集方式,这里选择“启动本地采集”
说明:本地采集占用当前电脑资源进行采集,如果存在采集时间要求或当前电脑无法长时间进行采集可以使用云采集功能,云采集在网络中进行采集,无需当前电脑支持,电脑可以关机,可以设置多个云节点分摊任务,10个节点相当于10台电脑分配任务帮你采集,采集时间降低为原来的十分之一;采集到的数据可以在云上保存三个月,可以随时进行导出操作。
步骤4:数据采集及导出
采集完成后,会跳出提示,选择导出数据
选择合适的导出方式,将采集好的数据导出