基金数据采集
2018-01-11 14:46:55 阅读量: 20494
本文介绍使用八爪鱼采集基金数据(以金融界为例)的方法。
采集网站:
http://fund.jrj.com.cn/netvalue/currency.shtml
采集的内容包括:基金代码,基金简称,每万份基金净收益,7日年华收益率,成立日期,基金经理。
使用功能点:
l Ajax点击
l 分页表格信息采集
步骤1:创建金融界基金数据采集任务
1)进入主界面,选择“自定义采集”
2)将要上述采集的网址URL复制粘贴到网站输入框中,点击“保存网址”
步骤2:创建文本循环
1)鼠标滑动到页底,然后选中“下一页”,提示框中选择“循环点击下一页”
2)由于页面使用了ajax加载技术,需要对点击元素及翻页步骤设置ajax延时加载(ajax判断方法:打开流程图,找到翻页循环框,手动执行翻页,看网站有没有进行加载)在右侧的高级选项框中,勾选Ajax加载数据,选择合适的超时时间,一般设置3秒;最后点击确定。
步骤3:分页表格信息采集
l 选中需要采集的字段信息,创建采集列表
l 编辑采集字段名称
移动鼠标选中表格里任意一个空格信息,右键点击,如图所示,框中数据会被选中,变成绿色,点击右侧提示中点击“TR”
选中数据当前一行的数据会被全部选中,点击“选中子元素”
右侧操作提示框中,查看提取的字段,可将不需要字段删除,点击“选中全部”
点击“采集以下数据”
注意: 在提示框中的字段上会出现一个“X”标识,点击即可删除该字段。
修改采集任务名、字段名,并点击下方提示中的“保存并开始采集”
根据采集的情况选择合适的采集方式,这里选择“启动本地采集”
步骤4:基金数据采集及导出
采集完成后,会跳出提示,选择导出数据,选择合适的导出方式,将采集好的数据导出,这里我们选择excel作为导出为格式,一份完好的金融界基金数据就导出好了。数据导出后如下图