安装注册
模板采集
自定义入门
循环
ajax与新标签
登录验证
XPath
特殊翻页
提取数据
数据导出
云采集
其他功能点
云采集实况与历史运行记录
2022-01-27 4276
功能简介
任务正在运行云采集的时候,可以查看当前运行详情;任务运行了多次云采集的时候,可以查看历史运行记录。
使用版本限制
云采集(团队版及以上版本)可使用此功能,旧套餐旗舰版及以上版本可使用。
一、查看云采集详情
在任务列表,点击任务云采集的【详情】,进入该任务当前的(任务正在运行)或者最近一次的(任务运行完成)云采集详情页面,查看任务概览、子任务、运行任务日志和运行子任务。
1、任务概览
任务云采集情况总括:任务状态(运行中、已停止、已完成)、采集进度(进度条)、开始时间、结束时间、耗时、采集数据量、消耗代理IP、消耗验证码、云节点占有量等。
2、子任务
子任务的当前情况。
3、运行任务日志
运行任务日志,记录任务运行云采集的详细过程,实时掌握运行情况:任务已启动、开始拆分任务、子任务创建完成、任务拆分完成、子任务[#1]等待执行、子任务[#1]开始执行、子任务[#1]已停止、子任务[#1]已完成等。
任务的云采集运行流程如下:
4、子任务信息
展示子任务运行的详细情况:子任务序号、开始时间、结束时间、耗时、状态、总采集数据量(包括每次重启后采集的数据量累加)、当前采集数据量(重启后那一次采集到的数据量)。
① 序号与运行任务日志里面的子任务序号一一对应。
② 可根据子任务状态进行筛选,支持多选。
③ 展示子任务状态
已拆分:当前任务拆分成了多少个子任务。为1时,表示该任务未进行拆分(任务本身不支持拆分或勾选了云采集不拆分)。大于1时,表示已进行拆分。图中任务拆分成了100个子任务。
等待中:还未运行采集的子任务个数。
运行中:当前正在采集数据的子任务个数。每个任务会占用一个云节点,故所有任务在运行的子任务数之和小于等于账号节点数。
已完成:已完成采集的子任务个数。
已停止:程序自动停止采集或人为手动停止采集的子任务个数。
注:
a. 支持对子任务进行停止、重启操作。子任务是【已完成】或【已停止】状态时,可点击【重启】让其重新进行采集。子任务重启后,主任务如果是【已完成】或【已停止】,也会变成【运行中】。
b. 如果想要重启正在运行的子任务,需先点击【停止】,让子任务变成【已停止】状态,再重启子任务。
二、云采集历史
在任务列表,点击任务右侧更多操作的【...】,点击【云采集】,再点击【查看云采集历史】,进入云采集历史运行记录页面。
1、云采集历史界面
云采集历史页面,记录任务运行云采集的历史次数,包括每次的批次、运行状态、开始时间、结束时间、耗时、本次采集量、操作等信息。
不同的版本可记录的最多次数不一样。可 点我马上升级 ,升级到更高版本。
2、查看采集数据
在云采集历史界面,点击【查看采集数据】,可查看每一次云采集采集到的数据,并能够导出当次所有数据。