有些网站可能我们用系统做好的规则在采集的时候可能明明已经采集最后一页了,就是不停止,一直在最后一页循环采集,这种情况其实是由于Xpath定位不对导致的,我们需要通过修改Xpath来解决这个翻页问题。


在出现这个问题的时候,我们可以直接在流程里面找到问题所在,下面的规则是直接按照新手入门的步骤做的:


一 


如上图中,浏览器中要采集的数据已经在最后一页了,可是我们在循环列表中依旧能找到下一页的按钮,代表一直都可以点击这个按钮进行采集,循环是结束不了的。那么我们点开循环列表的高级设置按钮,可以看下一页的Xpath如下图所示:

二


我们把这个Xpath复制到火狐里面去,发现在第一页是的确可以定位到下一页的,并且可以看到这个Xpath在火狐里面每一页都能定位。那么我们看一下第一页和第二页里面源码的区别:


三

      

可以看到第一页和第三页下一页的class属性是不一样的,我们只需要前面几页的下一页能正确定位,但是最后一页是不需要的,这样可以直接用class来区别,手动在火狐里面直接写,只需要将li里面的属性改为li[@class='next'],然后将.//*[@id='gkaTable_page']/table/tbody/tr/td/div/ul/li[@class='next']这条Xpath再复制到八爪鱼里面。


五 

配置完成之后单机采集可以看到规则能正常完成。


六