- 问题描述
在给客户做RPA实施的过程中,遇到这样一个问题:客户需要在电商平台导出数据因为导出数据需要手机验证码,并且每次只能导出1000条,面对每月几万条数据,手动导出的工作量无疑是很大的,所以需要使用RPA逐页对数据抓取,但是RPA抓取数据时间长了,电商平台会不定时进行限制,等过段时间再登录,才能继续抓取数据.
- 解决方案
对流程代码做如下修改:
当数据抓取因为受限抓取不了的时候,记录下当前已抓取的页数,设置一个判断是否抓取受限的标志位为True;判断当标志位为True时,关闭平台,等待一段时间,继续登录,从记录的页数继续往下抓取数据,直到抓取完,再进行其他的操作.
