产品目的

管理各个电商数据平台爬虫需求，保证爬虫账号的安全性，以及同步所有需求相关方当前爬虫状态。

产品功能

记录所有爬虫账号的访问量情况和风险等级，相关业务人员可以在系统中发起爬虫需求，由数据分析师和爬虫工程师分别对需求进行拆解及爬虫访问量评估。待数据完成填报后，由系统自动推送给个项目PM及PD钉钉，进行需求审批工作，当需求完成审批后，爬虫方会生效。

目前进展

  • 完成初始版本开发，已具备权限管理、爬虫账号管理和详情查看、需求发起与数据填报、钉钉审批流等功能。