设计思路

描述本功能的设计思想来源和功能期许

  • 对数据库的原始数据进行数据清洗和格式规范化,便于后续统计分析

    功能模块

    描述本功能所涉及的各项子功能

数据清洗流程 - 图1

流程图

梳理功能的基本实现流程

数据清洗流程 - 图2

功能说明

介绍本功能的各项子功能的设计原理

子功能 说明
时间日期格式化 预留功能,为了兼容不同日期时间格式的源数据
本地云端数据归并 将新上传和系统原有数据合并
去除重复数据 去除数据记录中的重复项
去除公交数据 去除数据记录中的巴士乘车数据
去除缺失数据 去除数据记录中站名缺失和车辆名缺失的记录
去除工作人员数据 预留功能,根据工作人员信息表进行剔除
站点名称修正 针对源数据站名不规范的情况进行更正

注意事项

介绍本功能的使用过程的注意事项和操作提示

  • 单次处理数据量过大,导致处理时间过长可能使页面超时
  • 每次的处理过程,可以通过数据预览弹窗检验清洗效果,如果数据量大弹窗可能需要一定时间

    功能状态

    告知本功能的实现状态

运行环境 运行状态 原因
开发环境 正常
测试环境 正常