一种平台数据清理方法技术领域
本发明属于电池技术领域,特别是一种智能照明供电电源。
背景技术
目前,在企业平台数据管理领域,对信息数据的导入和统计主要是靠简单的人工
管理来进行的,这在作业事件的响应速度上远远达不到管理的要求,加之环卫业务管理点
多,实时采集要求高,工作量大,统计的准确性要求高,而人工管理的方式根本达不到实时
采集和快速响应的要求。
发明内容
为解决上述技术问题,本发明提供了一种平台数据清理方法,用户输入账户名与
密码,进入到数据导入界面,其继续执行以下步骤:
S1:数据导入:
S11:数据所述组织分配:根据登录人员的所属组织分配数据,本平台数据分为集
团公司与分公司及其他公司二级机构,集团公司登陆系统具有管理所有数据的权限,分公
司及其他公司二级机构具有操作自己相关数据的权限;
S12:获取数据模板:
上级下发的指标,可以通过编码或者指标名称模块查询,快速定位,若为纯手工指
标,则可以下载空模板,通过后面的空模板按钮,再输入相应的指标项名称后下载模板,进
行数据填写,若是手工与系统的指标,则可以下载系统原始数据模板表,并手工必填项目;
S13:导入:用户填写好指标项表后,浏览选择自己填好的指标项表,选择完成后进
行导入,在选择好指标项后导入数据前,要将数据逻辑删除,以区分上次数据;如果数据填
写错误会提示导入出错的数据条数,通过步骤S3查看错误数据;
S2:查看导入失败数据:
查看步骤S1中出错的数据,在进行修改后重新进行导入;
S3:抽取层数据验证:
在抽取层对数据进行初步校验,具体数据包括主键重复、长度、数字类型、日期类
型、数据字典值、单表金额验证,验证结束会提示成功与否,若验证则提示失败条数,并将错
误数据通过步骤S4进行导出;
S4:抽取层不规范数据导出:
导出步骤S3的错误数据,修改后重复上述各步骤;
S5:数据同步到中间层:
将数据同步到中间层数据库,根据预设定的规则进行验证;
S6:中间层数据验证:
根据预设定的规则进行验证,包括新老转化是否完成操作的验证,在验证结束会
提示成功与否,如验证失败则提示失败条数,错误数据可以通过步骤S7进行导出;
S7:中间不规范数据导出:
导出步骤S6中的错误数据,修改后重复上面各步骤;
S8:中间层数据导出:
如果验证都通过了,检查系统数据与导入数据是否一致。
较佳地,步骤S8之后还包括以下步骤:
S9:数据导出:
根据组织单位、集团下发指标导出中间层验证错误及集团数据平台验证错误数
据。
较佳地,步骤S9之后还包括以下步骤:
S10:数据质量管控:
向用户显示指标项的处理日志记录,两个层次验证的通过情况以及上报给集团数
据平台的时间,实现数据的实时监控。
较佳地,步骤S10之后还包括以下步骤:
S11:上报集团操作:
当省端清理平台验证都通过时,将数据上报给集团数据平台进行更深层次的验
证;选择相应指标项后,点击上报按钮,无论上报是否成功都会进行提示;当集团数据平台
处理完成后,可以选择相应指标,点击同步检验结果按钮,实现集团数据平台错误数据的取
回并导出,供各个地市分公司、二级机构、第三方开发商相关人员进行处理。
较佳地,还包括步骤:
S12:集团模板改动后的导入:
当集团模板改动时,可以通过这一步将新的集团模板导入到后端数据库中,实现
模板快速简洁的修改。
本发明具有以下有益效果:
本发明提供的平台数据清理方法为集团公司与分公司及其他省公司二级机构提
供了有效的数据管理方法,能够及时有效的检测错误数据并做出提示,保证了对数据的有
效监控。
当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
具体实施方式
下面将结合本发明实施例对本发明中的技术方案进行清楚、完整地描述,显然,所
描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,
本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发
明保护的范围。
本发明实施例提供了一种平台数据清理方法,用户输入账户名与密码,进入到数
据导入界面,其继续执行以下步骤:
S1:数据导入:
S11:数据所述组织分配:根据登录人员的所属组织分配数据,本平台数据分为集
团公司与分公司及其公司二级机构,集团公司登陆系统具有管理所有数据的权限,分公司
及其他公司二级机构具有操作自己相关数据的权限;
S12:获取数据模板:
上级下发的指标,可以通过编码或者指标名称模块查询,快速定位,若为纯手工指
标,则可以下载空模板,通过后面的空模板按钮,再输入相应的指标项名称后下载模板,进
行数据填写,若是手工与系统的指标,则可以下载系统原始数据模板表,并手工必填项目;
S13:导入:用户填写好指标项表后,浏览选择自己填好的指标项表,选择完成后进
行导入,在选择好指标项后导入数据前,要将数据逻辑删除,以区分上次数据;如果数据填
写错误会提示导入出错的数据条数,通过步骤S3查看错误数据;
S2:查看导入失败数据:
查看步骤S1中出错的数据,在进行修改后重新进行导入;
S3:抽取层数据验证:
在抽取层对数据进行初步校验,具体数据包括主键重复、长度、数字类型、日期类
型、数据字典值、单表金额验证,验证结束会提示成功与否,若验证则提示失败条数,并将错
误数据通过步骤S4进行导出;
S4:抽取层不规范数据导出:
导出步骤S3的错误数据,修改后重复上述各步骤;
S5:数据同步到中间层:
将数据同步到中间层数据库,根据预设定的规则进行验证;
S6:中间层数据验证:
根据预设定的规则进行验证,包括新老转化是否完成操作的验证,在验证结束会
提示成功与否,如验证失败则提示失败条数,错误数据可以通过步骤S7进行导出;
S7:中间不规范数据导出:
导出步骤S6中的错误数据,修改后重复上面各步骤;
S8:中间层数据导出:
如果验证都通过了,检查系统数据与导入数据是否一致。
本实施例中步骤S8之后还包括以下步骤:
S9:数据导出:
根据组织单位、集团下发指标导出中间层验证错误及集团数据平台验证错误数
据。
步骤S9之后还包括以下步骤:
S10:数据质量管控:
向用户显示指标项的处理日志记录,两个层次验证的通过情况以及上报给集团数
据平台的时间,实现数据的实时监控。
步骤S10之后还包括以下步骤:
S11:上报集团操作:
当省端清理平台验证都通过时,将数据上报给集团数据平台进行更深层次的验
证;选择相应指标项后,点击上报按钮,无论上报是否成功都会进行提示;当集团数据平台
处理完成后,可以选择相应指标,点击同步检验结果按钮,实现集团数据平台错误数据的取
回并导出,供各个地市分公司、二级机构、第三方开发商相关人员进行处理。
还包括步骤:
S12:集团模板改动后的导入:
当集团模板改动时,可以通过这一步将新的集团模板导入到后端数据库中,实现
模板快速简洁的修改。
本发明提供的平台数据清理方法为集团公司与分公司及其他省公司二级机构提
供了有效的数据管理方法,能够及时有效的检测错误数据并做出提示,保证了对数据的有
效监控。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽
叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书的内容,
可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明
的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅
受权利要求书及其全部范围和等效物的限制。