一种基于电力行业数据标准自动化监管系统和方法转让专利

申请号 : CN202011311461.2

文献号 : CN112732683B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 关兆雄宋才华刘胜强皇甫汉聪林钰杰王永才

申请人 : 广东电网有限责任公司佛山供电局

摘要 :

本发明提供一种基于电力行业数据标准自动化监管系统和方法,系统包括服务端、客户端、接口管理模块和数据标准过程监控模块。通过本发明,能实现全链路自动监控,数据标准稽核过程无需太多的人员干预,实现全域数据标准的统一,同时能够为数据需求方提供标准化数据,大大提高了数据资产价值,为数据资产变现提供了坚实的基础。

权利要求 :

1.一种基于电力行业数据标准自动化监管系统,其特征在于,包括服务端、客户端、接口管理模块和数据标准过程监控模块,其中:所述服务端包括用户管理子模块、权限管理子模块、数据接入需求管理子模块、数据需求下发模块、标准制定模块和标准下发模块,所述用户管理子模块、权限管理子模块、数据接入需求管理子模块、数据需求下发模块、标准制定模块、标准下发模块独立运行,并且通过所述接口管理模块与客户端进行数据交换;

所述客户端包括用户登录模块、数据库配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块、数据质量稽核模块和稽核结果反馈模块,所述用户登录模块、数据库配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块和稽核结果反馈模块独立运行;

所述数据标准过程监控模块对所述服务端和客户端之间的数据交换进行全链路监控;

所述标准制定模块包括数据元标准管理模块和数据标准管理模块,用于根据数据需求,统一建立数据标准;所述标准下发模块用于管理端将数据源标准、数据标准下发至客户端,客户端收到标准在生产数据输出是根据该标准进行质量稽核;所以接口管理模块用于管理所有服务端和客户端交互接口,监控接口交互情况;

所述数据接入需求确认模块用于查看数据接入需求,确认数据来源,或无法提供数据,驳回数据请求,所述数据元质量稽核模块用于通过指定的数据来源,根据数据元数据标准,自动稽核,形成稽核结果,评估结果是否满足标准要求;所述数据质量稽核模块,通过指定的数据来源,根据数据标准,自动稽核,形成稽核结果,评估结果是否满足标准要求。

2.根据权利要求1所述的基于电力行业数据标准自动化监管系统,其特征在于,所述用户管理子模块用于管理后台登录用户的创建管理,进行新增、修改和注销操作;所述权限管理子模块用于给管理后台用户及客户端登录用户分配及管理访问功能权限、操作权限、数据权限。

3.根据权利要求1所述的基于电力行业数据标准自动化监管系统,其特征在于,所述数据接入需求管理子模块用于在数据供应方接到需求方的数据需求时,通过数据接入需求管理模块创建数据需求;所述数据接入需求下发模块将创建好的需求下发到指定的数据提供方客户端中。

4.根据权利要求3所述的基于电力行业数据标准自动化监管系统,其特征在于,所述数据接入需求管理子模块创建数据需求,包括数据目录、数据项以及数据权限。

5.根据权利要求1所述的基于电力行业数据标准自动化监管系统,其特征在于,所述用户登录模块用于在客户端根据管理端分配的账号密码进行登录访问时,查询该用户对应的所有权限;所述数据库配置管理模块用于分析数据,指定数据输出数据库,配置数据库访问地址;所述客户端标准管理模块用于查看数据需求对应的标准。

6.根据权利要求1所述的基于电力行业数据标准自动化监管系统,其特征在于,所述稽核结果反馈模块用于将每一次质量稽核的结果都会上报。

7.一种基于电力行业数据标准自动化监管方法,其特征在于,所述方法应用于权利要求1至6任一项所述的基于电力行业数据标准自动化监管系统,包括以下步骤:S1:需求方在客户端创建需求,建立需求基础信息;

S2:根据步骤S1的客户需求制定数据元标准以及数据标准,与全域数据标准保持一致,形成统一的标准体系;

S3:下发数据接入需求至各业务单位,明确需求需要从下发的业务单位接入;

S4:业务单位确认数据需求是否属于本部门的业务范围,并反馈信息给服务端,服务端做统一管理,如果否定需求,则明确具体的数据项不能满足需求;

S5:服务端接收到客户端的需求确认反馈,不符合需求的重新核实业务部门进行数据需求下发,重新进行S4,如果业务单位接受需求,即认为业务单位能够提供需求中的数据,将确认结果反馈到服务端;

S6:服务端根据数据标准下发规则,将数据元标准及数据标准统一下发到客户端接受确认;

S7:进行标准的稽核工作,稽核的结果反馈到服务端,稽核过程出现稽核失败现象,稽核失败后,通过数据清洗进行加工后重新稽核,直至数据标准稽核通过,结果反馈给数据标准过程监控模块监控。

8.根据权利要求7所述的基于电力行业数据标准自动化监管方法,其特征在于,步骤S1中需求基础信息包括数据目录、数据项,并明确用途、时间、周期、范围。

说明书 :

一种基于电力行业数据标准自动化监管系统和方法

技术领域

[0001] 本发明涉及电网大数据领域,更具体地,涉及一种基于电力行业数据标准自动化监管系统和方法。

背景技术

[0002] 由于电网整体数据业务量庞大,业务系统众多,数据分布在大量的异构数据库中,长期以来,积累的数据量大而杂,垃圾数据及不规范数据量庞大,近几年广东电网在重点抓
数据质量问题,按照发现问题、提出问题、如何解决问题的思路,建立了数据标准管理制度,
但在数据标准规范的落地化实施过程中一直在摸索更高效的解决方法。
[0003] 公开日为2017年05月17日,公开号为CN106685771A的中国专利公开了一种电力营销全服务渠道统一接入方法,涉及一种渠道接入方法。传统的粗放式客户服务管理模式难
以为个性化、精准化的新型客户服务需求提供支撑,各类渠道架构复杂,存在高安全风险。
本发明包括以下步骤:利用分布式服务应用框架,开展统一渠道服务接入;引入注册、绑定、
实名认证、服务密码认证的权限机制,实现对渠道注册账户和账号权限的统一管理,包括统
一账户管理、统一权限管理。但并未解决数据标准不规范的问题。

发明内容

[0004] 本发明的首要目的是提供一种基于电力行业数据标准自动化监管系统,实现全域数据标准的统一。
[0005] 本发明的进一步目的是提供一种基于电力行业数据标准自动化监管方法。
[0006] 为解决上述技术问题,本发明的技术方案如下:
[0007] 一种基于电力行业数据标准自动化监管系统,包括服务端、客户端和数据标准过程监控模块,其中:
[0008] 所述服务端包括用户管理子模块、权限管理子模块、数据接入需求管理子模块、数据需求下发模块、标准制定模块和标准下发模块,所述用户管理子模块、权限管理子模块、
数据接入需求管理子模块、数据需求下发模块、标准制定模块、标准下发模块独立运行,并
且通过所述接口管理模块与客户端进行数据交换;
[0009] 所述客户端包括用户登录模块、数据库配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块和稽核结果反馈模块,所述用户登录模块、数据库
配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块和稽核
结果反馈模块独立运行;
[0010] 所述数据标准过程监控模块对所述服务端和客户端之间的数据交换进行全链路监控。
[0011] 优选地,所述用户管理模块用于管理后台登录用户的创建管理,进行新增、修改和注销操作,客户端登录用户的创建管理,可以新增、修改、注销操作;所述权限管理模块用于
给管理后台用户及客户端登录用户分配及管理访问功能权限、操作权限、数据权限。
[0012] 优选地,所述数据接入需求管理模块用于在数据供应方接到需求方的数据需求时,通过数据接入需求管理模块创建数据需求;所述数据接入需求下发模块将创建好的需
求下发到指定的数据提供方客户端中,作为数据供应方,起到数据管理的作用,但数据的来
源需要相关业务部门输出,将创建好的需求下发到指定的数据提供方客户端中,供数据供
应方进行确认。
[0013] 优选地,所述数据接入需求管理模块创建数据需求,包括数据目录、数据项以及数据权限。
[0014] 优选地,所述标准制定模块包括数据元标准管理模块和数据标准管理模块,用于根据数据需求,统一建立数据标准;统一建立数据标准,一是为了数据采集的准确性,二是
为了能够统一全域的数据标准。
[0015] 优选地,所述用户登录模块用于在客户端根据管理端分配的账号密码进行登录访问时,查询该用户对应的所有权限;所述数据库配置管理模块用于分析数据,指定数据输出
数据库,配置数据库访问地址;所述客户端标准管理模块用于查看数据需求对应的标准。
[0016] 优选地,所述数据接入需求确认模块用于查看数据接入需求,确认数据来源,或无法提供数据,驳回数据请求,所述数据元质量稽核模块用于通过指定的数据来源,根据数据
元数据标准,自动稽核,形成稽核结果,评估结果是否满足标准要求;所述数据质量稽核模
块,通过指定的数据来源,根据数据标准,自动稽核,形成稽核结果,评估结果是否满足标准
要求。
[0017] 优选地,所述稽核结果反馈模块用于将每一次质量稽核的结果都会上报。
[0018] 一种基于电力行业数据标准自动化监管方法,所述方法应用于上述所述的基于电力行业数据标准自动化监管系统,包括以下步骤:
[0019] S1:需求方在客户端创建需求,建立需求基础信息;
[0020] S2:指定数据元标准以及数据标准,与全域数据标准保持一致,形成统一的标准体系;
[0021] S3:下发数据接入需求至各业务单位,明确需求需要从下发的业务单位接入;
[0022] S4:业务单位确认数据需求是否属于本部门的业务范围,并反馈信息给服务端,服务端做统一管理,如果否定需求,则明确具体的数据项不能满足需求;
[0023] S5:服务端接收到客户端的需求确认反馈,不符合需求的重新核实业务部门进行数据需求下发,重新进行S4,如果业务单位接受需求,即认为业务单位能够提供需求中的数
据,将确认结果反馈到服务端;
[0024] S6:服务端根据数据标准下发规则,将数据元标准及数据标准统一下发到客户端接受确认;
[0025] S7:进行标准的稽核工作,稽核的结果反馈到服务端,结合过程可能会出现稽核失败现象,稽核失败后,通过数据清洗等方式进行加工后重新稽核,直至数据标准稽核通过,
结果反馈给数据标准过程监控模块监控。
[0026] 优选地,步骤S1中需求基础信息包括数据目录、数据项,并明确用途、时间、周期、范围。
[0027] 与现有技术相比,本发明技术方案的有益效果是:
[0028] 当前电网六大业务域,业务量、数据量庞大,各个业务系统数据结构复杂,数据标准杂乱无章,通过该发明方案,能实现全链路自动监控,数据标准稽核过程无需太多的人员
干预,实现全域数据标准的统一,同时能够为数据需求方提供标准化数据,大大提高了数据
资产价值,为数据资产变现提供了坚实的基础。

附图说明

[0029] 图1为本发明的系统结构示意图。
[0030] 图2为本发明的方法流程示意图。

具体实施方式

[0031] 附图仅用于示例性说明,不能理解为对本专利的限制;
[0032] 为了更好说明本实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;
[0033] 对于本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
[0034] 下面结合附图和实施例对本发明的技术方案做进一步的说明。
[0035] 实施例1
[0036] 本实施例提供一种基于电力行业数据标准自动化监管系统,如图1,包括服务端、客户端、接口管理模块和数据标准过程监控模块,其中:
[0037] 所述服务端包括用户管理子模块、权限管理子模块、数据接入需求管理子模块、数据需求下发模块、标准制定模块和标准下发模块,所述用户管理子模块、权限管理子模块、
数据接入需求管理子模块、数据需求下发模块、标准制定模块、标准下发模块独立运行,并
且通过所述接口管理模块与客户端进行数据交换;
[0038] 所述客户端包括用户登录模块、数据库配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块和稽核结果反馈模块,所述用户登录模块、数据库
配置管理模块、客户端标准管理模块、数据接入需求确认模块、数据元质量稽核模块和稽核
结果反馈模块独立运行;
[0039] 所述数据标准过程监控模块对所述服务端和客户端之间的数据交换进行全链路监控。
[0040] 所述用户管理模块用于管理后台登录用户的创建管理,进行新增、修改和注销操作;所述权限管理模块用于给管理后台用户及客户端登录用户分配及管理访问功能权限、
操作权限、数据权限。
[0041] 所述数据接入需求管理模块用于在数据供应方接到需求方的数据需求时,通过数据接入需求管理模块创建数据需求;所述数据接入需求下发模块将创建好的需求下发到指
定的数据提供方客户端中。
[0042] 所述数据接入需求管理模块创建数据需求,包括数据目录、数据项以及数据权限。
[0043] 所述标准制定模块包括数据元标准管理模块和数据标准管理模块,用于根据数据需求,统一建立数据标准;所述标准下发模块用于管理端将数据源标准、数据标准下发至客
户端,客户端收到标准在生产数据输出是根据该标准进行质量稽核;所以接口管理模块用
于管理所有服务端和客户端交互接口,监控接口交互情况。
[0044] 所述用户登录模块用于在客户端根据管理端分配的账号密码进行登录访问时,查询该用户对应的所有权限;所述数据库配置管理模块用于分析数据,指定数据输出数据库,
配置数据库访问地址;所述客户端标准管理模块用于查看数据需求对应的标准。
[0045] 所述数据接入需求确认模块用于查看数据接入需求,确认数据来源,或无法提供数据,驳回数据请求,所述数据元质量稽核模块用于通过指定的数据来源,根据数据元数据
标准,自动稽核,形成稽核结果,评估结果是否满足标准要求;所述数据质量稽核模块,通过
指定的数据来源,根据数据标准,自动稽核,形成稽核结果,评估结果是否满足标准要求。
[0046] 所述稽核结果反馈模块用于将每一次质量稽核的结果都会上报。
[0047] 实施例2
[0048] 本实施例提供一种基于电力行业数据标准自动化监管方法,如图2,所述方法应用于实施例1所述的基于电力行业数据标准自动化监管系统,包括以下步骤:
[0049] S1:需求方在客户端创建需求,建立需求基础信息;
[0050] S2:指定数据元标准以及数据标准,与全域数据标准保持一致,形成统一的标准体系;
[0051] S3:下发数据接入需求至各业务单位,明确需求需要从下发的业务单位接入;
[0052] S4:业务单位确认数据需求是否属于本部门的业务范围,并反馈信息给服务端,服务端做统一管理,如果否定需求,则明确具体的数据项不能满足需求;
[0053] S5:服务端接收到客户端的需求确认反馈,不符合需求的重新核实业务部门进行数据需求下发,重新进行S4,如果业务单位接受需求,即认为业务单位能够提供需求中的数
据,将确认结果反馈到服务端;
[0054] S6:服务端根据数据标准下发规则,将数据元标准及数据标准统一下发到客户端接受确认;
[0055] S7:进行标准的稽核工作,稽核的结果反馈到服务端,结合过程可能会出现稽核失败现象,稽核失败后,通过数据清洗等方式进行加工后重新稽核,直至数据标准稽核通过,
结果反馈给数据标准过程监控模块监控。
[0056] 步骤S1中需求基础信息包括数据目录、数据项,并明确用途、时间、周期、范围。
[0057] 相同或相似的标号对应相同或相似的部件;
[0058] 附图中描述位置关系的用语仅用于示例性说明,不能理解为对本专利的限制;
[0059] 显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可
以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本
发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求
的保护范围之内。