一种基于数据中台配网精益化全景监测系统的构建方法技术方案

一种基于数据中台配网精益化全景监测系统的构建方法，涉及电力监控工具技术领域，基于数据中台重点业务数据，按需完成数据接入、数据存储、数据计算、数据服务及数据可视化，实现多业务系统的数据融合和统一数据服务，形成配网精益化管理监测分析体系，并为后续全面推进数字化管理应用探索路径；其包括数据接入、数据清洗整合、数据分析计算、数据报表服务和数据可视化五步。本发明专利技术的有益效果在于：数据中台能够以提供数据服务的方式直接驱动和改变业务行为本身，而不需要人的介入，数据中台距离业务更近，为业务产生价值的速度更快。为业务产生价值的速度更快。

【技术实现步骤摘要】
一种基于数据中台配网精益化全景监测系统的构建方法


[0001]本专利技术涉及电力监测工具
，特别是涉及一种基于数据中台配网精益化全景监测系统及其架构方法。

技术介绍

[0002]目前智能化发展很快，如何对现有业务系统的数据进行分析，了解现有数据库系统是“如何组织”和“如何分布”，分析企业经营管理过程，如何把企业的信息结构抽象成概念模型，如何确定系统的边界，确定哪些数据是数据中台所需要的。如何确定主要的主题域以及内容，如何确定实体之间的关系用ER图进行描述； 解决这些问题的核心还是在于数据中台的架构方法。

技术实现思路

[0003]本专利技术提供一种基于数据中台配网精益化全景监测系统的构建方法，其特征在于：基于数据中台重点业务数据，按需完成数据接入、数据存储、数据计算、数据服务及数据可视化，实现多业务系统的数据融合和统一数据服务，形成配网精益化管理监测分析体系，并为后续全面推进数字化管理应用探索路径；一、数据接入贴源层：采用分布式数据仓库MaxCompute，源业务系统数据通过DataWorks、DTS、OGG、DataHub组件接入；共享层：采用分布式数据仓库MaxCompute，通过DataWorks组件完成贴源层数据表到SG
‑
CIM模型层数据表转化；分析层：采用MaxCompute Analytic、DRDS（RDS），基于业务逻辑通过DataWorks组件完成业务分析计算后的结果表开发；通过DataWorks组件对计算结果封装为Webservice、Restful等类型的数据服务API，发布注册至API网关后，供外部报表工具调用进行可视化展示；二、数据清洗整合按照SG
‑
CIM模型，使用DataWorks工具在共享层中创建模型物理表，基于模型表与贴源表的映射关系和清洗规则，形成SQL计算逻辑，执行数据同步任务将贴源层数据进行转换写入共享层模型物理表；三、数据分析计算基于DataWorks可以对贴源层和共享层模型数据进行分析计算，使用封装好的数据分析服务及算法模型服务，将数据通过DataWorks数据集成同步至分析层DRDS（RDS）或MaxCompute Analytic，形成分析主题宽表，供上层应用使用；四、数据报表服务在数据集层基础上，以向导式操作，完成面向业务应用的数据封装服务，实现自动化、智能化的数据服务封装和统一管理；
五、数据可视化在数据集层基础上，基于数据API服务及数据接口，通过数据可视化技术与工具，实现数据可视化场景及GIS地图展示快速配置与展示。
[0004]配网精益化平台上线试运行后，能够实时分析预警配网运行各类主要指标，使基层班组从“被动查问题”向“主动改问题”跃变，从“表格化管理”向“图形化管理”转变，从“量”的应变向“质”提升转变，提升了配电网资源管理配置水平。
[0005]本专利技术的有益效果在于：大数据可以告诉决策者一些潜在的规律，以数据来证明或判断决策数据是人工智能的根基，并且可以进行融合形成新的数据数据给我们无限的创新，让我们不停去尝试数据是不断变化的，让机器智能成为决策环节，运营就可以智能化,“天下武功、唯快不破”，为企业用户提供统一的数据资源视图，高复用的数据服务及数据“轻加工”的能力,企业打通业务系统“烟囱”，提供多样的数据服务能力，有效赋能业务前台敏捷构建创新型业务应用,型业务应用唯一“数据视图”和“数据服务”实现数据高复用，而高复则意味着建设成本和运营成本的节省；数据中台能够以提供数据服务的方式直接驱动和改变业务行为本身，而不需要人的介入，数据中台距离业务更近，为业务产生价值的速度更快。
具体实施方式
[0006]以下对本专利技术作进一步详细说明；实施例1：一种基于数据中台配网精益化全景监测系统的构建方法，其特征在于：基于数据中台重点业务数据，按需完成数据接入、数据存储、数据计算、数据服务及数据可视化，实现多业务系统的数据融合和统一数据服务，形成配网精益化管理监测分析体系，并为后续全面推进数字化管理应用探索路径；一、数据接入贴源层：采用分布式数据仓库MaxCompute，源业务系统数据通过DataWorks、DTS、OGG、DataHub组件接入；共享层：采用分布式数据仓库MaxCompute，通过DataWorks组件完成贴源层数据表到SG
‑
CIM模型层数据表转化；分析层：采用MaxCompute Analytic、DRDS（RDS），基于业务逻辑通过DataWorks组件完成业务分析计算后的结果表开发；通过DataWorks组件对计算结果封装为Webservice、Restful等类型的数据服务API，发布注册至API网关后，供外部报表工具调用进行可视化展示；二、数据清洗整合按照SG
‑
CIM模型，使用DataWorks工具在共享层中创建模型物理表，基于模型表与贴源表的映射关系和清洗规则，形成SQL计算逻辑，执行数据同步任务将贴源层数据进行转换写入共享层模型物理表；三、数据分析计算基于DataWorks可以对贴源层和共享层模型数据进行分析计算，使用封装好的数据分析服务及算法模型服务，将数据通过DataWorks数据集成同步至分析层DRDS（RDS）或MaxCompute Analytic，形成分析主题宽表，供上层应用使用；
四、数据报表服务在数据集层基础上，以向导式操作，完成面向业务应用的数据封装服务，实现自动化、智能化的数据服务封装和统一管理；五、数据可视化在数据集层基础上，基于数据API服务及数据接口，通过数据可视化技术与工具，实现数据可视化场景及GIS地图展示快速配置与展示。
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于数据中台配网精益化全景监测系统的构建方法，其特征在于：基于数据中台重点业务数据，按需完成数据接入、数据存储、数据计算、数据服务及数据可视化，实现多业务系统的数据融合和统一数据服务，形成配网精益化管理监测分析体系，并为后续全面推进数字化管理应用探索路径；其包括数据接入、数据清洗整合、数据分析计算、数据报表服务和数据可视化五步。2.根据权利要求1所述的一种基于数据中台配网精益化全景监测系统的构建方法，其特征在于：所述数据接入包括如下三层：贴源层：采用分布式数据仓库MaxCompute，源业务系统数据通过DataWorks、DTS、OGG、DataHub组件接入；共享层：采用分布式数据仓库MaxCompute，通过DataWorks组件完成贴源层数据表到SG
‑
CIM模型层数据表转化；分析层：采用MaxCompute Analytic、DRDS（RDS），基于业务逻辑通过DataWorks组件完成业务分析计算后的结果表开发；通过DataWorks组件对计算结果封装为Webservice、Restful等类型的数据服务API，发布注册至API网关后，供外部报表工具调用进行可视化展示。3.根据权利要求1所述的一种基于数据中台配网精益化全...

【专利技术属性】
技术研发人员：王烜，周群星，高海琳，赵中奇，韩良煜，宋继红，钟宪成，郭英，张雪玲，刘权琦，韩雪梅，
申请(专利权)人：国网青海省电力公司国网青海省电力公司检修公司国家电网有限公司，
类型：发明
国别省市：