基于大数据处理的电压监测方法技术

本发明专利技术公开了基于大数据处理的电压监测方法，涉及电变量的监测方法技术领域。所述方法包括如下步骤：通过Hadoop分布式云计算平台对电压数据进行分布式存储、计算和处理；通过数据挖掘对分布式存储、计算和处理后的电压数据进行分析，从大量数据中寻找出其规律；通过对寻找出规律的数据进行统计分析，对电压数据的相应指标进行预测。所述方法能够对海量电压数据进行统一管理，基于大数据挖掘技术能够挖掘出电压异常原因，有力的支持了智能电网建设和维护。

【技术实现步骤摘要】

本专利技术涉及电变量的监测方法
，尤其涉及基于大数据处理的电压监测方法。
技术介绍
供电系统电能质量的好坏，直接关系到供电系统能否安全运行和用户是否能够安全用电。国家能源局《供电监管办法》明确提出了对供电可靠性和电压合格率严格监管的要求。广东电网有限责任公司以供电可靠性和电压合格率为中长期发展战略和创先的核心指标，将电压质量和供电可靠性作为客户全方位服务三项重点工作任务之一和供电服务承诺的重要内容。为了掌握全网的供电质量现状，及时发现和准确定位配电网供电质量问题，进一步做好供电质量管理工作，有必要对与供电质量相关的信息系统现状进行梳理分析，明确各系统对供电质量分析的业务支撑程度，为进一步建设电压监测技术平台提供基础保障。电压监测现状分析：随着智能电网建设的发展，电压监测数据飞速增长，电力系统具有空间分布、控制对象多样和复杂的特点，现有的结构已很难适应业务发展的要求，具体表现在以下三点：(一)随着智能电网建设进程的加快，电压质量监测点不断增多，系统逐步完善的同时，各种类型的监测和计算数据量急剧增加；(二)电压质量监控系统的好坏与所管理的数据存储和实时计算与分析紧密相关，现有系统的软件平台架构无法满足可定制和可扩充的要求，硬件平台无法满足高速、实时和并行处理要求；(三)数据集成平台无法满足数据的日益增长需求，以至于无法满足广东电网有限责任公司朝智能电网发展的步伐，也无法采用先进的数据挖掘技术和智能算法，来实现电能质量问题的分析、故障源定位和自动识别、电能质量评估及治理等一系列功能，无法为治理电能质量问题和建立电能质量市场提供有效保障。
技术实现思路
本专利技术所要解决的技术问题是提供基于大数据处理的电压监测方法，所述方法能够对海量电压数据进行统一管理，基于大数据挖掘技术能够挖掘出电压异常原因，有力的支持了智能电网建设和维护。为解决上述技术问题，本专利技术所采取的技术方案是：一种基于大数据处理的电压监测方法，其特征在于包括如下步骤：通过Hadoop分布式云计算平台对电压数据进行分布式存储、计算和处理；通过数据挖掘对分布式存储、计算和处理后的电压数据进行分析，从大量数据中寻找出其规律；通过对寻找出规律的数据进行统计分析，对电压数据的相应指标进行预测。进一步的技术方案在于，所述的Hadoop分布式云计算平台的构建方法如下：创建虚拟机master，完成JDK、Hadoop应用的安装和配置；对虚拟机master进行克隆，得到的虚拟机分别作为slave1、slave2和slave3；完成Zookeeper、HBase分布式服务的配置，搭建Hadoop集群；运行并测试Hadoop集群系统。进一步的技术方案在于，所述的创建虚拟机master，完成JDK、Hadoop应用的安装和配置的过程如下：安装虚拟机软件VMwareWorkstation；在master节点上安装Linux系统Ubuntu；master节点的JDK安装与配置；master节点的hadoop安装与配置。进一步的技术方案在于，所述的对虚拟机master进行克隆，得到的虚拟机分别作为slave1、slave2和slave3的方法如下：建立SSH无密码互访，实现Hadoop虚拟机群之间的无密码登录互访；克隆虚拟机作为Slave节点；为各个节点分配IP地址；修改加载在各虚拟机中的系统名称，用于区分不同的节点，修改hosts文件，实现机器名和IP地址之间的映射；建立SSH无密码互访，实现Hadoop虚拟机集群之间的无密码登陆互访。进一步的技术方案在于，所述的Zookeeper分布式服务的配置方法如下：Zookeeper的解压安装；添加环境变量；Zookeeper的安装目录下配置文件的修改；目录设置：在dataDir所指定的目录下创建一个文件名为myid的文件；远程复制分发目录文件并配置环境变量；在ZooKeeper集群的每个结点上，执行启动ZooKeeper服务的脚本，分别在slave1、slave2和slave3机器上执行相关命令，启动zookeeper集群；停止Zookeeper进程。进一步的技术方案在于，所述的HBase分布式服务的配置方法如下：HBase的解压安装；添加环境变量；配置hbase-env.sh文件、hbase-site.xml文件以及regionservers文件；安装目录下jar包的替换；将hadoop的部分配置文件拷贝到HBase分布式服务的conf目录下；远程复制分发目录文件并配置环境变量；在启动HBase之前，需要首先启动hadoop，接下来再启动zookeeper服务；若要终止HBase服务，则首先需要终止zookeeper，再停止hadoop进程的运行。在启动hadoop和zookeeper之后，进入HBase分布式服务的bin目录，运行脚本start-hbase.sh；进入HBase分布式服务的bin目录，启动HBase的shell命令，进行数据表的创建、状态查询、数据插入操作。进一步的技术方案在于，所述通过数据挖掘对分布式存储、计算和处理后的电压数据进行分析，从大量数据中寻找出其规律的方法如下：数据准备：从相关的数据源中选取所需的数据并整合成用于数据挖掘的数据集；规律寻找：用某种方法将数据集所含的规律找出来；规律表示：以用户可理解的方式将找出的规律表示出来。进一步的技术方案在于，所述的统计分析是指对收集到的有关数据资料进行整理归类并进行解释的过程，所述的统计分析包括描述统计和推断统计。进一步的技术方案在于，所述的描述统计是指：对找出规律的电压数据加以整理、归类、简化或绘制成图表，以此描述和归纳数据的特征及变量之间的关系，描述统计包括数据的集中趋势、离散程度和相关强度，相关指标有平均数、标准差以及相关系数。进一步的技术方案在于，所述的推断统计是指：用概率形式来决断电压数据之间是否存在某种关系及用样本统计值来推测总体特征；推断统计包括总体参数估计和假设检验，使用的方法有Z检验、T检验、卡方检验。采用上述技术方案所产生的有益效果在于：所述方法基于大数据技术，能有效集成电压监测仪、计量自动化、配网生产、GIS、营销系统的海量电压数据。对海量电压数据进行统一进行存储、处理、计算、分析，包括准实时数据存储、大数据分布式存储、数据处理分析以及数据可视化。能够准确高效满足电压监测管控和停电监测应用需求，基于大数据挖掘技术能够挖掘出电压异常原因，有力的支持了智能电网建设和维护。附图说明下面结合附图和具体实施方式对本专利技术作进一步详细的说明。图1是本专利技术实施例所述方法中大数据分布式处理技术架构图。图2是本专利技术实施例所述方法的流程图；图3是本专利技术实施例所述方法中Hadoop分布式云计算平台的构建方法流程图。具体实施方式下面结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术的一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。在下面的描述中阐述了很多具体细节以便于充分理解本专利技术，但是本专利技术还可以采用其他不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本专利技术内涵的情况下做类似推广，因此本发本文档来自技高网...

【技术保护点】
基于大数据处理的电压监测方法，其特征在于包括如下步骤：通过Hadoop分布式云计算平台对电压数据进行分布式存储、计算和处理；通过数据挖掘对分布式存储、计算和处理后的电压数据进行分析，从大量数据中寻找出其规律；通过对寻找出规律的数据进行统计分析，对电压数据的相应指标进行预测。

【技术特征摘要】
1.基于大数据处理的电压监测方法，其特征在于包括如下步骤：通过Hadoop分布式云计算平台对电压数据进行分布式存储、计算和处理；通过数据挖掘对分布式存储、计算和处理后的电压数据进行分析，从大量数据中寻找出其规律；通过对寻找出规律的数据进行统计分析，对电压数据的相应指标进行预测。2.如权利要求1所述的基于大数据处理的电压监测方法，其特征在于：所述的Hadoop分布式云计算平台的构建方法如下：创建虚拟机master，完成JDK、Hadoop应用的安装和配置；对虚拟机master进行克隆，得到的虚拟机分别作为slave1、slave2和slave3；完成Zookeeper、HBase分布式服务的配置，搭建Hadoop集群；运行并测试Hadoop集群系统。3.如权利要求2所述的基于大数据处理的电压监测方法，其特征在于：所述的创建虚拟机master，完成JDK、Hadoop应用的安装和配置的过程如下：安装虚拟机软件VMwareWorkstation；在master节点上安装Linux系统Ubuntu；master节点的JDK安装与配置；master节点的hadoop安装与配置。4.如权利要求2所述的基于大数据处理的电压监测方法，其特征在于：所述的对虚拟机master进行克隆，得到的虚拟机分别作为slave1、slave2和slave3的方法如下：建立SSH无密码互访，实现Hadoop虚拟机群之间的无密码登录互访；克隆虚拟机作为Slave节点；为各个节点分配IP地址；修改加载在各虚拟机中的系统名称，用于区分不同的节点，修改hosts文件，实现机器名和IP地址之间的映射；建立SSH无密码互访，实现Hadoop虚拟机集群之间的无密码登陆互访。5.如权利要求2所述的基于大数据处理的电压监测方法，其特征在于：所述的Zookeeper分布式服务的配置方法如下：Zookeeper的解压安装；添加环境变量；Zookeeper的安装目录下配置文件的修改；目录设置：在dataDir所指定的目录下创建一个文件名为myid的文件；远程复制分发目录文件并配置环境变量；在ZooKeeper集群的每个结点上，执行启动ZooKeeper服务的脚本，分别在slave1、slave2...

【专利技术属性】
技术研发人员：谢善益，周刚，曾强，缪钟灵，王红斌，高雅，范颖，陈扬，杨强，杜双育，张程，王伟，陈勋旺，李厚旭，
申请(专利权)人：广东电网有限责任公司电力科学研究院，烟台海颐软件股份有限公司，
类型：发明
国别省市：广东;44