本发明专利技术公开了一种数据处理方法、装置、电子设备及存储介质,方法应用于边缘计算设备,包括:获取待处理电力数据,其中,待处理电力数据包括多个采样时刻的电力系统的运行数据;对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果;将分类结果满足第一条件的待处理电力数据传输至云端服务器,接收云端服务器对待处理电力数据的处理结果;将分类结果满足第二条件的待处理电力数据在边缘计算设备进行本地处理,得到待处理电力数据的处理结果。本方案通过对待处理电力数据进行分类,根据分类结果确定上传至云端服务器的数据和在边缘计算设备进行处理的数据,实现了合理分配边缘计算设备和云端服务器的数据处理任务,提高数据处理效率。
【技术实现步骤摘要】
本专利技术涉及数据处理,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
技术介绍
1、随着现代信息技术和先进通信技术在电力系统中的广泛应用,复杂电力网络运行控制,电力系统运行过程中产生大量的运行数据,海量数据、多元化需求等情况对于数据处理带来了更大的挑战。
2、云端计算可以用于处理海量数据对应的大规模数据处理任务,但是在低延时应用中存在局限性,边缘侧的计算资源有限,无法处理大规模或复杂的数据处理任务,对于上述情况,现有技术采用云边协同的控制方法处理数据处理任务,但是存在无法合理分配数据处理任务,不能满足对数据计算处理的需求,存在计算资源浪费和计算效率低的问题。
技术实现思路
1、本专利技术提供了一种数据处理方法、装置、电子设备及存储介质,以解决现有技术中存在的数据处理任务分配不合理、计算效率低的问题。
2、根据本专利技术的一方面,提供了一种数据处理方法,应用于边缘计算设备,包括:
3、获取待处理电力数据,其中,待处理电力数据包括多个采样时刻的电力系统的运行数据;
4、对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果;其中,分类结果用于表征待处理电力数据的处理过程所需设备处理能力;
5、将分类结果满足第一条件的待处理电力数据传输至云端服务器,接收云端服务器对待处理电力数据的处理结果;
6、将分类结果满足第二条件的待处理电力数据在边缘计算设备进行本地处理,得到待处理电力数据的处理结果。
<
p>7、可选的,获取待处理电力数据,包括:按照预设数据采集方式采集原始电力数据;对原始电力数据进行数据预处理,以得到初始待处理电力数据,其中,预处理包括数据对齐处理、数据类型转换处理、数据编码格式转换处理、数据标准化处理和数据归一化处理中的一项或多项;对初始待处理电力数据进行数据质量检查,得到满足预设数据合格需求的待处理电力数据。8、可选的,对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果,包括:基于预训练的联合分类模型对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果,其中,预训练的联合分类模型包括独立成分分析子模型、异常检测子模型和分类子模型。
9、可选的,基于预训练的联合分类模型对待处理电力数据进行分类处理,包括:通过独立成分分析子模型对待处理电力数据进行特征提取,得到目标特征数据;通过异常检测子模型对目标特征数据进行处理,确定目标特征数据中的各特征数据对应的异常评分数据;将异常评分数据与目标特征数据进行融合,得到融合后的特征数据,通过分类子模型对融合后的特征数据进行分类,得到待处理电力数据对应的分类结果。
10、可选的,在将分类结果满足第一条件的待处理电力数据传输至云端服务器之前,包括:对分类结果满足第一条件的待处理电力数据进行压缩处理和加密处理;以及,基于待处理电力数据的分类结果确定待处理电力数据的优先级,其中,优先级用于控制待处理电力数据的上传顺序。
11、可选的,将分类结果满足第二条件的待处理电力数据在边缘计算设备进行本地处理,得到待处理电力数据的处理结果,包括:基于预设算法对分类结果满足第二条件的待处理电力数据进行本地处理,得到待处理电力数据的处理结果,其中,预设算法包括动态规划算法和贪心算法的一项或多项。
12、可选的,云端服务器对待处理电力数据的处理结果包括负载预测结果、调整发电计划、负载转移策略和维护时间信息中的一项或多项;方法还包括:基于云端服务器对待处理电力数据的处理结果更新本地存储的目标控制策略,其中,目标控制策略用于控制电力系统中的设备的运行过程。
13、根据本专利技术的另一方面,提供了一种数据处理装置,包括:
14、数据获取模块,用于获取待处理电力数据,其中,待处理电力数据包括多个采样时刻的电力系统的运行数据;
15、分类结果确定模块,用于对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果;其中,分类结果用于表征待处理电力数据的处理过程所需设备处理能力;
16、数据传输模块,用于将分类结果满足第一条件的待处理电力数据传输至云端服务器,接收云端服务器对待处理电力数据的处理结果;
17、数据处理模块,用于将分类结果满足第二条件的待处理电力数据在边缘计算设备进行本地处理,得到待处理电力数据的处理结果。
18、根据本专利技术的另一方面,提供了一种电子设备,电子设备包括:
19、至少一个处理器;以及
20、与至少一个处理器通信连接的存储器;其中,
21、存储器存储有可被至少一个处理器执行的计算机程序,计算机程序被至少一个处理器执行,以使至少一个处理器能够执行本专利技术任一实施例的数据处理方法。
22、根据本专利技术的另一方面,提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行时实现本专利技术任一实施例的数据处理方法。
23、本专利技术实施例的技术方案,通过获取待处理电力数据,其中,待处理电力数据包括多个采样时刻的电力系统的运行数据;对待处理电力数据进行分类处理,确定待处理电力数据对应的分类结果;其中,分类结果用于表征待处理电力数据的处理过程所需设备处理能力;将分类结果满足第一条件的待处理电力数据传输至云端服务器,接收云端服务器对待处理电力数据的处理结果;将分类结果满足第二条件的待处理电力数据在边缘计算设备进行本地处理,得到待处理电力数据的处理结果。本方案通过对待处理电力数据进行分类,确定分类结果,根据分类结果确定上传至云端服务器的数据和确定在边缘计算设备进行处理的数据,实现了合理分配边缘计算设备和云端服务器的数据处理任务,充分利用云端服务器和边缘计算设备的数据处理能力和资源,解决了数据处理任务分配不合理、计算效率低的问题,使得数据处理任务的分配更加符合电力数据的特性,有助于提高边缘计算设备和云端服务器之间的协同控制过程,以及提高数据处理效率和资源利用率。
24、应当理解,本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征,也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...
【技术保护点】
1.一种数据处理方法,其特征在于,应用于边缘计算设备,包括:
2.根据权利要求1所述的方法,其特征在于,获取待处理电力数据,包括:
3.根据权利要求1所述的方法,其特征在于,所述对所述待处理电力数据进行分类处理,确定所述待处理电力数据对应的分类结果,包括:
4.根据权利要求3所述的方法,其特征在于,所述基于预训练的联合分类模型对所述待处理电力数据进行分类处理,包括:
5.根据权利要求1所述的方法,其特征在于,在所述将所述分类结果满足第一条件的所述待处理电力数据传输至云端服务器之前,包括:
6.根据权利要求1所述的方法,其特征在于,所述将所述分类结果满足第二条件的所述待处理电力数据在所述边缘计算设备进行本地处理,得到所述待处理电力数据的处理结果,包括:
7.根据权利要求1所述的方法,其特征在于,所述云端服务器对所述待处理电力数据的处理结果包括负载预测结果、调整发电计划、负载转移策略和维护时间信息中的一项或多项;
8.一种数据处理装置,其特征在于,包括:
9.一种电子设备,其特征在于,所述电子设备包括:
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的数据处理方法。
...
【技术特征摘要】
1.一种数据处理方法,其特征在于,应用于边缘计算设备,包括:
2.根据权利要求1所述的方法,其特征在于,获取待处理电力数据,包括:
3.根据权利要求1所述的方法,其特征在于,所述对所述待处理电力数据进行分类处理,确定所述待处理电力数据对应的分类结果,包括:
4.根据权利要求3所述的方法,其特征在于,所述基于预训练的联合分类模型对所述待处理电力数据进行分类处理,包括:
5.根据权利要求1所述的方法,其特征在于,在所述将所述分类结果满足第一条件的所述待处理电力数据传输至云端服务器之前,包括:
6.根据权利要求1所述的方法,其特征在...
【专利技术属性】
技术研发人员:杨宇轩,林加毅,杨显志,杨康萍,刘子龙,
申请(专利权)人:南方电网数字电网科技广东有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。