基于云计算的大数据统一分析处理系统技术方案

技术编号:33638890 阅读:15 留言:0更新日期:2022-06-02 01:56
本发明专利技术涉及数据处理技术领域,具体涉及基于云计算的大数据统一分析处理系统;数据采集终端、数据处理单元、数据分析单元、预警提醒单元以及结果展示单元;本发明专利技术对各数据进行统一化处理,并进行统一化验证,将未完成统一化的数据重新返回数据统一模块进行重新统一化处理,从而能够有效的保证数据统一化处理的准确性,管理人员能够输入所需分析的数据类型以及预警的设定阈值,根据管理人员的输入的信息,对数据进行筛选,并基于云计算进行大数据的分析,将分析结果通过结果展示单元进行显示,使得管理人员能够查看数据的分析结果,同时,根据设定的预警阈值,对分析结果进行预警分析,由预警提醒单元发出预警提醒。由预警提醒单元发出预警提醒。由预警提醒单元发出预警提醒。

【技术实现步骤摘要】
基于云计算的大数据统一分析处理系统


[0001]本专利技术涉及数据处理
,具体涉及基于云计算的大数据统一分析处理系统。

技术介绍

[0002]云计算,是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序,再交由多部服务器所组成的庞大系统经搜寻、计算分析之后将处理结果回传给用户。
[0003]数据处理贯穿于社会生产和社会生活的各个领域。数据处理技术的发展及其应用的广度和深度,极大地影响了人类社会发展的进程,数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据。
[0004]在专利申请号为CN201710542792.9的“一种基于云计算的大数据分析平台”专利中,在说明书中记载有“该大数据分析平台包括:资源获取模块和训练模块;资源获取模块,用于从云计算环境中获取目标资源,并将获取的目标资源发送至训练模块;训练模块,利用基于区域的卷积神经网络目标检测算法Faster

RCNN,对所述目标资源进行训练,将训练的结果作为分析结果输出。应用本专利技术实施例所提供的大数据分析平台,能够快速、高效、及时地对云计算网络环境中海量的数据资源进行分析处理,为设备安全、稳定、高效地运行提供有序的保障”,但是上述专利所提供的系统,虽然具有数据处理的功能,但是其缺少对于数据的统一化处理,同时,在整个数据处理过程中,难以结合管理人员的需求进行分析,也不能够根据管理需求进行分析预警,无法满足使用者的使用需求。
[0005]综上所述,研发基于云计算的大数据统一分析处理系统,仍是数据处理
中急需解决的关键问题。

技术实现思路

[0006]针对现有技术所存在的上述缺点,本专利技术在于提供基于云计算的大数据统一分析处理系统,本专利技术对各数据进行统一化处理,并进行统一化验证,将未完成统一化的数据重新返回数据统一模块进行重新统一化处理,从而能够有效的保证数据统一化处理的准确性,管理人员能够输入所需分析的数据类型以及预警的设定阈值,根据管理人员的输入的信息,对数据进行筛选,并基于云计算进行大数据的分析,将分析结果通过结果展示单元进行显示,使得管理人员能够查看数据的分析结果,同时,根据设定的预警阈值,对分析结果进行预警分析,由预警提醒单元发出预警提醒。
[0007]为实现上述目的,本专利技术提供了如下技术方案:基于云计算的大数据统一分析处理系统,包括数据采集终端、数据处理单元、数据分析单元和预警提醒单元,其中:所述数据采集终端用于获取所需的数据,并将数据传输给数据处理单元;所述数据处理单元用于对接收的数据进行统一化处理,对统一化处理后的数据进
行验证和存储,所述数据处理单元与数据采集终端连接;所述数据分析单元按照分析设定,基于云计算对统一化后的数据进行分析以及对分析结果进行存储,所述数据分析单元与数据处理单元连接;所述预警提醒单元用于接收数据分析单元的预警指令,并发出预警提醒,所述预警提醒单元与数据分析单元连接。
[0008]本专利技术进一步设置为:还包括结果展示单元,所述结果展示单元用于展示大数分析的结果。
[0009]本专利技术进一步设置为:所述数据分析单元还用于根据分析结果发出预警指令。
[0010]本专利技术进一步设置为:所述数据采集终端包括数据获取模块和数据传输模块,其中:所述数据获取模块用于采集获取所需的数据;所述数据传输模块用于将数据获取模块采集的数据传输给数据处理单元,所述数据传输模块与数据获取模块连接。
[0011]本专利技术进一步设置为:所述数据处理单元包括数据统一模块和第一存储模块,其中:所述数据统一模块用于将各采集的数据按照统一的格式进行统一化,所述数据统一模块与数据传输模块连接;所述第一存储模块用于对统一化的数据进行存储,所述第一存储模块与数据统一模块连接。
[0012]本专利技术进一步设置为:所述数据处理单元还包括数据验证模块,所述数据验证模块用于调取统一化验证标准,对统一化后的数据进行验证。
[0013]本专利技术进一步设置为:所述数据分析单元包括管理输入模块、数据筛选模块、云计算模块和第二存储模块,其中:所述管理输入模块用于管理人数输入所需分析的数据类型;所述数据筛选模块根据筛选设定,从大数据中筛选出待分析的数据,所述数据筛选模块与数据验证模块连接;所述云计算模块基于云计算实现对大数据的分析,所述云计算模块与数据筛选模块连接;所述第二存储模块用于存储筛选的大数据以及大数据分析结果,所述第二存储模块与数据筛选模块和云计算模块连接。
[0014]本专利技术进一步设置为:所述数据分析单元还包括预警对比模块,所述预警对比模块根据设定的各预计阈值,对分析的大数据结果进行预警分析,并下达预警指令,所述预警对比模块与管理输入模块、云计算模块以及预警提醒单元均连接。
[0015]有益效果采用本专利技术提供的技术方案,与已知的公有技术相比,具有如下有益效果:本专利技术通过数据获取模块获取数据,将数据通过数据传输模块传输给数据处理单元,在数据处理单元内由数据统一模块对各数据进行统一化处理,并进行统一化验证,将未完成统一化的数据重新返回数据统一模块进行重新统一化处理,至全部数据均完成统一化处理,从而能够有效的保证数据统一化处理的准确性,以便后续对数据进行分析,经过统一
化处理后的数据,会传输给数据分析单元,管理人员能够输入所需分析的数据类型以及预警的设定阈值,根据管理人员的输入的信息,对数据进行筛选,并基于云计算进行大数据的分析,将分析结果通过结果展示单元进行显示,使得管理人员能够查看数据的分析结果,同时,根据设定的预警阈值,对分析结果进行预警分析,由预警提醒单元发出预警提醒。
附图说明
[0016]图1为基于云计算的大数据统一分析处理系统的系统图;图2为基于云计算的大数据统一分析处理系统中数据采集终端的示意图;图3为基于云计算的大数据统一分析处理系统中数据处理单元的示意图;图4为基于云计算的大数据统一分析处理系统中数据分析单元的示意图。
[0017]图中标号说明:100、数据采集终端;110、数据获取模块;120、数据传输模块;200、数据处理单元;210、数据统一模块;220、第一存储模块;230、数据验证模块;300、数据分析单元;310、管理输入模块;320、数据筛选模块;330、云计算模块;340、第二存储模块;350、预警对比模块;400、预警提醒单元;500、结果展示单元。
具体实施方式
[0018]下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述;显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例,基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。
[0019]在本专利技术的描述中,需要说明的是,术语“上”、“下”、“内”、“外”、“顶/底端”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本专利技术和简化描述,而不是指示或暗本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.基于云计算的大数据统一分析处理系统,其特征在于,包括数据采集终端(100)、数据处理单元(200)、数据分析单元(300)和预警提醒单元(400),其中:所述数据采集终端(100)用于获取所需的数据,并将数据传输给数据处理单元(200);所述数据处理单元(200)用于对接收的数据进行统一化处理,对统一化处理后的数据进行验证和存储,所述数据处理单元(200)与数据采集终端(100)连接;所述数据分析单元(300)按照分析设定,基于云计算对统一化后的数据进行分析以及对分析结果进行存储,所述数据分析单元(300)与数据处理单元(200)连接;所述预警提醒单元(400)用于接收数据分析单元(300)的预警指令,并发出预警提醒,所述预警提醒单元(400)与数据分析单元(300)连接。2.根据权利要求1所述的基于云计算的大数据统一分析处理系统,其特征在于,还包括结果展示单元(500),所述结果展示单元(500)用于展示大数分析的结果。3.根据权利要求1所述的基于云计算的大数据统一分析处理系统,其特征在于,所述数据分析单元(300)还用于根据分析结果发出预警指令。4.根据权利要求1所述的基于云计算的大数据统一分析处理系统,其特征在于,所述数据采集终端(100)包括数据获取模块(110)和数据传输模块(120),其中:所述数据获取模块(110)用于采集获取所需的数据;所述数据传输模块(120)用于将数据获取模块(110)采集的数据传输给数据处理单元(200),所述数据传输模块(120)与数据获取模块(110)连接。5.根据权利要求4所述的基于云计算的大数据统一分析处理系统,其特征在于,所述数据处理单元(200)包括数据统一模块(210)和第一存储模...

【专利技术属性】
技术研发人员:李晶霞
申请(专利权)人:合肥科易果信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1