判断Clickhouse数据是否异常的方法及设备技术

技术编号:29310198 阅读:16 留言:0更新日期:2021-07-17 02:12
本申请涉及一种判断Clickhouse数据是否异常的方法,包括:获取预设时间段内的Clickhouse数据。根据预设时间段内的Clickhouse数据,分析Clickhouse数据的整体走势。如果需要判断当前生成的Clickhouse数据是否异常,则获取当前生成的Clickhouse数据,判断当前生成的Clickhouse数据是否符合Clickhouse数据的整体走势即可,若当前生成的Clickhouse数据符合Clickhouse数据的整体走势,则判断当前生成的Clickhouse数据正常,若当前生成的Clickhouse数据不符合Clickhouse数据的整体走势,则判断当前生成的Clickhouse数据出现异常。相较于现有技术中手动查询表中的数据,按天进行数据对比更加快捷方便。按天进行数据对比更加快捷方便。按天进行数据对比更加快捷方便。

Method and equipment for judging whether the Clickhouse data is abnormal

【技术实现步骤摘要】
判断Clickhouse数据是否异常的方法及设备


[0001]本申请涉及IT
,尤其涉及一种判断Clickhouse数据是否异常的方法及设备。

技术介绍

[0002]Clickhouse一般用来存储离线日志的数据,但是存储之后,并不能直接确定数据是否存在异常。现有技术中,如果需要确定数据是否存在异常需要手动查询表中的数据,按天进行数据对比,查询出存在异常数据的天,这种方式无疑浪费人力物力。

技术实现思路

[0003]为至少在一定程度上克服相关技术中不能直接确定数据是否存在异常的问题,本申请提供一种判断Clickhouse数据是否异常的方法及设备。
[0004]本申请的方案如下:
[0005]根据本申请实施例的第一方面,提供一种判断Clickhouse数据是否异常的方法,包括:
[0006]获取预设时间段内的Clickhouse数据;
[0007]根据所述预设时间段内的Clickhouse数据,分析Clickhouse数据的整体走势;
[0008]获取当前生成的Clickhouse数据;
[0009]判断当前生成的Clickhouse数据是否符合所述Clickhouse数据的整体走势;
[0010]若所述当前生成的Clickhouse数据符合所述Clickhouse数据的整体走势,则判断所述当前生成的Clickhouse数据正常;若所述当前生成的Clickhouse数据不符合所述Clickhouse数据的整体走势,则判断所述当前生成的Clickhouse数据出现异常。
[0011]优选的,在本申请一种可实现的方式中,所述预设时间段为7天。
[0012]优选的,在本申请一种可实现的方式中,所述判断当前生成的Clickhouse数据是否符合所述Clickhouse数据的整体走势,具体包括:
[0013]判断当前生成的Clickhouse数据是否偏离所述Clickhouse数据的整体走势超过预设阈值。
[0014]优选的,在本申请一种可实现的方式中,所述预设阈值为30%。
[0015]优选的,在本申请一种可实现的方式中,所述判断当前生成的Clickhouse数据是否偏离所述Clickhouse数据的整体走势超过预设阈值,具体包括:
[0016]判断当前生成的Clickhouse数据是否超过或低于所述Clickhouse数据的整体走势的30%。
[0017]优选的,在本申请一种可实现的方式中,还包括:若所述当前生成的Clickhouse数据出现异常,则通过预设方式通知研发人员进行修复。
[0018]优选的,在本申请一种可实现的方式中,所述预设方式为邮件或短信。
[0019]根据本申请实施例的第二方面,提供一种判断Clickhouse数据是否异常的设备,
包括:
[0020]处理器和存储器;
[0021]所述处理器与存储器通过通信总线相连接:
[0022]其中,所述处理器,用于调用并执行所述存储器中存储的程序;
[0023]所述存储器,用于存储程序,所述程序至少用于执行以上任一项所述的一种判断Clickhouse数据是否异常方法。
[0024]本申请提供的技术方案可以包括以下有益效果:本申请中判断Clickhouse数据是否异常的方法,包括:获取预设时间段内的Clickhouse数据。根据预设时间段内的Clickhouse数据,分析Clickhouse数据的整体走势。如果需要判断当前生成的Clickhouse数据是否异常,则获取当前生成的Clickhouse数据,判断当前生成的Clickhouse数据是否符合Clickhouse数据的整体走势即可,若当前生成的Clickhouse数据符合Clickhouse数据的整体走势,则判断当前生成的Clickhouse数据正常,若当前生成的Clickhouse数据不符合Clickhouse数据的整体走势,则判断当前生成的Clickhouse数据出现异常。相较于现有技术中手动查询表中的数据,按天进行数据对比更加快捷方便。
[0025]应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
[0026]此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
[0027]图1是本申请一个实施例提供的判断Clickhouse数据是否异常的方法的流程示意图;
[0028]图2是本申请一个实施例提供的判断Clickhouse数据是否异常的设备的结构示意图。
[0029]附图标记:处理器

21;存储器

22。
具体实施方式
[0030]这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
[0031]一种判断Clickhouse数据是否异常的方法,参照图1,包括:
[0032]S11:获取预设时间段内的Clickhouse数据;
[0033]Clickhouse数据一般用来存储离线日志的数据,现有技术中,Clickhouse数据存储之后,并不能直接确定数据是否存在异常。
[0034]优选的,预设时间段为7天。即,获取7天内的Clickhouse数据用以分析Clickhouse数据的整体走势。
[0035]S12:根据预设时间段内的Clickhouse数据,分析Clickhouse数据的整体走势;
[0036]优选的,可以根据预设时间段内的Clickhouse数据,分析生成Clickhouse数据的
整体走势图,以更直观的显示Clickhouse数据的整体走势,方便研发人员查看。
[0037]S13:获取当前生成的Clickhouse数据;
[0038]当前生成的Clickhouse数据一般指当日生成的Clickhouse数据。
[0039]S14:判断当前生成的Clickhouse数据是否符合Clickhouse数据的整体走势;
[0040]判断当前生成的Clickhouse数据是否符合Clickhouse数据的整体走势,具体包括:
[0041]判断当前生成的Clickhouse数据是否偏离Clickhouse数据的整体走势超过预设阈值。
[0042]优选的,预设阈值为30%。也可以根据具体需要进行调整,但是预设阈值不宜过高,否则将失去判断意义。若需根据具体需要调整阈值,优先以30%为限向下调整。
[0043]具体的,判断当前生成的Clickhouse数据是否超过或低于Clickhouse数据的整体本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种判断Clickhouse数据是否异常的方法,其特征在于,包括:获取预设时间段内的Clickhouse数据;根据所述预设时间段内的Clickhouse数据,分析Clickhouse数据的整体走势;获取当前生成的Clickhouse数据;判断当前生成的Clickhouse数据是否符合所述Clickhouse数据的整体走势;若所述当前生成的Clickhouse数据符合所述Clickhouse数据的整体走势,则判断所述当前生成的Clickhouse数据正常;若所述当前生成的Clickhouse数据不符合所述Clickhouse数据的整体走势,则判断所述当前生成的Clickhouse数据出现异常。2.根据权利要求1所述的方法,其特征在于,所述预设时间段为7天。3.根据权利要求1所述的方法,其特征在于,所述判断当前生成的Clickhouse数据是否符合所述Clickhouse数据的整体走势,具体包括:判断当前生成的Clickhouse数据是否偏离所述Clickhouse数据的...

【专利技术属性】
技术研发人员:张康
申请(专利权)人:广州欢网科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1