System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 指标数据的处理方法、装置、设备及介质制造方法及图纸_技高网

指标数据的处理方法、装置、设备及介质制造方法及图纸

技术编号:43532467 阅读:3 留言:0更新日期:2024-12-03 12:17
本公开实施例涉及一种指标数据的处理方法、装置、设备及介质,其中该方法包括:通过代理组件获取数据监控模块根据代理组件的组件接口地址发送的数据采集请求,其中,代理组件在预先确定数据采集请求对应的多个目标服务实例满足预设实例聚合条件后,将组件接口地址发送给数据监控模块;通过代理组件获取与多个目标服务实例对应的多个指标数据集合;通过代理组件对多个指标数据集合进行聚合处理以获取至少一个聚合指标数据;向数据监控模块发送至少一个聚合指标数据。在本技术方案中,基于实例维度对数据监控模块监控指标数据进行聚合处理,提升了指标数据的监控效率,降低了存储指标数据的内存消耗。

【技术实现步骤摘要】

本公开涉及数据处理,尤其涉及一种指标数据的处理方法、装置、设备及介质


技术介绍

1、数据监控模块是一个开源的服务监控系统和时序数据库,在数据监控模块监控系统中,目标服务实例(target service instance)指的是数据监控模块server定期轮询以收集监控指标的具体服务或应用程序实例。这些实例可以是运行在不同机器上的服务、容器内的微服务、或者是同一台机器上的不同进程。

2、相关技术中,数据监控模块根据业务需求向目标服务实例发送数据采集请求,以实例维度来获取对应的指标数据。比如,数据监控模块根据业务需求向目标服务实例a、b、c发送数据采集请求,则获取到a对应的指标数据集合a,b对应的指标数据集合b,c对应的指标数据集合c。

3、相关技术中,读取的每个实例的数据集合可包含大量的指标数据,当实例数量较多时,获取到的指标数据量级更大,甚至可以达到百万量级,因此,可能会导致数据监控模块对指标数据的监控效率较低,对内存的资源消耗巨大等。


技术实现思路

1、为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种指标数据的处理方法、装置、设备及介质。

2、本公开实施例提供了一种指标数据的处理方法,所述方法应用在服务器中,所述服务器中预先安装了代理组件和数据监控模块,所述方法包括以下步骤:通过所述代理组件获取数据监控模块根据所述代理组件的组件接口地址发送的数据采集请求,其中,通过所述代理组件在预先确定所述数据采集请求对应的多个目标服务实例满足预设实例聚合条件后,预先将所述组件接口地址发送给所述数据监控模块;通过所述代理组件根据每个所述目标服务实例获取所述数据采集请求对应的指标数据集合,以获取与所述多个目标服务实例对应的多个指标数据集合;通过所述代理组件对所述多个指标数据集合进行聚合处理以获取至少一个聚合指标数据,其中,所述至少一个聚合指标数据的指标数据数量小于所述多个指标数据集合中包含的指标数据总数量;通过所述代理组件向所述数据监控模块发送所述至少一个聚合指标数据。

3、本公开实施例还提供了一种指标数据的处理装置,所述装置应用在服务器中,所述服务器中预先安装了代理组件和数据监控模块,所述装置,包括:第一获取模块,用于通过所述代理组件获取数据监控模块根据所述代理组件的组件接口地址发送的数据采集请求,其中,通过所述代理组件在预先确定所述数据采集请求对应的多个目标服务实例满足预设实例聚合条件后,预先将所述组件接口地址发送给所述数据监控模块;第二获取模块,用于通过所述代理组件根据每个所述目标服务实例获取所述数据采集请求对应的指标数据集合,以获取与所述多个目标服务实例对应的多个指标数据集合;聚合处理模块,用于通过所述代理组件对所述多个指标数据集合进行聚合处理以获取至少一个聚合指标数据,其中,所述至少一个聚合指标数据的指标数据数量小于所述多个指标数据集合中包含的指标数据总数量;发送模块,用于通过所述代理组件向所述数据监控模块发送所述至少一个聚合指标数据。

4、本公开实施例还提供了一种服务器,所述服务器包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现如本公开实施例提供的指标数据的处理方法。

5、本公开实施例还提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行如本公开实施例提供的指标数据的处理方法。

6、本公开实施例提供的技术方案与现有技术相比具有如下优点:

7、本公开实施例提供的指标数据的处理方案,通过代理组件获取数据监控模块根据代理组件的组件接口地址发送的数据采集请求,其中,代理组件在预先确定数据采集请求对应的多个目标服务实例满足预设实例聚合条件后,预先将组件接口地址发送给数据监控模块,进而,通过代理组件根据每个目标服务实例获取数据采集请求对应的指标数据集合,以获取与多个目标服务实例对应的多个指标数据集合,通过代理组件对多个指标数据集合进行聚合处理以获取至少一个聚合指标数据,其中,至少一个聚合指标数据的指标数据数量小于多个指标数据集合中包含的指标数据总数量,向数据监控模块发送至少一个聚合指标数据。由此,基于实例维度对数据监控模块监控指标数据进行聚合处理,提升了指标数据的监控效率,降低了存储指标数据的内存消耗。

本文档来自技高网...

【技术保护点】

1.一种指标数据的处理方法,其特征在于,所述方法应用在服务器中,所述服务器中预先安装了代理组件和数据监控模块,所述方法包括以下步骤:

2.如权利要求1所述的方法,其特征在于,在所述通过所述代理组件获取数据监控模块根据所述代理组件的组件接口地址发送的数据采集请求之前,还包括:

3.如权利要求2所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例是否满足所述预设实例聚合条件,包括:

4.如权利要求2所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例是否满足所述预设实例聚合条件,包括:

5.如权利要求4所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例中每个目标服务实例的数据量级,包括:

6.如权利要求1-5任一所述的方法,其特征在于,所述通过所述代理组件对所述多个指标数据集合进行聚合处理以获取至少一个聚合指标数据,包括:

7.如权利要求6所述的方法,其特征在于,所述通过所述代理组件对所述至少一个所述候选数据集合聚合,以获取所述至少一个聚合指标数据,包括:

8.一种指标数据的处理装置,其特征在于,所述装置应用在服务器中,所述服务器中预先安装了代理组件和数据监控模块,所述装置,包括:

9.一种服务器,其特征在于,所述服务器包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1-7中任一所述的指标数据的处理方法。

...

【技术特征摘要】

1.一种指标数据的处理方法,其特征在于,所述方法应用在服务器中,所述服务器中预先安装了代理组件和数据监控模块,所述方法包括以下步骤:

2.如权利要求1所述的方法,其特征在于,在所述通过所述代理组件获取数据监控模块根据所述代理组件的组件接口地址发送的数据采集请求之前,还包括:

3.如权利要求2所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例是否满足所述预设实例聚合条件,包括:

4.如权利要求2所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例是否满足所述预设实例聚合条件,包括:

5.如权利要求4所述的方法,其特征在于,所述通过所述代理组件确定所述多个目标服务实例中每个目标服务实例的数据...

【专利技术属性】
技术研发人员:张羽
申请(专利权)人:北京奇艺世纪科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1