System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 日志任务处理方法、装置、设备、存储介质和程序产品制造方法及图纸_技高网

日志任务处理方法、装置、设备、存储介质和程序产品制造方法及图纸

技术编号:44677419 阅读:3 留言:0更新日期:2025-03-19 20:30
本申请涉及一种日志任务处理方法、装置、设备、存储介质和程序产品。所述方法包括:获取任务管理节点发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;根据目标区域标识和候选日志任务对应的区域标识,从候选日志任务中选择与目标区域标识相匹配的区域任务;对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新;其中,心跳参数的参数值变化用于表征任务的分配情况;根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择第二日志任务;向任务管理节点下发第一日志任务和第二日志任务。采用本方法能够及时对日志任务做出响应。

【技术实现步骤摘要】

本申请涉及计算机,特别是涉及一种日志任务处理方法、装置、设备、存储介质和程序产品


技术介绍

1、随着云服务的不断壮大,对高性能弹性计算服务节点的需求与日俱增,随之而来的异常场景也越来越多。日志文件是应用系统操作事件的记录文件或文件集合,包含整个应用系统的运行日志、故障日志等,由多条日志记录构成,因此,日志文件的记录及读取对于应用系统的维护及问题的检测至关重要。

2、目前对日志文件进行写入(记录)及读取(查询)等操作的效率低下,特别是在日志文件较大时,容易造成读写任务严重排队、系统瘫痪等问题,进而影响日志文件的写入和读取等任务。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种日志任务处理方法、装置、设备、存储介质和程序产品,能够及时对日志任务做出响应。

2、第一方面,本申请提供了一种日志任务处理方法,应用于日志管理服务端,该方法包括:

3、获取任务管理节点发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

4、根据目标区域标识和候选日志任务对应的区域标识,从候选日志任务中选择与目标区域标识相匹配的区域任务;

5、对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新;其中,心跳参数的参数值变化用于表征任务的分配情况;

6、根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择第二日志任务;

7、向任务管理节点下发第一日志任务和第二日志任务。

8、在其中一个实施例中,根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择第二日志任务,包括:

9、根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择待分配任务;对待分配任务的心跳参数进行更新,并将心跳参数更新成功的待分配任务,作为第二日志任务。

10、在其中一个实施例中,根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择待分配任务,包括:

11、针对其余任务中的每一任务,将任务的任务标识与任务管理节点数量进行取余操作,得到余数;在余数等于任务管理节点的节点标识的情况下,将任务作为待分配任务。

12、在其中一个实施例中,对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新,包括:

13、从区域任务中,选择与已分配任务信息关联的第一日志任务;将第一日志任务的心跳参数的取值更新为任务拉取请求的接收时间。

14、第二方面,本申请提供了一种日志任务处理方法,应用于任务管理节点,该方法包括:

15、向日志管理服务端发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

16、接收日志管理服务端下发的第一日志任务和第二日志任务;其中,第一日志任务是区域任务中与已分配任务信息关联的任务,区域任务是候选日志任务中与目标区域标识相匹配的区域任务;第二日志任务是根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择的。

17、在其中一个实施例中,还包括:

18、根据第一日志任务和第二日志任务,对本地任务列表进行更新。

19、在其中一个实施例中,还包括:

20、调用协程池中的协程,执行本地任务列表中的任务。

21、在其中一个实施例中,还包括:

22、确定本地任务列表中的任务数量与协程池中协程数量之间的比值;在比值大于设定阈值的情况下,对任务管理节点进行扩容处理。

23、第三方面,本申请还提供了一种日志任务处理装置,该装置包括:

24、获取模块,用于获取任务管理节点发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

25、第一选择模块,用于根据目标区域标识和候选日志任务对应的区域标识,从候选日志任务中选择与目标区域标识相匹配的区域任务;

26、心跳更新模块,用于对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新;其中,心跳参数的参数值变化用于表征任务的分配情况;

27、第二选择模块,用于根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择第二日志任务;

28、任务下发模块,用于向任务管理节点下发第一日志任务和第二日志任务。

29、第四方面,本申请还提供了一种日志任务处理装置,该装置包括:

30、发送请求模块,用于向日志管理服务端发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

31、任务接收模块,用于接收日志管理服务端下发的第一日志任务和第二日志任务;其中,第一日志任务是区域任务中与已分配任务信息关联的任务,区域任务是候选日志任务中与目标区域标识相匹配的区域任务;第二日志任务是根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择的。

32、第五方面,本申请还提供了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:

33、获取任务管理节点发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

34、根据目标区域标识和候选日志任务对应的区域标识,从候选日志任务中选择与目标区域标识相匹配的区域任务;

35、对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新;其中,心跳参数的参数值变化用于表征任务的分配情况;

36、根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务之外的其余任务的任务标识,从其余任务中选择第二日志任务;

37、向任务管理节点下发第一日志任务和第二日志任务。

38、第六方面,本申请还提供了另一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:

39、获取任务管理节点发送的任务拉取请求;其中,任务拉取请求携带有目标区域标识和已分配任务信息;

40、根据目标区域标识和候选日志任务对应的区域标识,从候选日志任务中选择与目标区域标识相匹配的区域任务;

41、对区域任务中与已分配任务信息关联的第一日志任务的心跳参数进行更新;其中,心跳参数的参数值变化用于表征任务的分配情况;

42、根据任务管理节点数量、任务管理节点的节点标识,以及区域任务中除第一日志任务本文档来自技高网...

【技术保护点】

1.一种日志任务处理方法,其特征在于,应用于日志管理服务端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据任务管理节点数量、所述任务管理节点的节点标识,以及所述区域任务中除所述第一日志任务之外的其余任务的任务标识,从所述其余任务中选择第二日志任务,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据任务管理节点数量、所述任务管理节点的节点标识,以及所述区域任务中除所述第一日志任务之外的其余任务的任务标识,从所述其余任务中选择待分配任务,包括:

4.根据权利要求1所述的方法,其特征在于,所述对所述区域任务中与所述已分配任务信息关联的第一日志任务的心跳参数进行更新,包括:

5.一种日志任务处理方法,其特征在于,应用于任务管理节点,所述方法包括:

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:

7.根据权利要求6所述的方法,其特征在于,所述方法还包括:

8.根据权利要求7所述的方法,其特征在于,所述方法还包括:

9.一种日志任务处理装置,其特征在于,所述装置包括:

10.一种日志任务处理装置,其特征在于,所述装置包括:

...

【技术特征摘要】

1.一种日志任务处理方法,其特征在于,应用于日志管理服务端,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据任务管理节点数量、所述任务管理节点的节点标识,以及所述区域任务中除所述第一日志任务之外的其余任务的任务标识,从所述其余任务中选择第二日志任务,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据任务管理节点数量、所述任务管理节点的节点标识,以及所述区域任务中除所述第一日志任务之外的其余任务的任务标识,从所述其余任务中选择待分配任务,包括:

4.根据权利要求1所述的方...

【专利技术属性】
技术研发人员:陈佳烁
申请(专利权)人:天翼云科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1