一种基于多实例的任务处理方法及装置制造方法及图纸

技术编号:36934548 阅读:14 留言:0更新日期:2023-03-22 18:56
本发明专利技术公开了一种基于多实例的任务处理方法及装置,涉及计算机技术领域。该方法的一具体实施方式包括:确定待处理任务、待处理任务对应的一个或多个上游任务以及每一个所述上游任务对应的多个上游实例;接收多个上游实例分别发送的上游任务的第一处理标识,第一处理标识包括:上游任务标识、上游任务对应的实例总数量以及第一处理标识的序号;根据第一处理标识,确定是否接收到一个或多个上游任务对应的所有处理标识;如果是,根据第一处理标识执行待处理任务,将待处理任务的第二处理标识分别发送给下游任务对应的一个或多个下游实例,并结束当前实例。该实施方式中上下游实例之间基于处理标识的传递实现了实例的安全结束。束。束。

【技术实现步骤摘要】
一种基于多实例的任务处理方法及装置


[0001]本专利技术涉及计算机
,尤其涉及一种基于多实例的任务处理方法及装置。

技术介绍

[0002]在使用消息中间件处理任务的过程中,常见的模式是上游任务将自身的结果输出给下游任务,下游任务需要收集完上级任务的所有输出结果后才能继续某些操作(如结束自身的任务或者生成汇总数据等)。
[0003]为了提高任务并发效率,上下游任务一般均对应有多个实例,那么上游的各个实例可能将结果分别发送给下游的各个实例,因此亟需一种机制确保上游的多个实例均输出结果后,下游的实例再安全结束。

技术实现思路

[0004]有鉴于此,本专利技术实施例提供一种基于多实例的任务处理方法及装置,能够根据与待处理任务对应的多个上游实例之间的通信通道,接收多个上游实例分别发送的上游任务的第一处理标识,该第一处理标识中包括上游任务标识、上游任务对应的实例总数量以及第一处理标识的序号,然后在确定接收到上游任务的所有处理标识后,将待处理任务的第二处理标识发送给下游实例,再结束当前实例。由此实现了当前实例在接收到上游任务的所有处理标识后才结束自身,也即上下游实例之间基于处理标识的传递实现了实例的安全结束。
[0005]为实现上述目的,根据本专利技术实施例的一个方面,提供了一种基于多实例的任务处理方法。
[0006]本专利技术实施例的一种基于多实例的任务处理方法包括:确定待处理任务、所述待处理任务对应的一个或多个上游任务以及每一个所述上游任务对应的多个上游实例;接收所述多个上游实例分别发送的上游任务的第一处理标识,所述第一处理标识包括:上游任务标识、上游任务对应的实例总数量以及所述第一处理标识的序号;根据所述第一处理标识,确定是否接收到所述一个或多个上游任务对应的所有处理标识;如果是,根据所述第一处理标识执行所述待处理任务,将所述待处理任务的第二处理标识分别发送给下游任务对应的一个或多个下游实例,并结束当前实例。
[0007]可选地,根据所述第一处理标识和所述当前实例消费的当前消息标识生成事务,并将所述事务提交到消息系统。
[0008]可选地,在所述当前实例发生高可用切换后,还包括:从所述消息系统中提取已提交的所述第一处理标识,并根据所述当前消息标识继续执行所述待处理任务,任务执行中所处理的数据包括业务数据和剩余的第一处理标识。
[0009]可选地,在执行所述待处理任务的目标实例为多个的情况下,所述第二处理标识
包括:所述待处理任务标识、所述目标实例的总数量以及所述当前实例的序号。
[0010]可选地,将每一个所述目标实例作为所述当前实例:在确定接收到所述上游任务对应的所有处理标识后,结束所述当前实例。
[0011]可选地,所述根据所述第一处理标识,确定是否接收到所述上游任务对应的所有处理标识,包括:确定同一个所述上游任务标识对应的一个或多个第一处理标识,并确定所述一个或多个第一处理标识的总数量是否等于所述上游任务对应的实例总数量;如果是,确定接收到所述上游任务对应的所有处理标识。
[0012]为实现上述目的,根据本专利技术实施例的又一方面,提供了一种基于多实例的任务处理装置。
[0013]本专利技术实施例的一种基于多实例的任务处理装置包括:确定模块、标识接收模块和标识发送模块;其中,所述确定模块,用于确定待处理任务、所述待处理任务对应的一个或多个上游任务以及每一个所述上游任务对应的多个上游实例;所述标识接收模块,用于接收所述多个上游实例分别发送的上游任务的第一处理标识,所述第一处理标识包括:上游任务标识、上游任务对应的实例总数量以及所述第一处理标识的序号;所述标识发送模块,用于根据所述第一处理标识,确定是否接收到所述一个或多个上游任务对应的所有处理标识;如果是,根据所述第一处理标识执行所述待处理任务,将所述待处理任务的第二处理标识分别发送给下游任务对应的一个或多个下游实例,并结束当前实例。
[0014]可选地,该装置还包括:处理模块;其中,所述处理模块,用于根据所述第一处理标识和所述当前实例消费的当前消息标识生成事务,并将所述事务提交到消息系统;在所述当前实例发生高可用切换后,从所述消息系统中提取已提交的所述第一处理标识,并根据所述当前消息标识继续执行所述待处理任务,任务执行中所处理的数据包括业务数据和剩余的第一处理标识。
[0015]为实现上述目的,根据本专利技术实施例的又一方面,提供了一种基于多实例处理任务的电子设备。
[0016]本专利技术实施例的一种基于多实例处理任务的电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本专利技术实施例的一种基于多实例的任务处理方法。
[0017]为实现上述目的,根据本专利技术实施例的再一方面,提供了一种计算机可读存储介质。
[0018]本专利技术实施例的一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现本专利技术实施例的一种基于多实例的任务处理方法。
[0019]上述专利技术中的一个实施例具有如下优点或有益效果:能够根据与待处理任务对应的多个上游实例之间的通信通道,接收多个上游实例分别发送的上游任务的第一处理标识,该第一处理标识中包括上游任务标识、上游任务对应的实例总数量以及第一处理标识的序号,然后在确定接收到上游任务的所有处理标识后,将待处理任务的第二处理标识发
送给下游实例,再结束当前实例。由此实现了当前实例在接收到上游任务的所有处理标识后才结束自身,也即上下游实例之间基于处理标识的传递实现了实例的安全结束。
[0020]上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
[0021]附图用于更好地理解本专利技术,不构成对本专利技术的不当限定。其中:图1是根据本专利技术实施例的一种基于多实例的任务处理方法的主要步骤的示意图;图2是根据本专利技术实施例的一种基于多实例的任务处理装置的主要模块的示意图;图3是本专利技术实施例可以应用于其中的示例性系统架构图;图4是适于用来实现本专利技术实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
[0022]以下结合附图对本专利技术的示范性实施例做出说明,其中包括本专利技术实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本专利技术的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0023]需要指出的是,在不冲突的情况下,本专利技术的实施例以及实施例中的技术特征可以相互结合。
[0024]在使用消息中间件(如Kafka)进行业务处理的场景中,常见的模式是一些任务处理消息后将结果发给下游任务继续处理。假设上游的两个任务为任务A和任务B,下游任务为任务C。在一些场景下,任务C需要在收集完任务A和任务B的输出结果后才可以做一些操作,比如结束自身的任务或者生成汇总数据等本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于多实例的任务处理方法,其特征在于,包括:确定待处理任务、所述待处理任务对应的一个或多个上游任务以及每一个所述上游任务对应的多个上游实例;接收所述多个上游实例分别发送的上游任务的第一处理标识,所述第一处理标识包括:上游任务标识、上游任务对应的实例总数量以及所述第一处理标识的序号;根据所述第一处理标识,确定是否接收到所述一个或多个上游任务对应的所有处理标识;如果是,根据所述第一处理标识执行所述待处理任务,将所述待处理任务的第二处理标识分别发送给下游任务对应的一个或多个下游实例,并结束当前实例。2.根据权利要求1所述的方法,其特征在于,还包括:根据所述第一处理标识和所述当前实例消费的当前消息标识生成事务,并将所述事务提交到消息系统。3.根据权利要求2所述的方法,其特征在于,在所述当前实例发生高可用切换后,还包括:从所述消息系统中提取已提交的所述第一处理标识,并根据所述当前消息标识继续执行所述待处理任务,任务执行中所处理的数据包括业务数据和剩余的第一处理标识。4.根据权利要求1所述的方法,其特征在于,在执行所述待处理任务的目标实例为多个的情况下,所述第二处理标识包括:所述待处理任务标识、所述目标实例的总数量以及所述当前实例的序号。5.根据权利要求4所述的方法,其特征在于,将每一个所述目标实例作为所述当前实例:在确定接收到所述上游任务对应的所有处理标识后,结束所述当前实例。6.根据权利要求1所述的方法,其特征在于,所述根据所述第一处理标识,确定是否接收到所述一个或多个上游任务对应的所有处理标识,包括:针对每一个所述上游任务:确定已接收到的第一处理标识的数量是否等于所述上游任务对应的实例总数量;如果是,确...

【专利技术属性】
技术研发人员:侯德才柳兆飞
申请(专利权)人:中国证券登记结算有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1