分布式数据库系统、分布式数据处理方法和装置制造方法及图纸

技术编号:25438964 阅读:45 留言:0更新日期:2020-08-28 22:27
本发明专利技术公开了一种分布式数据库系统、分布式数据处理方法和装置,用以解决分布式系统的数据处理效率低的问题。本申请提供的系统包括:数据库中间件,用于接收用户端发送的第一数据处理请求,从分布式数据库系统的数据分库中确定第一数据处理请求所涉及的至少一个目标数据分库,并根据第一数据处理请求向至少一个目标数据分库下发第二数据处理请求,以及将至少一个目标数据分库返回的执行结果返回到用户端中;多个数据分库,用于根据接收到的第二数据处理请求执行数据处理操作,并将执行结果返回至数据库中间件。本方案中数据库中间件能将接收到的请求指向不同的数据库分库,能通过相对应的目标数据分库进行数据处理,提高数据处理效率。

【技术实现步骤摘要】
分布式数据库系统、分布式数据处理方法和装置
本专利技术涉及通信领域,尤其涉及一种分布式数据库系统、分布式数据处理方法和装置。
技术介绍
分布式系统是建立在网络之上的软件系统,其中可以存在多个计算机节点,但具有逻辑统一的特点。分布式系统可以动态的分配任务,分散的物理和逻辑资源能通过计算机网络实现信息交换。为了保证分布式系统全局事务的一致性,往往由一个管理节点负责分发及汇总,该管理节点无法分成多个进程并行执行,这就导致该管理节点的业务压力大,数据处理效率低。如何提高分布式系统的数据处理效率,是本申请所要解决的技术问题。
技术实现思路
本申请实施例的目的是提供一种分布式数据库系统、分布式数据处理方法和装置,用以解决分布式系统的数据处理效率低的问题。第一方面,提供了一种分布式数据库系统,包括:数据库中间件,用于接收用户端发送的第一数据处理请求,从所述分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库,并根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以及将所述至少一个目标数据分库返回的执行结果返回到所述用户端中;多个数据分库,用于根据接收到的第二数据处理请求执行数据处理操作,并将执行结果返回至所述数据库中间件。可选的,所述第一数据处理请求包括用于指示对所述待处理数据执行数据处理操作的处理类型,所述分布式数据库中的至少一个数据分库包括多个子分库;其中,所述数据库中间件还用于:根据所述第一处理请求中的所述处理类型,从所述目标数据分库的多个子分库中确定与所述处理类型相对应的目标子分库,根据所述第一数据处理请求向所述目标子分库下发第二数据处理请求;所述分布式数据库中的至少一个数据分库的子分库用于根据接收到的所述第二数据处理请求对所述待处理数据执行与所述处理类型相对应的数据处理操作。可选的,所述分布式数据库中的至少一个数据分库包括主库和从库;所述主库,用于根据所述第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作;所述从库,用于监听所述主库的运行状态,在所述主库处于异常运行状态时,根据所述第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作。第二方面,提供了一种分布式数据库系统,包括:用户端,用于向所述数据库中间件发送第一数据处理请求;数据库中间件,用于接收所述用户端发送的第一数据处理请求,从所述分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库,并根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求;多个数据分库,用于根据接收到的第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作。可选的,所述系统还包括:与所述分布式数据库通信连接的同步模块,用于将处理后的数据分库的数据发送至所述查询模块;与所述同步模块通信连接的查询模块,用于存储所述同步模块发送的处理后的数据分库的数据,并根据接收到的查询请求反馈数据分库的数据;其中,所述用户端还用于:向所述查询模块发送查询请求,所述查询请求包括待查询数据的信息。可选的,所述同步模块包括:与所述分布式数据库通信连接的分布式消息队列模块,用于获取所述处理后的数据分库的数据,将所述处理后的数据分库的数据发布至分布式消息队列;与所述分布式消息队列模块通信连接的异构数据同步模块,用于从所述分布式消息队列模块的分布式消息队列中获取所述处理后的数据库分库的数据,将所述处理后的数据库分库的数据发送至所述查询模块。第三方面,提供了一种分布式数据处理方法,包括:接收用户端发送的第一数据处理请求;从分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库;根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以指示所述至少一个目标数据分库根据接收到的所述第二数据处理请求对所述待处理数据执行数据处理操作;将所述至少一个目标数据分库返回的执行结果返回到所述用户端中。可选的,所述第一数据处理请求包括用于指示对所述待处理数据执行数据处理操作的处理类型,所述从分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库之后,还包括:根据所述第一处理请求中的所述处理类型,从所述目标数据分库的多个子分库中确定与所述处理类型相对应的目标子分库;其中,所述根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以指示所述至少一个目标数据分库根据接收到的所述第二数据处理请求对所述待处理数据执行数据处理操作,包括:根据所述第一数据处理请求向所述至少一个目标数据分库的目标子分库下发第二数据处理请求,以指示所述至少一个目标数据分库的目标子分库根据接收到的所述第二数据处理请求对所述待处理数据执行与所述处理类型相对应的数据处理操作。第四方面,提供了一种分布式数据处理装置,包括:接收模块,接收用户端发送的第一数据处理请求;确定模块,从分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库;发送模块,根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以指示所述至少一个目标数据分库根据接收到的所述第二数据处理请求对所述待处理数据执行数据处理操作;返回模块,将所述至少一个目标数据分库返回的执行结果返回到所述用户端中。第五方面,提供了一种电子设备,该电子设备包括处理器、存储器及存储在该存储器上并可在该处理器上运行的计算机程序,该计算机程序被该处理器执行时实现如第三方面该的方法的步骤。第六方面,提供了一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如第三方面该的方法的步骤。在本申请实施例中,系统包括数据库中间件和分布式数据库,其中,数据库中间件,用于接收第一数据处理请求,从分布式数据库中确定与第一数据处理请求相对应的至少一个目标数据分库,并根据第一数据处理请求向至少一个目标数据分库下发第二数据处理请求;分布式数据库,用于根据接收到的第二数据处理请求对目标数据分库的待处理数据执行数据处理操作。数据库中间件能将接收到的请求指向不同的数据库分库,达到对应用透明的目的。中间件与各个分库连通,能根据第一数据处理请求通过相对应的目标数据分库进行数据处理,提高数据处理效率。附图说明此处所说明的附图用来提供对本专利技术的进一步理解,构成本专利技术的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:图1是本专利技术的一个实施例分布式数据库系统的结构示意图之一;图2是本专利技术的一个实施例分布式数据库系统的结构示意图之二;图3是本专利技术的一个实施例分布式数据库系统的结构示意图之三;图4是本专利技术的一本文档来自技高网...

【技术保护点】
1.一种分布式数据库系统,其特征在于,包括:/n数据库中间件,用于接收用户端发送的第一数据处理请求,从所述分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库,并根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以及将所述至少一个目标数据分库返回的执行结果返回到所述用户端中;/n多个数据分库,用于根据接收到的第二数据处理请求执行数据处理操作,并将执行结果返回至所述数据库中间件。/n

【技术特征摘要】
1.一种分布式数据库系统,其特征在于,包括:
数据库中间件,用于接收用户端发送的第一数据处理请求,从所述分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库,并根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求,以及将所述至少一个目标数据分库返回的执行结果返回到所述用户端中;
多个数据分库,用于根据接收到的第二数据处理请求执行数据处理操作,并将执行结果返回至所述数据库中间件。


2.如权利要求1所述的系统,其特征在于,所述第一数据处理请求包括用于指示对所述待处理数据执行数据处理操作的处理类型,所述分布式数据库中的至少一个数据分库包括多个子分库;
其中,所述数据库中间件还用于:
根据所述第一处理请求中的所述处理类型,从所述目标数据分库的多个子分库中确定与所述处理类型相对应的目标子分库,根据所述第一数据处理请求向所述目标子分库下发第二数据处理请求;
所述分布式数据库中的至少一个数据分库的子分库用于根据接收到的所述第二数据处理请求对所述待处理数据执行与所述处理类型相对应的数据处理操作。


3.如权利要求1所述的系统,其特征在于,所述分布式数据库中的至少一个数据分库包括主库和从库;
所述主库,用于根据所述第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作;
所述从库,用于监听所述主库的运行状态,在所述主库处于异常运行状态时,根据所述第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作。


4.一种分布式数据库系统,其特征在于,包括:
用户端,用于向所述数据库中间件发送第一数据处理请求;
数据库中间件,用于接收所述用户端发送的第一数据处理请求,从所述分布式数据库系统的数据分库中确定所述第一数据处理请求所涉及的至少一个目标数据分库,并根据所述第一数据处理请求向所述至少一个目标数据分库下发第二数据处理请求;
多个数据分库,用于根据接收到的第二数据处理请求对所述目标数据分库的待处理数据执行数据处理操作。


5.如权利要求4所述的系统,其特征在于,还包括:
与所述分布式数据库通信连接的同步模块,用于将符合预设同步条件的至少部分处理后的数据分库的数据发送至所述查询模块;
与所述同步模块通信连接的查询模块,用于存储所述同步模块发送的处理后的数据分库的数据,并根据接收到的查询请求反馈数据分库的数据;
其中,所述用户端还用于:
向所述查询模块发送查询请求,所述查询请求包括待查询数据的信息。


6.如权利要求5所述的系统,其特征在于,所述同步模块包括:
与所述分布式数据库通信连接的分布式消息队列...

【专利技术属性】
技术研发人员:于灏张娜刘震孟庆峰欧创新杨猛刘皓刘松潘曦蔡雨佳
申请(专利权)人:中国人民财产保险股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1