数据处理方法及装置制造方法及图纸

技术编号:33738579 阅读:56 留言:0更新日期:2022-06-08 21:36
本申请提供数据处理方法及装置,其中所述数据处理方法包括:接收数据读取请求,其中,所述数据读取请求中携带有查询参数和目标数据标识,所述查询参数基于目标数据的时效信息确定;根据所述查询参数在所述分布式数据库集群中确定目标数据库;基于所述目标数据标识在所述目标数据库中获取目标数据。述目标数据库中获取目标数据。述目标数据库中获取目标数据。

【技术实现步骤摘要】
数据处理方法及装置


[0001]本申请涉及计算机
,特别涉及数据处理方法。本申请同时涉及数据处理装置,一种计算设备,以及一种计算机可读存储介质。

技术介绍

[0002]随着计算机技术的不断发展,为了保证服务的可持续性,即在单机房出现故障的情况下,仍可实现为用户正常提供服务,通常会采用异地多活的机房部署方式,即不同城市机房中部署服务实例,并为每个机房部署数据库存储全量数据;在一个机房出现问题后,仍可以由机房集群中的其他机房提供服务。
[0003]然而,在对有状态的服务进行异地多活部署时,容易造成数据不一致等数据冲突的情况发生,影响了服务数据的实时性以及用户体验,并且影响数据的获取效率。
[0004]因此,如何保证数据的实时性、提高数据的获取效率成为本领域技术人员亟待解决的技术问题。

技术实现思路

[0005]有鉴于此,本申请实施例提供了数据处理方法。本申请同时涉及数据处理装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的数据库集群中数据一致性不高,容易发生数据冲突的问题。
[0006]根据本申请实施例的第一方面,提供了一种数据处理方法,包括:
[0007]接收数据读取请求,其中,所述数据读取请求中携带有查询参数和目标数据标识,所述查询参数基于目标数据的时效信息确定;
[0008]根据所述查询参数在所述分布式数据库集群中确定目标数据库;
[0009]基于所述目标数据标识在所述目标数据库中获取目标数据。
[0010]根据本申请实施例的第二方面,提供了一种分布式数据库集群中写数据库的确定方法,包括:
[0011]接收数据写入请求,响应于所述数据写入请求确定写数据库标识;
[0012]在基于所述写数据库标识确定目标数据库为写数据库的情况下,在所述目标数据库中执行写操作;
[0013]在基于所述写数据库标识未确定到目标数据库的情况下,将目标数据库作为写数据库,并在所述目标数据库中执行写操作。
[0014]根据本申请实施例的第三方面,提供了一种数据处理装置,包括:
[0015]接收模块,被配置为接收数据读取请求,其中,所述数据读取请求中携带有查询参数和目标数据标识,所述查询参数基于目标数据的时效信息确定;
[0016]确定模块,被配置为根据所述查询参数在所述分布式数据库集群中确定目标数据库;
[0017]获取模块,被配置为基于所述目标数据标识在所述目标数据库中获取目标数据。
[0018]根据本申请实施例的第四方面,提供了一种分布式数据库集群中写数据库的确定装置,包括:
[0019]接收模块,被配置为接收数据写入请求,响应于所述数据写入请求确定写数据库标识;
[0020]第一执行模块,被配置为在基于所述写数据库标识确定目标数据库为写数据库的情况下,在所述目标数据库中执行写操作;
[0021]第二执行模块,被配置为在基于所述写数据库标识未确定到目标数据库的情况下,将目标数据库作为写数据库,并在所述目标数据库中执行写操作。
[0022]根据本申请实施例的第五方面,提供了一种计算设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令,所述处理器执行所述计算机指令时实现所述数据处理方法的步骤。
[0023]根据本申请实施例的第六方面,提供了一种计算机可读存储介质,其存储有计算机指令,该计算机指令被处理器执行时实现所述数据处理方法的步骤。
[0024]本申请提供的数据处理方法,接收数据读取请求,其中,所述数据读取请求中携带有查询参数和目标数据标识,所述查询参数基于目标数据的时效信息确定;根据所述查询参数在所述分布式数据库集群中确定目标数据库;基于所述目标数据标识在所述目标数据库中获取目标数据。
[0025]本申请一实施例实现了通过接收携带有查询参数的数据读取请求,从而实现了基于查询参数确定读取数据的目标数据库,在目标数据库中获取目标数据,保证了目标数据的实时性,提高了目标数据的获取效率。
附图说明
[0026]图1是本申请一实施例提供的一种数据处理方法的流程图;
[0027]图2是本申请一实施例提供的一种分布式数据库集群中写数据库的确定方法流程图;
[0028]图3是本申请一实施例提供的一种数据处理装置的结构示意图;
[0029]图4是本申请一实施例提供的一种分布式数据库集群中写数据库的确定装置的结构示意图;
[0030]图5是本申请一实施例提供的一种计算设备的结构框图。
具体实施方式
[0031]在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似推广,因此本申请不受下面公开的具体实施的限制。
[0032]在本申请一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本申请一个或多个实施例中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。
[0033]应当理解,尽管在本申请一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0034]首先,对本申请一个或多个实施例涉及的名词术语进行解释。
[0035]异地多活:在不同的城市机房同时部署服务实例,确保一个机房出了问题,其他机房还能正常向用户提供服务。
[0036]一致性:不同机房的服务的不同实例对用户提供的数据保持一致。
[0037]主从同步:把数据从一个节点同步到其他从节点的过程。
[0038]消息队列:消息的传输过程中保存消息的容器。
[0039]数据冲突:在同一时间对一个对象写入不同的值,不能确定该以哪个值为准。
[0040]随着服务质量的不断提升,许多服务都需要保证异地多活,进行跨机房的部署。对于一些无状态的服务很容易跨机房部署不需要额外考虑别的问题。但是有状态的服务进行跨机房多活部署一直是相关技术人员的难题。因为很难解决数据冲突,多机房的主从读写切换时状态的一致性问题等。
[0041]在本申请中,提供了一种数据处理方法,本申请同时涉及一种数据处理装置,一种计算设备,以及一种计算机可读存储介质,在下面的实施例中逐一进行详细说明。
[0042]图1示出了根据本申请一实施例提供的一种数据处理方法的流程图,具体包括以本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,应用于分布式数据库集群中的读数据库,包括:接收数据读取请求,其中,所述数据读取请求中携带有查询参数和目标数据标识,所述查询参数基于目标数据的时效信息确定;根据所述查询参数在所述分布式数据库集群中确定目标数据库;基于所述目标数据标识在所述目标数据库中获取目标数据。2.如权利要求1所述的方法,其特征在于,所述分布式数据库集群中包含写数据库;根据所述查询参数在所述分布式数据库集群中确定目标数据库,包括:在所述查询参数对应的参数值为第一查询值的情况下,确定所述读数据库为目标数据库,其中,所述第一查询值对应的目标数据的时效信息为第一时效信息;在所述查询参数对应的参数值为第二查询值的情况下,确定所述分布式数据库集群中的写数据库为目标数据库,其中,所述第二查询值对应的目标数据的时效信息为第二时效信息。3.如权利要求1所述的方法,其特征在于,接收数据读取请求,包括:接收基于业务数据查询请求生成的数据读取请求。4.如权利要求1所述的方法,其特征在于,接收数据读取请求之前,还包括:接收数据写入请求,并基于所述数据写入请求确定待写入数据;获取分布式数据库集群中的写数据库标识,基于所述写数据库标识确定写数据库,并将所述待写入数据写入所述写数据库。5.如权利要求4所述的方法,其特征在于,获取分布式数据库集群中的写数据库标识,基于所述写数据库标识确定写数据库,包括:在获取到写数据库标识的情况下,基于所述写数据库标识在分布式数据库集群中确定目标数据库,并将所述目标数据库作为写数据库;在未获取到写数据库标识的情况下,为所述读数据库设置写数据库标识,并将所述读数据库作为写数据库。6.如权利要求4所述的方法,其特征在于,将所述待写入数据写入所述写数据库之后,还包括:接收数据同步请求,并基于所述数据同步请求确定目标消息队列;将所述目标消息队列中的目标消息发送至所述分布式数据库集群中的每个数据库。7.如权利要求4所述的方法,其特征在于,基于所述写数据库标识确定写数据库之后,还包括:基于预设专线将所述数据写入请求转发至所述写数据库。8.一种分布式数据库集群中写数据库的确定方法,其特征在于,应用于分布式数据库集群中的任意一个目标数据库,包括:接收数据写入请求,响应于所述数据写入请求确定写数据库标识;在基于所述...

【专利技术属性】
技术研发人员:姜栋
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1