数据库处理方法以及装置制造方法及图纸

技术编号:33769526 阅读:24 留言:0更新日期:2022-06-12 14:21
本说明书实施例提供一种数据库处理方法以及装置,其中所述数据库处理方法包括:主节点根据数据处理指令对主目标数据进行处理,生成预写日志,并根据预写日志将修改后的主目标数据存储至对应的目标数据文件中,其中,目标数据文件存储在数据存储节点中,备份节点在检测到预写日志更新的情况下,根据预写日志对备份目标数据进行处理,并将备份目标数据与目标数据文件进行关联。因此,备份节点在根据预写日志对备份目标数据进行处理的过程中,不会重新对数据存储节点中的物理文件进行复制操作,而是将根据预写日志将备份目标数据与目标数据文件进行关联,可以做到数据存储节点中的物理文件完全复用,降低了数据备份时的延迟。降低了数据备份时的延迟。降低了数据备份时的延迟。

【技术实现步骤摘要】
数据库处理方法以及装置


[0001]本说明书实施例涉及数据处理
,特别涉及一种数据库处理方法。

技术介绍

[0002]随着办公自动化和电子商务的飞速发展,企业对信息系统的依赖性越来越高,数据库作为信息系统的核心担当着重要的角色。尤其在一些对数据可靠性要求很高的行业如银行、证券、电信等,如果发生意外停机或数据丢失其损失会十分惨重。为此数据库管理员应针对具体的业务要求制定详细的数据库备份与灾难恢复策略,并通过模拟故障对每种可能的情况进行严格测试,只有这样才能保证数据的高可用性。数据库的备份是一个长期的过程,而恢复只在发生事故后进行,恢复可以看作是备份的逆过程,恢复的程度的好坏很大程度上依赖于备份的情况。此外,数据库管理员在恢复时采取的步骤正确与否也直接影响最终的恢复结果。
[0003]目前在数据库备份中,硬盘中的文件数据也要进行一次备份,也就是将主数据库的硬盘中的文件数据写入到备份数据库的硬盘中,这样使得备份的延迟较大。

技术实现思路

[0004]有鉴于此,本说明书实施例提供了一种数据库处理方法。本说明书一个或者多个实施例同时涉及一种数据库处理装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序,以解决现有技术中存在的技术缺陷。
[0005]根据本说明书实施例的第一方面,提供了一种数据库处理方法,应用于分布式处理系统,所述系统包括主节点、备份节点和数据存储节点,该数据库处理方法包括:
[0006]主节点根据数据处理指令对主目标数据进行处理,生成预写日志,并根据所述预写日志将修改后的主目标数据存储至对应的目标数据文件中,其中,所述目标数据文件存储在所述数据存储节点中;
[0007]备份节点在检测到所述预写日志更新的情况下,根据所述预写日志对备份目标数据进行处理,并将所述备份目标数据与所述目标数据文件进行关联。
[0008]根据本说明书实施例的第二方面,提供了一种数据库处理装置,包括:
[0009]主节点,被配置为根据数据处理指令对主目标数据进行修改,生成预写日志,并将修改后的主目标数据存储至所述数据存储节点对应的目标数据文件中;
[0010]备份节点,被配置为在检测到所述预写日志更新的情况下,根据所述预写日志修改备份目标数据,并将所述备份目标数据与所述目标数据文件进行关联。
[0011]根据本说明书实施例的第三方面,提供了一种计算设备,包括:
[0012]存储器和处理器;
[0013]所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该计算机可执行指令被处理器执行时实现上述数据库处理方法的步骤。
[0014]根据本说明书实施例的第四方面,提供了一种计算机可读存储介质,其存储有计
算机可执行指令,该指令被处理器执行时实现上述数据库处理方法的步骤。
[0015]根据本说明书实施例的第五方面,提供了一种计算机程序,其中,当所述计算机程序在计算机中执行时,令计算机执行上述数据库处理方法的步骤。
[0016]本说明书实施例公开了一种数据库处理方法,该方法包括:主节点根据数据处理指令对主目标数据进行处理,生成预写日志,并根据预写日志将修改后的主目标数据存储至对应的目标数据文件中,其中,目标数据文件存储在数据存储节点中,备份节点在检测到预写日志更新的情况下,根据预写日志对备份目标数据进行处理,并将备份目标数据与目标数据文件进行关联。因此,备份节点在根据预写日志对备份目标数据进行处理的过程中,不会重新对数据存储节点中的物理文件进行复制操作,而是将根据预写日志将备份目标数据与目标数据文件进行关联,可以做到数据存储节点中的物理文件完全复用,降低了数据备份时的延迟。
附图说明
[0017]图1是本说明书一个实施例提供的一种数据库处理方法的场景示意图;
[0018]图2是本说明书一个实施例提供的一种数据库处理方法的流程图;
[0019]图3是本说明书一个实施例提供的一种数据库处理方法的处理过程流程图;
[0020]图4是本说明书一个实施例提供的一种数据库处理装置的结构示意图;
[0021]图5是本说明书一个实施例提供的一种计算设备的结构框图。
具体实施方式
[0022]在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本说明书内涵的情况下做类似推广,因此本说明书不受下面公开的具体实施的限制。
[0023]在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本说明书一个或多个实施例中使用的术语“和/或”可以表示并包含一个或多个相关联的列出项目的任何或所有可能组合。
[0024]应当理解,尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在
……
时”或“当
……
时”或“响应于确定”。
[0025]首先,对本说明书一个或多个实施例涉及的名词术语进行解释。
[0026]Rep l icat ion:计算中的副本包括共享信息,以确保冗余资源(如软件或硬件组件)之间的一致性,从而提高可靠性、容错能力或可访问性。
[0027]WAL:预写日志是一种用于在数据库系统中提供原子性和持久性(ACI D的两个属性)的技术。数据的更改首先记录在预写日志中,然后写入稳定存储,再写入数据库。
[0028]故障转移:(英语:fai lover),即当活动的服务或应用意外终止时,快速启用冗余
或备用的服务器、系统、硬件或者网络接替它们工作。
[0029]在本说明书中,提供了一种数据库处理方法,本说明书同时涉及一种数据库处理装置,一种计算设备,以及一种计算机可读存储介质,在下面的实施例中逐一进行详细说明。
[0030]参见图1,图1是本说明书一个实施例提供的一种数据库处理方法的场景示意图。该应用场景可以包括主数据库、备数据库和存储硬盘。
[0031]其中,主服务器中包括元服务、主目标数据1、主目标数据2、主目标数据3、主目标数据4,备数据库包括元服务、备份目标数据1、备份目标数据2、备份目标数据3、备份目标数据4,备数据库中的备份目标数据1、备份目标数据2、备份目标数据3、备份目标数据4通过预写日志同步主服务器中的主目标数据1、主目标数据2、主目标数据3、主目标数据4,存储硬盘中包括目标数据文件1、目标数据文件2、目标数据文件3、目标数据本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据库处理方法,应用于分布式处理系统,所述系统包括主节点、备份节点和数据存储节点,所述方法包括:主节点根据数据处理指令对主目标数据进行处理,生成预写日志,并根据所述预写日志将修改后的主目标数据存储至对应的目标数据文件中,其中,所述目标数据文件存储在所述数据存储节点中;备份节点在检测到所述预写日志更新的情况下,根据所述预写日志对备份目标数据进行处理,并将所述备份目标数据与所述目标数据文件进行关联。2.根据权利要求1所述的方法,还包括:在所述主节点发生故障的情况下,所述备份节点响应于客户端的数据处理指令,对备份目标数据进行修改,生成备份预写日志。3.根据权利要求2所述的方法,还包括:所述主节点在重新启动的情况下,读取所述备份节点的备份预写日志,并根据所述备份节点的备份预写日志和所述预写日志恢复所述主目标数据。4.根据权利要求3所述的方法,所述根据所述备份节点的备份预写日志和所述预写日志恢复所述主目标数据,包括:所述主节点将所述备份预写日志中的预写信息,与所述预写日志中的预写信息进行对比得到差异信息,根据所述差异信息恢复所述主目标数据。5.根据权利要求1所述的方法,所述根据数据处理指令对主目标数据进行处理,生成预写日志,包括:主节点对所述数据处理指令进行解析获得修改信息;根据所述修改信息构造预写信息,并根据所述预写信息生成预写日志且对主目标数据进行修改。6.根据权利要求1所述的方法,所述根据数据处理指令对主目标数据进行处理,生成预写日志,包括:主节点对所述数据处理指令进行解析获得写入信息;根据所述写入信息构造预写信息,并根据所述预写信息生成预写日志且生成所述主目标数据。7.根据权利要求1所述的方法,所述根据所述预写日志处理备份目标数据,包括:所述备份节点根据所述预写日志生成备份...

【专利技术属性】
技术研发人员:王奇姜伟华蒋光然向宇周彪
申请(专利权)人:阿里云计算有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1