本发明专利技术公开了一种对象存储实时备份方法、装置、电子设备及存储介质。包括:对象操作在对象存储平台发生时,所述对象存储平台基于触发机制与消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制与消息推送服务进行组合;所述客户端基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;所述客户端基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。通过触发机制和消息推送服务获取对象操作最新的变化数据,基于对象操作信息识别精准识别出变化对象,并通过对象操作确认机制确定对象最终执行的操作,保证了操作信息更新的实时性和准确性,达到了面向对象存储平台的实时增备效果。台的实时增备效果。台的实时增备效果。
【技术实现步骤摘要】
一种对象存储实时备份方法、装置、电子设备及存储介质
[0001]本专利技术实施例涉及数据备份
,尤其涉及一种对象存储实时备份方法、装置、电子设备及存储介质。
技术介绍
[0002]大数据时代,随着企业上云的不断推进,对象存储的应用前景愈加开阔。但也对服务于对象存储的容灾备份服务提出了更高的性能需求。
[0003]面对TB级大数据量场景,现有的主流增备方案为基于全量扫描的增量识别备份方式:全量扫描得到目标存储桶内的对象元数据信息后,与上一个备份时间点副本的元数据进行对比。如果元数据产生差异,则可识别出变化对象。
[0004]现有技术的缺点:全量扫描需要花费更多的计算资源;只能实现定时备份,无法满足对象存储实时备份的场景需求。
技术实现思路
[0005]本专利技术提供了一种对象存储实时备份方法、装置、电子设备及存储介质,以解决现有技术中基于全量扫描的增量识别备份方式花费的计算资源多,且无法满足对象存储实时备份的场景需求的问题。
[0006]根据本专利技术的一方面,提供了一种对象存储实时备份方法,包括:
[0007]对象操作在对象存储平台发生时,所述对象存储平台基于触发机制与消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制与消息推送服务进行组合;
[0008]所述客户端基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;
[0009]所述客户端基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。
[0010]根据本专利技术的另一方面,提供了一种对象存储实时备份方法,由客户端执行,所述方法包括:
[0011]获取对象操作信息,所述对象操作信息由对象存储平台基于触发机制与所述消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制与消息推送服务进行组合;
[0012]基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;
[0013]基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。
[0014]根据本专利技术的另一方面,提供了一种对象存储实时备份装置,所述装置包括:
[0015]获取模块,用于获取对象操作信息,所述对象操作信息由对象存储平台基于触发机制与所述消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制
与消息推送服务进行组合;
[0016]执行模块,用于基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;
[0017]确定模块,用于基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。
[0018]根据本专利技术的另一方面,提供了一种电子设备,所述电子设备包括:至少一个处理器;以及
[0019]与所述至少一个处理器通信连接的存储器;其中,
[0020]所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本专利技术任一实施例所述的对象存储实时备份方法。
[0021]根据本专利技术的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本专利技术任一实施例所述的对象存储实时备份方法。
[0022]本专利技术实施例的技术方案,包括:对象操作在对象存储平台发生时,所述对象存储平台基于触发机制与消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制与消息推送服务进行组合;所述客户端基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;所述客户端基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。通过触发机制和消息推送服务获取对象操作最新的变化数据,基于对象操作信息识别精准识别出变化对象,并通过对象操作确认机制确定对象最终执行的操作,解决了现有技术中基于全量扫描的增量识别备份方式花费的计算资源多,且无法满足对象存储实时备份的场景需求的问题,保证了操作信息更新的实时性和准确性,达到了面向对象存储平台的实时增备效果。
[0023]应当理解,本部分所描述的内容并非旨在标识本专利技术的实施例的关键或重要特征,也不用于限制本专利技术的范围。本专利技术的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0024]为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0025]图1为本专利技术实施例一提供的一种对象存储实时备份方法的流程示意图;
[0026]图2为本专利技术实施例提供的一种对象存储实时备份方法的阶段一的流程示意图;
[0027]图3为本专利技术实施例提供的一种对象存储实时备份方法的阶段二的流程示意图;
[0028]图4为本专利技术实施例提供的一种对象存储实时备份方法的阶段三的流程示意图;
[0029]图5为本专利技术实施例三提供的一种对象存储实时备份方法的流程示意图;
[0030]图6为本专利技术实施例四提供的一种对象存储实时备份装置的结构示意图
[0031]图7为本专利技术实施例的对象存储实时备份方法的电子设备的结构示意图。
具体实施方式
[0032]为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。应当理解,本专利技术的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本专利技术的范围在此方面不受限制。
[0033]本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0034]需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种对象存储实时备份方法,其特征在于,所述方法包括:对象操作在对象存储平台发生时,所述对象存储平台基于触发机制与消息推送服务将对象操作信息推送给客户端,所述对象存储平台中将触发机制与消息推送服务进行组合;所述客户端基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作;所述客户端基于所述最终操作动作通过对象操作确认机制确定对象最终执行的增量操作。2.根据权利要求1所述的方法,其特征在于,所述对象存储平台中将触发机制与消息推送服务进行组合包括:用户创建对象存储平台的触发器;用户在所述触发器中将多个预设操作的接口调用设置为触发事件;用户在所述触发器中将消息推送服务设定为触发动作;用户在消息推送服务中将客户端的公网IP设定为订阅者。3.根据权利要求2所述的方法,其特征在于,所述消息推送服务为主题订阅模型,包括创建主题,获取主题的唯一标识符,在主题中将所述客户端的公网IP设置为推送对象,并选定https协议;用户在所述触发器中使用主题URN将所述消息推送服务设定为触发动作。4.根据权利要求2所述的方法,其特征在于,所述对象操作在对象存储平台发生时,所述对象存储平台基于所述触发机制与所述消息推送服务将对象操作信息推送给客户端,包括:当所述对象存储平台的触发器检测到接口调用后,确定是否为触发事件;若是,获取对象存储平台记录的对象操作信息,使用所述唯一标识符找到主题中对应的触发动作,执行所述触发动作,将所述对象操作信息转换为JSON格式后,将JSON格式的对象操作信息通过所述https协议主动推送给客户端。5.根据权利要求1所述的方法,其特征在于,所述客户端基于所述对象操作信息识别出变化对象后,执行重复对象删除机制得到最终操作动作,包括:所述客户端从缓存池中获取所述对象操作信息;解析所述对象操作信息确定出对象和当前操作动作;确定kv数据库中是否存在所述对象的上一次操作动作;若是,则将所述当前操作动作与上一次操作动作通过比对机制进行对比得到最终操作动作,并将所述最终操作动作存回所述kv数据库中。6.根据权利要求5所述的方法,其特征在于,所述比对机制包括:若对象的当前操作动作为删除操作,对象的上一...
【专利技术属性】
技术研发人员:池晖杨,
申请(专利权)人:上海爱数信息技术股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。