异构系统迁移数据一致性校验方法、装置、终端及介质制造方法及图纸

技术编号:36942233 阅读:10 留言:0更新日期:2023-03-22 19:03
本发明专利技术涉及迁移数据一致性校验领域,具体公开一种异构系统迁移数据一致性校验方法、装置、终端及介质,在源卷和目标卷的迁移数据中写入IO下发数据;对源卷上已迁移数据生成第一数据日志,同时读取目标卷上的数据生成第二数据日志;验证第一数据日志和第二数据日志的一致性;若两者一致,则迁移数据保持一致,否则迁移数据不一致,发出告警。本发明专利技术可在迁移过程中实时进行数据一致性校验,对源卷的读写也不影响校验过程,可及时发现迁移错误,便于及时调整迁移任务,且实时进行,省时省力。省时省力。省时省力。

【技术实现步骤摘要】
异构系统迁移数据一致性校验方法、装置、终端及介质


[0001]本专利技术涉及迁移数据一致性校验领域,具体涉及一种异构系统迁移数据一致性校验方法、装置、终端及介质。

技术介绍

[0002]随着用户数据量的增长,所需的存储系统也越来越多,管理和扩容现有存储系统的重要性也逐渐凸显。在对存储系统的管理和扩容过程中存在如下问题:1)为了满足扩容需求,用户可能会容量大、性能高的存储系统替换现有存储系统,将业务数据迁移到新购存储系统中。如果新购存储系统与原有存储系统型号不同、生产厂商不同,存储系统兼容性存在差异,会导致数据迁移时间长,严重时会导致数据迁移失败;2)如果业务系统中存在多个存储系统,采用分散管理方式时投入的维护成本大,且随着存储系统数量的增加,管理的复杂度也增加。各存储系统之间的存储资源也无法进行有效整合和管理。
[0003]智能异构虚拟化技术可以有效地规避上述问题。由于解决了不同存储系统之间的兼容性问题,用户可以集中管理新购存储系统和原有存储系统中的存储资源。同时,用户仍然可以使用旧存储系统的存储资源,降低对原有存储资源的浪费。
[0004]目前的异构数据迁移方案如下,迁移过程主要分为以下几个步骤:源端将缓存中的数据刷写到硬盘,此过程中主机端正在进行的所有的IO都是write

through模式,直接将数据写入硬盘;给目标端的I/O Group增加对源卷的访问权限;建立新的路径使主机端可以访问迁移的目标卷;执行卷迁移过程;迁移完成后,删除源端I/O Group对卷的访问权限。/>[0005]当前的异构数据迁移是按照比较md5值验证数据一致性,比如,按照系统迁移标准拓扑结构进行环境搭建,然后创建2个标准卷:30G和500G容量,进行系统数据迁移,500G容量卷迁移成功,而且映射给前端后卷内容进行md5值校验成功,数据一致;30G卷进行数据迁移过程中进行到62%,外部存储mdisk脱机,数据迁移状态显示为脱机。
[0006]当前的迁移方法是在迁移完成后校验一致性,不能保证双写过程中的数据持续一致,如果出现数据错误无法及时调整迁移任务;如果在数据迁移的过程中,同时对源卷进行读写,需要等待源卷的读写任务全部完成才能验证数据一致性,耗时耗力。

技术实现思路

[0007]为解决上述问题,本专利技术提供一种异构系统迁移数据一致性校验方法、装置、终端及存储介质,在迁移过程中实时进行数据一致性校验,对源卷的读写也不影响校验过程,可及时发现迁移错误,便于及时调整迁移任务,且实时进行,省时省力。
[0008]第一方面,本专利技术的技术方案提供一种异构系统迁移数据一致性校验方法,采用HW算法控制数据从源卷向目标卷迁移,在迁移过程中执行以下步骤:在源卷和目标卷的迁移数据中写入IO下发数据;对源卷上已迁移数据生成第一数据日志,同时读取目标卷上的数据生成第二数据日志;
验证第一数据日志和第二数据日志的一致性;若两者一致,则迁移数据保持一致,否则迁移数据不一致,发出告警。
[0009]进一步地,在源卷和目标卷的迁移数据中写入IO下发数据,具体包括以下步骤:检测IO下发数据区域与高水位线位置关系;若IO下发数据的终止逻辑区块地址小于高水位线地址,则直接向源卷和目标卷中写入IO下发数据。
[0010]进一步地,在源卷和目标卷的迁移数据中写入IO下发数据,还包括以下步骤:若高水位线地址位于IO下发数据的起始逻辑区块地址与终止逻辑区块地址之间,则判断高水位线与IO下发数据的终止逻辑区块地址之间的数据所需迁移时间,记为等待时长,经等待时长后向源卷和目标卷中写入IO下发数据。
[0011]进一步地,在源卷和目标卷的迁移数据中写入IO下发数据,还包括以下步骤:若IO下发数据的起始逻辑区块地址大于高水位线地址,则向源卷中写入IO下发数据,并等待高水位线地址大于IO下发数据的起始逻辑区块地址后,再执行日志生成的步骤。
[0012]进一步地,该方法具体包括:执行vdbench工具在源卷和目标卷的迁移数据中写入IO下发数据。
[0013]进一步地,该方法具体包括:执行vdbench工具对源卷上已迁移数据生成第一数据日志,同时读取目标卷上的数据生成第二数据日志。
[0014]进一步地,该方法具体包括:执行vdbench工具验证第一数据日志和第二数据日志的一致性。
[0015]第二方面,本专利技术的技术方案提供一种异构系统迁移数据一致性校验装置,采用HW算法控制数据从源卷向目标卷迁移,在迁移过程中执行该装置,包括:数据写入模块:在源卷和目标卷的迁移数据中写入IO下发数据;日志生成模块:对源卷上已迁移数据生成第一数据日志,同时读取目标卷上的数据生成第二数据日志;一致性校验模块:验证第一数据日志和第二数据日志的一致性;结果处理模块:若两者一致,则迁移数据保持一致,否则迁移数据不一致,发出告警。
[0016]第三方面,本专利技术的技术方案提供一种终端,包括:存储器,用于存储异构系统迁移数据一致性校验程序;处理器,用于执行所述异构系统迁移数据一致性校验程序时实现如上述任一项所述异构系统迁移数据一致性校验方法的步骤。
[0017]第四方面,本专利技术的技术方案提供一种计算机可读存储介质,所述可读存储介质上存储有异构系统迁移数据一致性校验程序,所述异构系统迁移数据一致性校验程序被处理器执行时实现如上述任一项所述异构系统迁移数据一致性校验方法的步骤。
[0018]本专利技术提供的一种异构系统迁移数据一致性校验方法、装置、终端及介质,相对于现有技术,具有以下有益效果:在数据迁移过程中向迁移数据中写入IO下发数据,并对源卷和目标卷生成数据日志,校验数据日志的一致性,进而判断迁移数据的一致性。本专利技术可在迁移过程中实时进行数据一致性校验,对源卷的读写也不影响校验过程,可及时发现迁移
错误,便于及时调整迁移任务,且实时进行,省时省力。
附图说明
[0019]为了更清楚的说明本申请实施例或现有技术的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0020]图1是本专利技术实施例提供的一种异构系统迁移数据一致性校验方法流程示意图。
[0021]图2是IO下发数据区域与高水位线位置关系示意图。
[0022]图3是本专利技术实施例提供的一种异构系统迁移数据一致性校验装置结构示意框图。
[0023]图4是本专利技术实施例提供的一种终端的结构示意图。
具体实施方式
[0024]为了使本
的人员更好地理解本申请方案,下面结合附图和具体实施方式对本申请作进一步的详细说明。显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
[0025]数据迁移过程本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种异构系统迁移数据一致性校验方法,其特征在于,采用HW算法控制数据从源卷向目标卷迁移,在迁移过程中执行以下步骤:在源卷和目标卷的迁移数据中写入IO下发数据;对源卷上已迁移数据生成第一数据日志,同时读取目标卷上的数据生成第二数据日志;验证第一数据日志和第二数据日志的一致性;若两者一致,则迁移数据保持一致,否则迁移数据不一致,发出告警。2.根据权利要求1所述的异构系统迁移数据一致性校验方法,其特征在于,在源卷和目标卷的迁移数据中写入IO下发数据,具体包括以下步骤:检测IO下发数据区域与高水位线位置关系;若IO下发数据的终止逻辑区块地址小于高水位线地址,则直接向源卷和目标卷中写入IO下发数据。3.根据权利要求2所述的异构系统迁移数据一致性校验方法,其特征在于,在源卷和目标卷的迁移数据中写入IO下发数据,还包括以下步骤:若高水位线地址位于IO下发数据的起始逻辑区块地址与终止逻辑区块地址之间,则判断高水位线与IO下发数据的终止逻辑区块地址之间的数据所需迁移时间,记为等待时长,经等待时长后向源卷和目标卷中写入IO下发数据。4.根据权利要求3所述的异构系统迁移数据一致性校验方法,其特征在于,在源卷和目标卷的迁移数据中写入IO下发数据,还包括以下步骤:若IO下发数据的起始逻辑区块地址大于高水位线地址,则向源卷中写入IO下发数据,并等待高水位线地址大于IO下发数据的起始逻辑区块地址后,再执行日志生成的步骤。5.根据权利要求4所述的异构系统迁移数据一致性校验方法,其特征在于,该方法具体包括...

【专利技术属性】
技术研发人员:刘远
申请(专利权)人:苏州浪潮智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1