System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 用户数据快速迁移方法、系统及计算机设备技术方案_技高网

用户数据快速迁移方法、系统及计算机设备技术方案

技术编号:41938453 阅读:6 留言:0更新日期:2024-07-05 14:31
本发明专利技术公开了用户数据快速迁移方法、系统及计算机设备,方法包括:初始存储节点获取与数据迁移指令对应的待迁移用户内存数据,将待迁移用户内存数据发送至数据库以进行存储;初始存储节点基于预设的路由策略从数据库中获取待迁移用户内存数据中的目标分片数据,并生成与目标分片数据对应的目标内存文件;初始存储节点基于预设的远程文件拷贝命令将目标内存文件复制至目标存储节点;目标存储节点对目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将目标内存文件加载至对应的内存空间。本发明专利技术实施例能将初始存储节点的待迁移用户内存数据中与路由策略对应的用户内存数据分片迁移至目标存储节点,实现了数据的安全迁移操作。

【技术实现步骤摘要】

本专利技术涉及数据迁移,尤其涉及用户数据快速迁移方法、系统及计算机设备


技术介绍

1、在交易系统(如证券交易系统)中,与交易系统对应的服务系统在进行系统架构设计时会分为多个分片以对外提供服务,且每个分片所处理的用户数据和业务种类均不同。如果在业务处理的过程中需要进行用户数据的迁移,将会非常困难。采用现有技术时,往往需要将交易系统暂停维护后,再进行数据迁移,这就导致存在以下缺陷:

2、1)数据迁移过程时整体迁移,无法按照分片方式迁移;

3、2)数据迁移过程中若存在数据丢失,无法确保数据一致性。


技术实现思路

1、本专利技术实施例提供了用户数据快速迁移方法、系统及计算机设备,旨在解决现有技术对交易系统中的用户数据无法按照分片方式迁移且无法确保数据一致性的问题。

2、第一方面,本专利技术实施例提供了一种用户数据快速迁移方法,应用于服务器集群,其中,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;所述用户数据快速迁移方法包括:

3、所述初始存储节点响应于数据迁移指令,获取与所述数据迁移指令对应的待迁移用户内存数据,基于数据持久化组件将所述待迁移用户内存数据发送至数据库以进行存储;

4、所述初始存储节点基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件;

5、所述初始存储节点基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点;

6、所述目标存储节点对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间;

7、所述目标存储节点若确定所述待迁移用户内存数据中与所述路由策略对应的用户内存数据已全部完成数据迁移,则对应生成旧数据卸载指令并发送至所述初始存储节点;

8、所述初始存储节点基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载。

9、第二方面,本专利技术实施例提供了一种用户数据快速迁移方法,应用于服务器集群,其中,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述待迁移用户内存数据待迁移在由初始存储节点迁移至目标存储节点时途经的中间服务器节点记为中间节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;所述用户数据快速迁移方法包括:

10、所述初始存储节点响应于数据迁移指令,获取与所述数据迁移指令对应的待迁移用户内存数据,基于数据持久化组件将所述待迁移用户内存数据发送至所述中间节点中的数据库以进行存储;

11、所述中间节点基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件;

12、所述中间节点基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点;

13、所述目标存储节点对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间;

14、所述目标存储节点若确定所述待迁移用户内存数据中与所述路由策略对应的用户内存数据已全部完成数据迁移,则对应生成旧数据卸载指令并发送至所述初始存储节点;

15、所述初始存储节点基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载。

16、第三方面,本专利技术实施例还提供了一种用户数据快速迁移系统,其对应配置于服务器集群,所述服务器集群为分布式系统且包括多个服务器节点,所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;

17、所述初始存储节点,用于响应于数据迁移指令,获取与所述数据迁移指令对应的待迁移用户内存数据,基于数据持久化组件将所述待迁移用户内存数据发送至数据库以进行存储;

18、所述初始存储节点,还用于基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件;

19、所述初始存储节点,还用于基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点;

20、所述目标存储节点,用于对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间;

21、所述目标存储节点,还用于若确定所述待迁移用户内存数据中与所述路由策略对应的用户内存数据已全部完成数据迁移,则对应生成旧数据卸载指令并发送至所述初始存储节点;

22、所述初始存储节点,还用于基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载。

23、第四方面,本专利技术实施例还提供了一种用户数据快速迁移系统,其对应配置于服务器集群,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述待迁移用户内存数据待迁移在由初始存储节点迁移至目标存储节点时途经的中间服务器节点记为中间节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;

24、所述初始存储节点,用于响应于数据迁移指令,获取与所述数据迁移指令对应的待迁移用户内存数据,基于数据持久化组件将所述待迁移用户内存数据发送至所述中间节点中的数据库以进行存储;

25、所述中间节点,用于基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件;

26、所述中间节点,还用于基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点;

27、所述目标存储节点,用于对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间;

28、所述目标存储节点,还用于若确定所述待迁移用户内存数据中与所述路由策略对应的用户内存数据已全部完成数据迁移,则对应生成旧数据卸载指令并发送至所述初始存储节点;

29、所述初始存储节点,还用于基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载。

30、第五方面,本专利技术实施例还提供了一种计算机设备,其包括存储器本文档来自技高网...

【技术保护点】

1.一种用户数据快速迁移方法,应用于服务器集群,其特征在于,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;所述用户数据快速迁移方法包括:

2.根据权利要求1所述的方法,其特征在于,所述初始存储节点基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件,包括:

3.根据权利要求2所述的方法,其特征在于,所述初始存储节点基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点,包括:

4.根据权利要求1所述的方法,其特征在于,所述目标存储节点对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间,包括:

5.根据权利要求1所述的方法,其特征在于,在所述初始存储节点基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载的步骤之后,所述方法还包括:

6.一种用户数据快速迁移方法,应用于服务器集群,其特征在于,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述待迁移用户内存数据待迁移在由初始存储节点迁移至目标存储节点时途经的中间服务器节点记为中间节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;所述用户数据快速迁移方法包括:

7.根据权利要求6所述的方法,其特征在于,所述中间节点基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件,包括:

8.一种用户数据快速迁移系统,其特征在于,所述用户数据快速迁移系统对应配置于服务器集群,所述服务器集群为分布式系统且包括多个服务器节点,所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点;

9.一种用户数据快速迁移系统,其特征在于,所述用户数据快速迁移系统对应配置于服务器集群,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述待迁移用户内存数据待迁移在由初始存储节点迁移至目标存储节点时途经的中间服务器节点记为中间节点;

10.一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5中任一项所述的用户数据快速迁移方法,或者所述处理器执行所述计算机程序时实现如权利要求6至7中任一项所述的用户数据快速迁移方法。

...

【技术特征摘要】

1.一种用户数据快速迁移方法,应用于服务器集群,其特征在于,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述服务器集群中多个服务器节点均提供内存数据状态存储;所述用户数据快速迁移方法包括:

2.根据权利要求1所述的方法,其特征在于,所述初始存储节点基于预设的路由策略从所述数据库中获取所述待迁移用户内存数据中的目标分片数据,并生成与所述目标分片数据对应的目标内存文件,包括:

3.根据权利要求2所述的方法,其特征在于,所述初始存储节点基于预设的远程文件拷贝命令将所述目标内存文件复制至所述目标存储节点,包括:

4.根据权利要求1所述的方法,其特征在于,所述目标存储节点对所述目标内存文件的数据一致性进行校验,并在数据一致性校验通过时将所述目标内存文件加载至对应的内存空间,包括:

5.根据权利要求1所述的方法,其特征在于,在所述初始存储节点基于所述旧数据卸载指令将所述待迁移用户内存数据中与所述路由策略对应的用户内存数据进行内存卸载的步骤之后,所述方法还包括:

6.一种用户数据快速迁移方法,应用于服务器集群,其特征在于,所述服务器集群为分布式系统且包括多个服务器节点,在所述服务器集群中待迁移用户内存数据初始存储的服务器节点记为初始存储节点,所述待迁移用户内存数据待迁移的目标服务器节点记为目标存储节点,所述待迁移用户内存...

【专利技术属性】
技术研发人员:张飞飞何磊姜三义邹岩
申请(专利权)人:深圳华锐分布式技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1