System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于云计算及分布式存储的数据协同备份系统技术方案_技高网

一种基于云计算及分布式存储的数据协同备份系统技术方案

技术编号:42037163 阅读:10 留言:0更新日期:2024-07-16 23:22
本发明专利技术涉及云计算、分布式存储、数据协同和备份领域,具体地说是一种基于云计算及分布式存储的数据协同备份系统;根据收集模块将获取到的数据传输给数据预处理模块,数据预处理模块对接收到的数据进行权重计算,并将权重信息发送至云计算平台用于生成智能备份策略,云计算平台将智能备份策略发送至分布式存储模块,分布式存储模块根据智能分配策略将数据进行分布式存储;数据恢复模块连接分布式存储模块,接收协同管理模块指令发送的恢复指令;协同管理模块连接各个模块,实时监控各模块状态和下达用户操作界面工作人员指令。本发明专利技术通过云计算平台生成智能备份策略,实现了数据备份的自动化和智能化,提升了备份效率,有效的降低了成本。

【技术实现步骤摘要】

本专利技术涉及数据备份领域,具体地说是一种基于云计算及分布式存储的数据协同备份系统


技术介绍

1、随着信息技术的飞速发展,企业和个人产生的数据量呈爆炸式增长。这些数据对于企业的运营和个人的生活都具有重要的价值。为了确保数据的安全性和可靠性,数据备份变得至关重要。

2、云计算技术的出现为数据备份提供了新的解决方案。云计算具有弹性扩展、成本效益高和易于管理等优点。分布式存储技术通过将数据分布在多个节点上,提高了数据的可靠性和可用性。

3、基于云计算及分布式存储的数据协同备份系统应运而生,它可以实现以下功能:1.集中管理:对多个数据源进行统一的备份管理。2.高效传输:利用云计算的强大计算能力和高速网络,实现数据的快速备份和恢复。3.可靠存储:借助分布式存储的优势,确保数据的安全性和可靠性。

4、现有基于云计算及分布式存储的数据协同备份系统技术中仍有以下不足:

5、1.数据备份策略不够智能化,无法根据数据特点进行优化分配,导致备份效率低下,浪费存储资源,提高了存储成本。

6、2.系统监控与协同管理不够完善,无法实时掌握系统运行状态和安全性,没有用户操作界面或用户界面不够直观简洁,不利于用户使用。

7、3.数据恢复方式单一,无法满足不同场景下的需求,降低系统的适用性,不利于系统的推广。


技术实现思路

1、为了解决上述技术问题,本专利技术提供一种基于云计算及分布式存储的数据协同备份系统,以解决上述问题。

2、本专利技术具体方案如下:

3、一种基于云计算及分布式存储的数据协同备份系统,包括:

4、数据收集模块,所述数据收集模块用于获取和收集数据,包括数据本身、数据频率、数据变化率、数据准确性、数据时间戳、数据完整性和数据类型;

5、数据预处理模块,所述数据预处理模块用于对数据收集模块获取的数据信息计算数据权重;

6、云计算平台,所述云计算平台用于根据数据的权重信息生成智能备份策略;

7、分布式存储模块,所述分布式存储模块用于根据智能备份策略将计算权重后的数据进行分布式存储;

8、协同管理模块,所述协同管理模块用于协调不同存储节点之间的数据备份操作、监控各模块的连接状态、生成用户操作界面,所述操作界面包括“数据收集规则设置”、“数据权重设置”、“智能备份策略设置”、“存储资源查看”和“数据恢复”;

9、数据恢复模块,所述数据恢复模块用于在数据丢失或损坏时,根据备份数据进行数据恢复;

10、所述一种基于云计算及分布式存储的数据协同备份系统各模块之间的交互关系如下:

11、数据收集模块将获取到的数据传输给数据预处理模块,数据预处理模块对接收到的数据进行权重计算,并将权重信息发送至云计算平台用于生成智能备份策略,云计算平台将智能备份策略发送至分布式存储模块,分布式存储模块根据智能分配策略将数据进行分布式存储;数据恢复模块连接分布式存储模块,接收协同管理模块指令发送的恢复指令;协同管理模块连接各个模块,实时监控各模块状态和下达用户操作界面工作人员指令。

12、优选地一种技术方案,所述数据收集模块支持自动实时收集数据和人工输入数据,信息接收方式支持无线传输、有线传输和存储介质传输;

13、所述自动实时收集数据通过实时监测数据源的变化,获取最新数据,并设定收集规则:收集频率随着信息数量增大而频率加快,信息出现异常时,自动触发数据收集操作。

14、优选地一种技术方案,所述数据预处理模块根据数据收集模块获取的数据属性进行权重计算;

15、所述数据属性包括数据频率、数据变化率、数据准确性和数据完整性;

16、数据权重wi=数据频率×权重系数+数据变化率×权重系数+数据准确性×权重系数+数据可解释性×权重系数;

17、数据权重数作为智能分配策略的约束条件,权重系数则代表各个数据属性之间对于数据权重的影响程度;

18、计算时为每个属性分配一个权重系数,权重系数由相关专业人员在协同管理模块生成的用户界面对其进行设置。

19、优选地一种技术方案,所述云计算平台建立使用线性回归求出最优解生成智能备份策略:

20、设立目标函数:

21、其中xij表示分配给第i个数据对象到第j个存储资源的数据量,cij是分配给第i个数据对象到第j个存储资源的成本c,n为数据对象个数,m为存储资源数量;

22、设定约束条件:

23、数据权重约束:确保每个数据对象i的分配量等于其权重wi;

24、存储资源容量约束:确保每个存储资源j的分配量不超过其容量cj;

25、通过求得最小化目标函数z,计算出在满足数据权重和存储资源限制的前提下,总成本最小的分配策略xij。

26、优选地一种技术方案,所述分布式存储模块包括压缩单元、加密单元和分布式存储单元;

27、所述压缩单元用于对预处理模块处理后的数据进行压缩;

28、所述加密单元用于对压缩后的数据进行加密,并将加密信息发送至协同管理模块,数据恢复时需要进行解密;

29、分布式单元根据智能备份策略将压缩加密后的数据进行存储。

30、优选地一种技术方案,所述协同管理模块包括:协同单元、监控单元、安全单元和用户界面单元;

31、所述协同单元用于连接各个模块,确保数据协同备份过程的顺利进行;

32、所述监控单元用于实时监测各个模块的运行状态,传输情况,存储单元之间资源使用情况,发现异常情况时及时警报;

33、所述安全单元用于对用户操作界面设置身份验证和授权管理;

34、所述用户界面单元用于生成用户操作界面,使系统其他模块和单元内容可视化。

35、优选地一种技术方案,所述监控单元的可视化展示方式包括图表、图形和仪表盘,能够直观地呈现系统和分布式存储单元的运行状态和关键指标。

36、图表展示:折线图,用于展示随时间变化的趋势,如数据频率的变化。

37、图形展示:拓扑图,呈现系统的结构和组件之间的关系。

38、存储相关指标:存储容量使用情况,读写速度,数据备份和恢复状态。

39、优选地一种技术方案,所述安全单元采用的身份验证技术包括密码、指纹、人脸识别,授权管理包括角色授权、资源授权。

40、优选地一种技术方案,所述数据恢复模块包括标记单元、恢复单元和输出单元;

41、所述标记单元对分布式存储模块备份的数据基于备份版本和备份时间点进行版本和日期标记;

42、所述恢复单元包括多种数据恢复方式,包括基于时间点的恢复和基于版本的恢复;

43、所述输出单元恢复输出方式包括无线传输、有线传输和存储介质传输。

44、与现有技术相比,本专利技术具有如下有益效果:

45、1、本专利技术通过云本文档来自技高网...

【技术保护点】

1.一种基于云计算及分布式存储的数据协同备份系统,其特征在于,包括:

2.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述数据收集模块支持自动实时收集数据和人工输入数据,信息收集方式支持无线传输、有线传输和存储介质传输;

3.如权利要求2所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述数据预处理模块根据数据收集模块获取的数据属性进行权重计算;

4.如权利要求3所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述云计算平台建立使用线性回归求出最优解生成智能备份策略:

5.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述分布式存储模块包括压缩单元、加密单元和分布式存储单元;

6.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述协同管理模块包括:协同单元、监控单元、安全单元和用户界面单元;

7.如权利要求6所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述监控单元的可视化展示方式包括图表和图形,能够直观地呈现系统和分布式存储单元的运行状态和关键指标。

8.如权利要求6所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述安全单元采用身份验证技术,授权管理包括角色授权和资源授权。

9.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述数据恢复模块用于对分布式存储模块备份的数据基于备份版本和备份时间点进行版本和日期标记。

...

【技术特征摘要】

1.一种基于云计算及分布式存储的数据协同备份系统,其特征在于,包括:

2.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述数据收集模块支持自动实时收集数据和人工输入数据,信息收集方式支持无线传输、有线传输和存储介质传输;

3.如权利要求2所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述数据预处理模块根据数据收集模块获取的数据属性进行权重计算;

4.如权利要求3所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述云计算平台建立使用线性回归求出最优解生成智能备份策略:

5.如权利要求1所述一种基于云计算及分布式存储的数据协同备份系统,其特征在于,所述分布式存储模块包括压缩单元、加密单元和分...

【专利技术属性】
技术研发人员:张宣
申请(专利权)人:北京亿智云科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1