一种数据存储方法、计算设备及数据存储系统技术方案

本申请提供一种数据存储方法，该方法包括：获取待存储数据的重要级别；其中，重要级别基于待存储数据的重要性所确定；基于重要级别确定待存储数据的存储策略；基于存储策略存储待存储数据。本申请提供的数据存储方法，实现可根据存储数据的重要级别动态调整存储策略，兼顾数据存储的可靠性和资源耗费。兼顾数据存储的可靠性和资源耗费。兼顾数据存储的可靠性和资源耗费。

【技术实现步骤摘要】
一种数据存储方法、计算设备及数据存储系统


[0001]本申请涉及数据存储
，尤其涉及一种数据存储方法及系统。

技术介绍

[0002]分布式存储系统中数据可靠性保护一般都是采用多副本技术或双重RAID保护技术。其中，多副本技术存在数据丢失风险，例如当硬件老化或大规模掉电或节点故障导致的多副本分布式数据安全问题。双重冗余磁盘阵列(redundant arraysof independent disks，RAID)技术提升了数据可靠性，但是使用起来不够灵活，无法根据数据保护等级进行选择。

技术实现思路

[0003]本申请的实施例提供一种数据存储方法及系统，实现可根据存储数据的重要级别动态调整存储策略，使得存储策略更加合理。
[0004]第一方面，本申请实施例提供了一种数据存储方法，包括：获取待存储数据的重要级别；其中，重要级别基于待存储数据的重要性确定；基于待存储数据的重要级别确定待存储数据的存储策略；基于存储策略存储待存储数据。
[0005]本申请实施例提供的数据存储方法，可根据存储数据的重要级别动态调整存储策略，并根据该存储策略执行对数据的存储，存储系统对数据的存储更加合理，例如重要级别低的数据采用保护级别较低的存储策略进行存储，存储效率更高效，重要级别较高的数据采用保护级别更高的存储策略进行存储，保证数据存储的安全性。
[0006]在一个可能的实现中，本申请实施例提供的数据存储方法在基于存储策略存储待存储数据之后，还包括：监控对待存储数据的重要级别的修改操作；确定重要级别改变，基于调整后的重要级别确定待存储数据的存储策略；基于调整后的存储策略存储待存储数据。
[0007]在该可能的实现中，本申请实施例提供的数据存储方法，在存储数据的重要级别改变后，还可以动态调整存储数据的存储策略，进一步保证了存储系统的存储合理性，例如当存储数据的重要级别降低后，则相应的采用保护级别更低的存储策略对其进行存储，释放存储空间，当存储数据的重要级别升高后，则相应的采用保护级别更高的存储策略对其进行存储，以保证数据的安全性。
[0008]在另一个可能的实现中，上述方法中基于待存储数据的重要级别确定待存储数据的存储策略，包括：基于待存储数据的重要级别确定待存储数据的RAID存储方式和副本数量N；其中，N为非负整数。
[0009]在另一个可能的实现中，待存储数据的重要级别包括一级、二级、三级和四级；基于待存储数据的重要级别确定待存储数据的RAID存储方式和副本数量N，包括：若待存储数据的重要级别为一级，待存储数据的RAID存储方式为RAID0存储,待存储数据的副本数量N为0；即针对不重要的数据，直接将存储数据存储于存储节点内，不进行节点内的保护和节
点间的保护，节省存储空间；若待存储数据的重要级别为二级，待存储数据的RAID存储方式为第一预设冗余RAID存储,待存储数据的副本数量N为0；即针对次重要的数据进行节点内的RAID保护，节点间不进行保护；若待存储数据的重要级别为三级，待存储数据的RAID存储方式为RAID0存储,待存储数据的副本数量N为第一预设副本数量；即针对较为重要的数据，进行节点间的副本保护，增加数据存储的安全性；若待存储数据的重要级别为四级，待存储数据的RAID存储方式为第二预设冗余RAID存储,待存储数据的副本数量N为第二预设副本数量，即针对最为重要的数据，在节点内和节点间执行双层保护，进一步保证数据存储的安全可靠性。
[0010]示例性的，该方法应用于分布式存储，通过RAID存储方式实现存储数据的存储节点内的保护，通过将存储数据的副本在其他存储节点进行存储，实现了存储数据的节点间保护，提高了分布式存储的数据存储可靠性，通过调整RAID的存储方式以及副本数量，可以实现无保护、单层保护(节点内保护或节点间保护)和双层保护(节点间保护和节点内和节点间的保护)的切换。
[0011]在另一个可能的实现中，本申请实施例提供的数据存储方法，在基于待存储数据的重要级别确定待存储数据的存储策略之后，还包括：确定待存储数据的副本数量N大于0,将RAID存储方式和待存储数据的副本和分别发送至N个目标节点，以指示N个目标节点基于RAID存储方式存储待存储数据的副本。
[0012]在另一个可能的实现中，基于存储策略存储所述待存储数据，包括：基于RAID存储方式存储待存储数据。
[0013]在另一个可能的实现中，本申请实施例提供的数据存储方法，在获取待存储数据的重要级别之前，还包括：接收待存储数据；确定待存储数据的重要级别。例如，待存储数据中包括指示待存储数据的重要级别的标签，根据该标签确定待存储数据的重要级别。
[0014]可选的，确定待存储数据的重要级别，包括：设置待存储数据的重要级别标识，以便于存储系统根据该重要级别标识执行相应的存储策略。
[0015]第二方面，本申请实施例提供还提供一种分布式数据存储系统，该系统包括第一节点和第二节点，第一节点获取待存储数据的重要级别；其中，重要级别基于待存储数据的重要性所确定；第一节点基于重要级别确定待存储数据的存储策略；第一节点基于存储策略存储待存储数据；第一节点将存储策略和待存储数据的副本发送至第二节点；第二节点基于存储策略和待存储数据的副本存储待存储数据。
[0016]第三方面，本申请实施例提供了一种计算设备，包括存储器和处理器，所述存储器中存储有可执行代码，所述处理器执行所述可执行代码，实现本申请第一方面提供的方法。
[0017]第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，当所述计算机程序在计算机中执行时，令计算机执行本申请第一方面提供的方法。
[0018]第五方面，本申请实施例提供了一种计算机程序或计算机程序产品，所述计算机程序或计算机程序产品包括指令，当所述指令被执行时，实现本申请第一方面提供的方法。
[0019]第六方面，本申请的实施例提供了一种芯片，该芯片包括至少一个处理器和接口，所述至少一个处理器通过所述接口确定程序指令或者数据；该至少一个处理器用于执行所述程序指令，以实现第一方面提供的方法。
附图说明
[0020]图1为一种双重RAID的存储实现示意图；
[0021]图2为一种双重RAID的节点间RAID存储实现示意图；
[0022]图3为本申请实施例提供的一种分布式存储系统的结构示意图；
[0023]图4为本申请实施例提供的一种数据存储方法的流程示意图；
[0024]图5a为一级存储保护的在分布式存储系统中的存储示意图；
[0025]图5b为二级存储保护的在分布式存储系统中的存储示意图；
[0026]图5c为三级存储保护的在分布式存储系统中的存储示意图；
[0027]图5d为四级存储保护的在分布式存储系统中的存储示意图；
[0028]图6为本申请实施例提供的数据存储方法在存储节点中实现的示意图；
[0029]图7为本申请实施例提供的数据存储方法在步本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据存储方法，其特征在于，该方法包括：获取待存储数据的重要级别；其中，所述重要级别基于所述待存储数据的重要性所确定；基于所述待存储数据的重要级别确定所述待存储数据的存储策略；基于所述存储策略存储所述待存储数据。2.根据权利要求1所述的方法，其特征在于，在所述基于所述存储策略存储所述待存储数据之后，该方法还包括：监控对所述待存储数据的重要级别的修改操作；确定所述重要级别改变，基于调整后的重要级别确定所述待存储数据的存储策略；基于调整后的存储策略存储所述待存储数据。3.根据权利要求1或2所述的方法，其特征在于，所述基于所述待存储数据的重要级别确定所述待存储数据的存储策略，包括：基于所述待存储数据的重要级别确定待存储数据的RAID存储方式和副本数量N；其中，所述N为非负整数。4.根据权利要3所述的方法，其特征在于，所述待存储数据的重要级别包括一级、二级、三级和四级；所述基于所述待存储数据的重要级别确定待存储数据的RAID存储方式和副本数量N，包括：若所述待存储数据的重要级别为所述一级，所述待存储数据的RAID存储方式为RAID0存储,所述待存储数据的副本数量N为0；若所述待存储数据的重要级别为所述二级，所述待存储数据的RAID存储方式为第一预设冗余RAID存储,所述待存储数据的副本数量N为0；若所述待存储数据的重要级别为所述三级，所述待存储数据的RAID存储方式为RAID0存储,所述待存储数据的副本数量N为第一预设副本数量；若所述待存储数据的重要级别为所述四级，所述待存储数据的RAID存储方式为第二预设冗余RAID存储,所述待存储数据的副本数量N为第二预设副本数量...

【专利技术属性】
技术研发人员：寇桂翔，梁永贵，刘国霞，
申请(专利权)人：超聚变数字技术有限公司，
类型：发明
国别省市：