System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 数据处理方法、装置、电子设备及存储介质制造方法及图纸_技高网

数据处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:42553007 阅读:8 留言:0更新日期:2024-08-29 00:25
本发明专利技术涉及数据存储技术领域,提供一种数据处理方法、装置、电子设备及存储介质,该数据处理方法包括:获取存储系统中的多个存储单元在目标时间周期内的读写响应时间;根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数;根据所述迁移指数对所述存储单元中的存储数据进行数据迁移。通过本申请所述提供的技术方案,对存储单元中的存储数据进行数据迁移,使得存储系统中的空间能够部分清理出来,避免使用更多的固态硬盘。

【技术实现步骤摘要】

本专利技术涉及数据存储,尤其涉及一种数据处理方法、装置、电子设备及存储介质


技术介绍

1、在存储行业中,数据的平均读写量越来越大,导致存储数据所需要盘的数量也越来越多,而固态硬盘(solid state drives,ssd)的价格较高,导致存储数据的成本逐步增大。若设备上如果全部使用固态硬盘来存储数据,使得整体成本也较高。


技术实现思路

1、本专利技术提供一种数据处理方法、装置、电子设备及存储介质,用以解决现有技术中存储数据的成本较高的缺陷,实现降低数据存储的成本。

2、本专利技术提供一种数据处理方法,包括如下步骤:

3、获取存储系统中的多个存储单元在目标时间周期内的读写响应时间;

4、根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数;

5、根据所述迁移指数对所述存储单元中的存储数据进行数据迁移。

6、根据本专利技术提供的一种数据处理方法,所述目标时间周期包括多个处理时间周期;所述根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数,包括:根据各个所述存储单元在各所述处理时间周期内的所述读写响应时间,计算各个所述存储单元在各所述处理时间周期内的指数移动平均值;

7、根据各所述指数移动平均值确定所述存储单元在所述目标时间周期内的迁移指数。

8、根据本专利技术提供的一种数据处理方法,所述根据各个所述存储单元在各所述处理时间周期内的所述读写响应时间,计算各个所述存储单元在各所述处理时间周期内的指数移动平均值,包括:

9、根据各所述处理时间周期的时间顺序,若当前计算的所述处理时间周期为所述目标时间周期内的第一个所述处理时间周期,根据对应的所述读写响应时间计算所述指数移动平均值;若当前计算的所述处理时间周期不为所述目标时间周期内的第一个所述处理时间周期,根据对应的所述读写响应时间和当前计算的所述处理时间周期的上一个所述处理时间周期的所述指数移动平均值,计算对应的所述指数移动平均值。

10、根据本专利技术提供的一种数据处理方法,所述根据对应的所述读写响应时间和当前计算的所述处理时间周期的上一个所述处理时间周期的所述指数移动平均值,计算对应的所述指数移动平均值,包括:

11、对所述对应的所述读写响应时间和上一个所述处理时间周期的所述指数移动平均值进行加权计算,得到对应的所述指数移动平均值。

12、根据本专利技术提供的一种数据处理方法,所述根据各所述指数移动平均值确定所述存储单元在所述目标时间周期内的迁移指数,包括:

13、将各所述处理时间周期中距离当前时刻最近的所述处理时间周期作为目标处理时间周期;将各所述存储单元在所述目标处理时间周期的所述指数移动平均值作为对应的所述迁移指数。

14、根据本专利技术提供的一种数据处理方法,所述根据所述迁移指数对所述存储单元中的存储数据进行数据迁移,包括:

15、根据各个所述存储单元的所述迁移指数,将各个所述存储单元进行排序处理,得到存储单元序列;

16、获取预设分组数值,并基于所述预设分组数值,对所述存储单元序列中的各所述存储单元进行分组处理,得到多个存储单元分组;

17、将各所述存储单元分组中的所述存储单元的所述迁移指数进行求和处理,得到各所述存储单元分组的分组指数;

18、基于各个所述存储单元分组的所述分组指数,在各个所述存储单元分组中确定目标存储单元分组;

19、确定所述目标存储单元分组中的各个所述存储单元的存储位置信息;

20、将所述目标存储单元分组中的各个所述存储单元的所述存储数据和对应的所述存储位置信息存储至预设的存储桶中。

21、根据本专利技术提供的一种数据处理方法,所述基于各个所述存储单元分组的所述分组指数,在各个所述存储单元分组中确定目标存储单元分组,包括:

22、基于所述分组指数,确定最大的所述分组指数所对应的所述存储单元分组和/或最小的所述分组指数所对应的所述存储单元分组作为所述目标存储单元分组。

23、本专利技术还提供一种数据处理装置,包括如下模块:

24、获取模块,配置为获取存储系统中的多个存储单元在目标时间周期内的读写响应时间;

25、计算模块,配置为根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数;

26、数据迁移模块,配置为根据所述迁移指数对所述存储单元中的存储数据进行数据迁移。

27、本专利技术还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述数据处理方法。

28、本专利技术还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述数据处理方法。

29、本专利技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述数据处理方法。

30、本专利技术提供的数据处理方法、装置、电子设备及存储介质,通过获取存储系统中的多个存储单元在目标时间周期内的读写响应时间,来计算各个所述存储单元在目标时间周期内的迁移指数,迁移指数表征了对应的存储单元中的存储数据是否需要进行迁移。根据计算得到的迁移指数对存储单元中的存储数据进行数据迁移,使得存储系统中的空间能够部分清理出来,避免使用更多的固态硬盘,在一定程度上减少固态硬盘的使用,进而节约数据存储的成本。

本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的数据处理方法,其特征在于,所述目标时间周期包括多个处理时间周期;所述根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数,包括:

3.根据权利要求2所述的数据处理方法,其特征在于,所述根据各个所述存储单元在各所述处理时间周期内的所述读写响应时间,计算各个所述存储单元在各所述处理时间周期内的指数移动平均值,包括:

4.根据权利要求3所述的数据处理方法,其特征在于,所述根据对应的所述读写响应时间和当前计算的所述处理时间周期的上一个所述处理时间周期的所述指数移动平均值,计算对应的所述指数移动平均值,包括:

5.根据权利要求2所述的数据处理方法,其特征在于,所述根据各所述指数移动平均值确定所述存储单元在所述目标时间周期内的迁移指数,包括:

6.根据权利要求1至5中任一项所述的数据处理方法,其特征在于,所述根据所述迁移指数对所述存储单元中的存储数据进行数据迁移,包括:

7.根据权利要求6所述的数据处理方法,其特征在于,所述基于各个所述存储单元分组的所述分组指数,在各个所述存储单元分组中确定目标存储单元分组,包括:

8.一种数据处理装置,其特征在于,包括:

9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述数据处理方法。

10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述数据处理方法。

...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的数据处理方法,其特征在于,所述目标时间周期包括多个处理时间周期;所述根据所述读写响应时间计算各个所述存储单元在所述目标时间周期内的迁移指数,包括:

3.根据权利要求2所述的数据处理方法,其特征在于,所述根据各个所述存储单元在各所述处理时间周期内的所述读写响应时间,计算各个所述存储单元在各所述处理时间周期内的指数移动平均值,包括:

4.根据权利要求3所述的数据处理方法,其特征在于,所述根据对应的所述读写响应时间和当前计算的所述处理时间周期的上一个所述处理时间周期的所述指数移动平均值,计算对应的所述指数移动平均值,包括:

5.根据权利要求2所述的数据处理方法,其特征在于,所述根据各所述指数移动平均值确定所述存储单元在...

【专利技术属性】
技术研发人员:郭平加王艳清徐洪志韩廷卯
申请(专利权)人:苏州元脑智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1