System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种应用于云服务平台的数据存储方法及系统技术方案_技高网

一种应用于云服务平台的数据存储方法及系统技术方案

技术编号:42147189 阅读:6 留言:0更新日期:2024-07-27 00:02
本申请实施例提供一种应用于云服务平台的数据存储方法及系统,首先提取标注和未标注的云服务运行数据序列,利用标注数据生成候选误差估计网络,进而估计未标注数据上的网络误差。通过此误差参数,从未标注数据中提取样例进行训练标签配置,扩展标注数据集。然后,基于扩展数据集循环优化候选网络和崩溃预测网络,生成目标预测网络。最后,利用此网络对任意云服务数据进行崩溃预测,并溯源存储关键路径数据。此方法不仅提高了云服务崩溃预测的准确性,而且通过关键路径数据的存储,为云服务优化和问题排查提供了有力的数据支持,从而增强了云服务的稳定性和可靠性。

【技术实现步骤摘要】

本申请涉及云服务,具体而言,涉及一种应用于云服务平台的数据存储方法及系统


技术介绍

1、随着云计算技术的快速发展和广泛应用,云服务平台已成为企业和个人用户存储、处理数据的重要工具。然而,云服务平台在运行过程中可能会遇到各种问题和挑战,其中,云服务的稳定性和可靠性尤为关键。云服务的崩溃不仅会导致数据丢失,还可能对用户体验和业务连续性产生严重影响。

2、为了预防云服务的崩溃,需要对云服务的运行状态进行实时监测和预测。然而,传统的监测方法通常只能提供有限的运行状态信息,且难以准确预测云服务的崩溃风险。此外,云服务运行数据的复杂性和大规模性也给数据的存储和分析带来了巨大挑战。

3、目前,虽然有一些方法可以用于云服务崩溃预测,但它们通常基于简单的统计模型或机器学习算法,对云服务运行数据的特征提取和模型训练不够深入和全面。这些方法在处理复杂、非线性的云服务运行数据时,往往难以达到理想的预测效果。

4、同时,现有的云服务数据存储方法通常只是简单地将数据存储在云端,而没有对数据进行深入的分析和处理。这种方法不仅占用了大量的存储空间,还无法有效地提取出数据中的关键信息,从而难以对云服务的运行状态进行准确的监测和预测。


技术实现思路

1、有鉴于此,本申请的目的在于提供一种应用于云服务平台的数据存储方法及系统。

2、结合本申请的第一方面,提供一种应用于云服务平台的数据存储方法,应用于应用于云服务平台的数据存储系统,所述方法包括:

3、提取携带云服务崩溃点标注数据的第一样例云服务运行数据序列和不携带云服务崩溃点标注数据的第二样例云服务运行数据序列;

4、依据所述第一样例云服务运行数据序列生成的候选误差估计网络,估计所述候选误差估计网络对应的候选云服务崩溃预测网络在所述第二样例云服务运行数据序列上的网络误差参数,生成网络误差参数估计结果;

5、基于所述网络误差参数估计结果,在所述第二样例云服务运行数据序列中提取样例云服务运行数据进行训练标签配置,以扩展所述第一样例云服务运行数据序列;

6、基于扩展后的第一样例云服务运行数据序列循环优化所述候选误差估计网络以及所述候选云服务崩溃预测网络,生成目标云服务崩溃预测网络;

7、基于所述目标云服务崩溃预测网络对任意输入的目标云服务运行数据进行云服务崩溃预测,生成所述目标云服务运行数据对应的目标云服务崩溃预测结果,并基于所述目标云服务崩溃预测结果溯源所述目标云服务运行数据中的关键路径数据后,对所述关键路径数据进行存储。

8、在第一方面的一种可能的实施方式中,所述第二样例云服务运行数据序列至少包括无监督样例云服务运行数据,所述网络误差参数估计结果至少包括一所述无监督样例云服务运行数据对应的网络估计误差,

9、所述基于所述网络误差参数估计结果,在所述第二样例云服务运行数据序列中提取样例云服务运行数据进行训练标签配置,以扩展所述第一样例云服务运行数据序列的步骤包括:

10、基于各所述网络估计误差的大小,在所述第二样例云服务运行数据序列中选取各参考样例云服务运行数据;

11、对各所述参考样例云服务运行数据进行崩溃点标定,生成各有监督样例云服务运行数据;

12、将各所述有监督样例云服务运行数据添加到所述第一样例云服务运行数据序列,以扩展所述第一样例云服务运行数据序列。

13、在第一方面的一种可能的实施方式中,所述利用所述候选误差估计网络计算所述无监督样例云服务运行数据的网络误差参数估计结果的步骤包括:

14、将候选云服务崩溃预测网络中各特征编码单元的输出分别转换为误差估计编码向量;

15、将各所述误差估计编码向量进行集成得到集成编码向量;

16、对所述集成编码向量进行全连接输出,生成所述网络误差参数估计结果。

17、在第一方面的一种可能的实施方式中,所述提取第一样例云服务运行数据序列和第二样例云服务运行数据序列的步骤之前包括:

18、获取待进行崩溃点预测的无监督样例云服务运行数据序列;

19、从所述无监督样例云服务运行数据序列中随机提取无监督样例云服务运行数据进行训练标签配置,将所述无监督样例云服务运行数据序列分为第一样例云服务运行数据序列和第二样例云服务运行数据序列;

20、依据所述第一样例云服务运行数据序列,构建候选误差估计网络和候选云服务崩溃预测网络。

21、在第一方面的一种可能的实施方式中,所述基于扩展后的第一样例云服务运行数据序列循环优化所述候选误差估计网络以及所述候选云服务崩溃预测网络,生成目标云服务崩溃预测网络的步骤包括:

22、计算所述候选云服务崩溃预测网络在所述扩展后的第一样例云服务运行数据序列上的云服务崩溃预测误差;

23、依据所述云服务崩溃预测误差,计算所述候选误差估计网络在所述扩展后的第一样例云服务运行数据序列上的误差估计损失值;

24、依据所述云服务崩溃预测误差和所述误差估计损失值,生成所述目标云服务崩溃预测网络。

25、在第一方面的一种可能的实施方式中,所述依据所述云服务崩溃预测误差,计算所述候选误差估计网络在所述扩展后的第一样例云服务运行数据序列上的误差估计损失值的步骤包括:

26、依据所述候选误差估计网络,估计所述候选云服务崩溃预测网络在所述扩展后的第一样例云服务运行数据序列上的网络误差参数,生成误差估计损失值。

27、在第一方面的一种可能的实施方式中,所述依据所述云服务崩溃预测误差和所述误差估计损失值,生成所述目标云服务崩溃预测网络的步骤包括:

28、依据所述云服务崩溃预测误差和所述误差估计损失值,计算全局误差参数;

29、如果所述全局误差参数不再继续下降,则将所述候选云服务崩溃预测网络作为所述目标云服务崩溃预测网络;

30、如果所述全局误差参数继续下降,则依据所述全局误差参数计算的网络梯度,更新所述候选云服务崩溃预测网络,并返回执行步骤:提取第一样例云服务运行数据序列和第二样例云服务运行数据序列。

31、在第一方面的一种可能的实施方式中,所述基于所述目标云服务崩溃预测结果溯源所述目标云服务运行数据中的关键路径数据的步骤,包括:

32、从目标云服务运行数据中提取出所有的路径数据,所述路径数据包括函数调用链、数据传输路径和/或资源访问路径;

33、将所述目标云服务崩溃预测结果映射到提取出的路径数据上,对于每一条路径数据,根据所述路径数据对应的崩溃预测结果,评估所述路径数据在导致云服务崩溃中的影响权重,获得影响权重评估结果;

34、根据所述影响权重评估结果,识别出对云服务崩溃具有显著影响的路径数据,作为所述关键路径数据,其中,所述关键路径数据的影响权重大于预设权重。

35、结合本申请的第二方面,提供一种应用于云服务平台的数据存储系统,所述应本文档来自技高网...

【技术保护点】

1.一种应用于云服务平台的数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述第二样例云服务运行数据序列至少包括无监督样例云服务运行数据,所述网络误差参数估计结果至少包括一所述无监督样例云服务运行数据对应的网络估计误差,

3.根据权利要求2所述的应用于云服务平台的数据存储方法,其特征在于,所述利用所述候选误差估计网络计算所述无监督样例云服务运行数据的网络误差参数估计结果的步骤包括:

4.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述提取第一样例云服务运行数据序列和第二样例云服务运行数据序列的步骤之前包括:

5.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述基于扩展后的第一样例云服务运行数据序列循环优化所述候选误差估计网络以及所述候选云服务崩溃预测网络,生成目标云服务崩溃预测网络的步骤包括:

6.根据权利要求5所述的应用于云服务平台的数据存储方法,其特征在于,所述依据所述云服务崩溃预测误差,计算所述候选误差估计网络在所述扩展后的第一样例云服务运行数据序列上的误差估计损失值的步骤包括:

7.根据权利要求5所述的应用于云服务平台的数据存储方法,其特征在于,所述依据所述云服务崩溃预测误差和所述误差估计损失值,生成所述目标云服务崩溃预测网络的步骤包括:

8.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述基于所述目标云服务崩溃预测结果溯源所述目标云服务运行数据中的关键路径数据的步骤,包括:

9.一种应用于云服务平台的数据存储系统,其特征在于,包括处理器以及计算机可读存储介质,所述计算机可读存储介质中存储有机器可执行指令,所述机器可执行指令被计算机执行时实现权利要求1-8中任意一项所述的应用于云服务平台的数据存储方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有机器可执行指令,所述机器可执行指令被计算机执行时实现权利要求1-8中任意一项所述的应用于云服务平台的数据存储方法。

...

【技术特征摘要】

1.一种应用于云服务平台的数据存储方法,其特征在于,所述方法包括:

2.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述第二样例云服务运行数据序列至少包括无监督样例云服务运行数据,所述网络误差参数估计结果至少包括一所述无监督样例云服务运行数据对应的网络估计误差,

3.根据权利要求2所述的应用于云服务平台的数据存储方法,其特征在于,所述利用所述候选误差估计网络计算所述无监督样例云服务运行数据的网络误差参数估计结果的步骤包括:

4.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述提取第一样例云服务运行数据序列和第二样例云服务运行数据序列的步骤之前包括:

5.根据权利要求1所述的应用于云服务平台的数据存储方法,其特征在于,所述基于扩展后的第一样例云服务运行数据序列循环优化所述候选误差估计网络以及所述候选云服务崩溃预测网络,生成目标云服务崩溃预测网络的步骤包括:

6.根据权利要求5所述的应用于云服务平台的数据存储方法,其特...

【专利技术属性】
技术研发人员:赖祥彬陈闻野陈祥
申请(专利权)人:天津智玲珑数据科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1