System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请适用于数据处理,尤其涉及一种数据库测试用例执行结果的分析方法、装置、设备及介质。
技术介绍
1、目前,数据库产品具备需求稳定、测试场景固定和用例执行结果稳定的特点,就结构化数据库而言,数据库功能测试的用例多数为结构化查询语言(structured querylanguage,sql)脚本,一般直接调用jdbc客户端执行sql语句来测试,因此,自动化测试覆盖率趋近于100%。在自动化测试场景中,环境异常、用例前后置失败导致的跳过、超时、用例并行执行等非问题导致每日构建的用例失败数量很大,可能占失败用例总数的90%以上,而同一bug导致多次构建用例失败也频繁发生,这些都需要每次花费大量精力去分析。
2、在devops模式的开发应用到数据库产品时,由于每日持续集成(即每日提供最新的产品包)、持续交付等,需要对最新产品包进行测试验证,这就导致自动化用例越来越多,用例分析任务越来越重,人工对自动化用例分析的结果进行观测无法满足需求。
3、因此,如何自动对测试用例执行结果进行分析,以便于区别不同执行结果,使得用户能够关注到新的bug引起的失败的测试用例成为亟待解决的问题。
技术实现思路
1、有鉴于此,本申请实施例提供了一种数据库测试用例执行结果的分析方法、装置、设备及介质,以解决如何自动对测试用例执行结果进行分析,以便于区别不同执行结果,使得用户能够关注到新的bug引起的失败的测试用例的问题。
2、第一方面,本申请实施例提供一种数据库测试用例执行结果的
3、获取待分析的测试用例集以及所述待分析的测试用例集中每个测试用例的当前期望结果,执行每个测试用例,得到对应测试用例的第一执行结果;
4、将每个测试用例的第一执行结果与对应测试用例的当前期望结果进行比对,得到对应测试用例的第一比对结果,根据所述第一比对结果为失败的测试用例的第一执行结果,得到对应测试用例的当前失败原因;
5、针对任一测试用例,根据所述测试用例的第一比对结果,对所述测试用例的执行情况进行标记,得到第一标签,和/或根据所述测试用例的当前失败原因,对所述测试用例的失败原因进行标记,得到第二标签,根据所有的标签对所述待分析的测试用例集进行分类展示。
6、第二方面,本申请实施例提供一种数据库测试用例执行结果的分析装置,所述分析装置包括:
7、执行模块,用于获取待分析的测试用例集以及所述待分析的测试用例集中每个测试用例的当前期望结果,执行每个测试用例,得到对应测试用例的第一执行结果;
8、分析模块,用于将每个测试用例的第一执行结果与对应测试用例的当前期望结果进行比对,得到对应测试用例的第一比对结果,根据所述第一比对结果为失败的测试用例的第一执行结果,得到对应测试用例的当前失败原因;
9、分类模块,用于针对任一测试用例,根据所述测试用例的第一比对结果,对所述测试用例的执行情况进行标记,得到第一标签,和/或根据所述测试用例的当前失败原因,对所述测试用例的失败原因进行标记,得到第二标签,根据所有的标签对所述待分析的测试用例集进行分类展示。
10、第三方面,本申请实施例提供一种计算机设备,所述计算机设备包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述的数据库测试用例执行结果的分析方法。
11、第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的数据库测试用例执行结果的分析方法。
12、本申请实施例与现有技术相比存在的有益效果是:本申请获取待分析的测试用例集以及所述待分析的测试用例集中每个测试用例的当前期望结果,执行每个测试用例,得到对应测试用例的第一执行结果,将每个测试用例的第一执行结果与对应测试用例的当前期望结果进行比对,得到对应测试用例的第一比对结果,根据所述第一比对结果为失败的测试用例的第一执行结果,得到对应测试用例的当前失败原因,针对任一测试用例,根据所述测试用例的第一比对结果,对所述测试用例的执行情况进行标记,得到第一标签,和/或根据所述测试用例的当前失败原因,对所述测试用例的失败原因进行标记,得到第二标签,根据所有的标签对所述待分析的测试用例集进行分类展示,实现测试用例的执行结果进行打标,从而使得用户能够关注到新的bug、历史bug以及非bug问题等引起的失败。
本文档来自技高网...【技术保护点】
1.一种数据库测试用例执行结果的分析方法,其特征在于,所述分析方法包括:
2.根据权利要求1所述的分析方法,其特征在于,所述根据所述第一比对结果为失败的测试用例的第一执行结果,得到对应测试用例的当前失败原因,包括:
3.根据权利要求1所述的分析方法,其特征在于,在所述根据所有的标签对所述待分析的测试用例集进行分类之前,还包括:
4.根据权利要求3所述的分析方法,其特征在于,在所述检测所述测试用例的第三比对结果是否为失败之后,还包括:
5.根据权利要求4所述的分析方法,其特征在于,所述根据所述第四比对结果,对所述测试用例的连续失败情况进行标记,得到第四标签,包括:
6.根据权利要求1至5任一项所述的分析方法,其特征在于,在所述根据所有的标签对所述待分析的测试用例集进行分类展示之前,还包括:
7.根据权利要求1所述的分析方法,其特征在于,所述执行每个测试用例,得到对应测试用例的第一执行结果,包括:
8.一种数据库测试用例执行结果的分析装置,其特征在于,所述分析装置包括:
9.一种计算机设备
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的数据库测试用例执行结果的分析方法。
...【技术特征摘要】
1.一种数据库测试用例执行结果的分析方法,其特征在于,所述分析方法包括:
2.根据权利要求1所述的分析方法,其特征在于,所述根据所述第一比对结果为失败的测试用例的第一执行结果,得到对应测试用例的当前失败原因,包括:
3.根据权利要求1所述的分析方法,其特征在于,在所述根据所有的标签对所述待分析的测试用例集进行分类之前,还包括:
4.根据权利要求3所述的分析方法,其特征在于,在所述检测所述测试用例的第三比对结果是否为失败之后,还包括:
5.根据权利要求4所述的分析方法,其特征在于,所述根据所述第四比对结果,对所述测试用例的连续失败情况进行标记,得到第四标签,包括:
6.根据权利要求1至5任一项所述的分析方法,其特征在于,在所述...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。