自动化测试管理系统及方法技术方案

本发明专利技术涉及自动化测试技术，其公开了一种自动化测试管理方法，对自动化测试过程进行监控管理，减少人力投入，提高测试效率。该方法对提交到自动化测试平台的多个测试模块中相关联的模块进行分组归类，并通过创建分组临时文件记录各个分组的分组信息；并通过创建测试监控进程，对自动化测试过程进行监控，定时轮询分组临时文件，判断是否存在下属测试模块测试全部完成的分组，如果存在，则对分组中测试完成的测试模块的测试结果进行汇总，生成相应的汇总统计报表；判断分组中是否所有的测试模块的测试结果均已汇总并生成相应的汇总统计报表，如果是，则删除该分组。此外，本发明专利技术还公开了相应的测试管理系统，适用于对自动化测试进行监控管理。

【技术实现步骤摘要】

本专利技术涉及自动化测试技术，特别涉及针对自动化测试过程中的管理系统及管理方法。
技术介绍
目前，大部分自动化测试系统都支持并行运行多个测试进程，每个测试进程对应一个被测模块，在某一个被测模块测试完成之后，自动化平台会收集这个被测模块的测试结果；在传统技术中，当需要统计多个被测模块的自动化测试结果时，测试人员只有等到所有被测模块全部执行完毕后，才能得到所有被测模块的测试结果，并对相关联的多个模块测试结果进行汇总，最终生成需要的多份自动化测试报表；而对于测试失败的分析，则需要人工去分析是自动化测试脚本错误还是被测模块所在系统的错误；因此，传统技术在自动化测试中仍然需要投入较多的人力，测试效率无法得到充分发挥。
技术实现思路
本专利技术所要解决的技术问题是提出一种，对自动化测试过程进行监控管理，减少人力投入，提高测试效率。本专利技术解决上述技术问题所采用的方案是自动化测试管理系统，包括分组管理模块，用于对提交到自动化测试平台的多个被测模块按照关联关系进行分组，并创建用于记录所有分组信息的分组临时文件；在接收到测试结果统计模块的通知后，删除分组临时文件中当前所有被测模块全部测试完成的分组；测试执行模块，用于在分组管理模块创建分组临时文件后，同时启动分组临时文件中各分组的所有被测模块对应的自动化测试进程，并同步通知测试监控模块；测试监控模块，用于接收测试执行模块的通知后，创建并启动测试监控进程，定时轮询分组临时文件，判断是否存在所有被测模块测试完成的分组，如果有，则通知测试结果统计模块；测试结果统计模块，用于接收测试监控模块的通知，对当前分组中所有被测模块的测试结果进行汇总，生成相应的汇总统计报表后，通知分组管理模块。进一步，所述测试监控模块，还用于判断各个分组中的被测模块是否出现测试异常，如果出现测试异常，则通知分组管理模块从分组临时文件的对应分组中删除测试异常的被测模块；所述分组管理模块，还用于删除分组临时文件的对应分组中测试异常的被测模块。进一步，所述分组信息包括各个分组的分组名、分组中包含的被测模块对应的自动化测试进程的进程号。进一步，所述分组管理模块，还用于收到测试监控模块的通知后，对各个分组中的测试完成的被测模块标注完成标记，所述测试监控模块根据被测模块是否存在完成标记来判断该被测模块是否测试完成。进一步，该管理系统还包括错误管理模块，用于对自动化测试过程中被测模块对应自动化测试进程中的测试脚本执行失败的原因进行记录，并区分测试脚本执行失败原因为测试脚本错误或者被测模块错误，如果为被测模块错误，则自动向错误管理平台提交该错误。进一步，所述错误管理模块包括日志记录模块，用于对各个被测模块对应自动化测试进程中的测试脚本执行状况进行记录，如果测试脚本执行失败，则记录具体失败原因，如果测试脚本中的预期结果和实际结果不符合并且调用到了失败接口函数，则除了记录具体失败原因之外，还记录相应的失败代码；脚本分析模块，用于对日志记录模块的记录项进行分析，区分测试脚本执行失败原因为测试脚本错误或者被测模块错误如果日志记录项中包含失败代码，则判定测试脚本执行失败原因为被测模块错误，则在结合失败代码对系统错误进行描述后触发错误提交模块；如果日志记录项中未包含失败代码，则判定脚本执行失败原因为脚本错误；错误提交模块，用于结合错误管理系统提供的内部接口，由自动化平台调用，实现错误的提交。本专利技术的另一目的，还在于提出一种自动化测试管理方法，该方法包括以下步骤a.分组管理模块对提交到自动化测试平台的多个被测模块按照关联关系进行分组，并创建用于记录所有分组信息的分组临时文件；b.测试执行模块在分组管理模块创建分组临时文件后，同时启动分组临时文件中各分组的被测模块对应的自动化测试进程，并同步通知测试监控模块；测试监控模块创建并启动测试监控进程；c.测试监控进程定时轮询分组临时文件，判断是否存在所有被测模块测试完成的分组，如果存在，则进入步骤d，否则返回步骤c ；d.测试结果统计模块对分组中所有被测模块的测试结果进行汇总，生成相应的汇总统计报表；e.测试结果统计模块判断分组中是否所有的被测模块的测试结果均已汇总并生成相应的汇总统计报表，如果是，则进入步骤f，否则返回步骤d ；f.分组管理模块从分组临时文件中删除该分组，返回步骤C。进一步，所述各个分组的分组信息包括各个分组的分组名、分组中包含的被测模块对应的自动化测试进程的进程号。进一步，步骤c中还包括测试监控模块判断分组临时文件中的各个分组中的被测模块是否出现测试异常，如果出现测试异常，则通知分组管理模块从分组临时文件的对应分组中删除测试异常的被测模块。进一步，在步骤c中，还包括对自动化测试过程中被测模块对应自动化测试进程中的测试的脚本执行失败的原因进行记录，并区分测试脚本执行失败原因为测试脚本错误或者被测模块错误，如果为被测模块错误，则自动向错误管理平台提交该错误。本专利技术的有益效果是对自动化测试过程进行监控，既可以通过自动汇总功能实现测试结果的汇总，节约人力，提高测试效率；还可以由用户根据需求通过手工命令进行实时汇总，以适应不同的自动化测试执行策略；此外，本专利技术还具备对脚本执行失败原因进行分析的功能，区分出脚本执行失败时因为脚本错误或被测模块错误，并对错误进行自动上报，便于技术人员及时处理，以提高自动化测试的稳定性。附图说明图1为本专利技术的自动化测试管理方法实施例流程图；图2为自动化测试管理方法实施例中的错误提交流程图；图3为自动化测试管理系统的一种实施例结构框图；图4为错误管理模块的结构框图。具体实施例方式下面结合附图及实施例对本专利技术的技术方案作进一步的描述。参见图1，本例中的自动化测试管理方法采用以下步骤实现101、提交被测模块到自动化平台，指定该被测模块所属分组名；在本步骤中，测试人员在提交被测模块到自动化平台时，指定该被测模块所属分组名，其中分组名由测试人员指定，可将特性相关联的多个被测模块提交到指定的同一个分组中，达到将多被测模块分组的目的；这里分组的方式可以包括命令行和图形化界面两种方式。102、创建分组临时文件并启动自动化测试进程；在本步骤中，由分组管理模块通过创建分组临时文件来记录在步骤101中归类分组的分组名和各个分组下的被测模块对应的测试进程的进程号，在创建分组临时文件后启动自动化测试进程，进入自动化测试过程。103、创建并启动测试监控进程；在本步骤中，通过创建测试监控进程用于间隔一定时间轮询分组临时文件，在创建本进程的时候会检测在系统中是否已经存在同样的监控进程，如果存在，则不需要再创建。104、在某个被测模块完成测试后，在分组临时文件中对应的被测模块的测试进程上标注完成标记；本步骤是一个独立的步骤，在前面三个步骤执行完成后，提交到测试平台的被测模块会进入执行状态，当有被测模块完成测试后才进入本步骤，在本步骤中，会在分组临时文件中查找是否存在该已经完成的被测模块的进程号记录，如果存在，则修改分组临时文件，在对应的被测模块进程记录上标注上完成标记，目的是便于测试监控进程轮询；如果不存在则略过。105、间隔轮询分组临时文件，检查是否有测试全部完成的分组以及每个被测模块对应的测试进程是否异常；在步骤103中的测试监控进程创建后即进入轮询状态，本步骤中的“间隔轮询”是指本文档来自技高网...

【技术保护点】
自动化测试管理系统，其特征在于，包括：分组管理模块，用于对提交到自动化测试平台的多个被测模块按照关联关系进行分组，并创建用于记录所有分组信息的分组临时文件；在接收到测试结果统计模块的通知后，删除分组临时文件中当前所有被测模块全部测试完成的分组；测试执行模块，用于在分组管理模块创建分组临时文件后，同时启动分组临时文件中各分组的所有被测模块对应的自动化测试进程，并同步通知测试监控模块；测试监控模块，用于接收测试执行模块的通知后，创建并启动测试监控进程，定时轮询分组临时文件，判断是否存在所有被测模块测试完成的分组，如果有，则通知测试结果统计模块；测试结果统计模块，用于接收测试监控模块的通知，对当前分组中所有被测模块的测试结果进行汇总，生成相应的汇总统计报表后，通知分组管理模块。

【技术特征摘要】

【专利技术属性】
技术研发人员：王俊坤，
申请(专利权)人：迈普通信技术股份有限公司，
类型：发明
国别省市：