基于数据的测试评价系统技术方案

本发明专利技术涉及测试系统的技术领域，且公开了基于数据的测试评价系统，导调端软件模块包括有统计评分设计，统计评分设计包括有目标探测、有效性评测、正确率评测、目标位置评测与任务分评测等子模块，通过设置统计评分设置，评判主要有两种评判依据、目标探测和环境建模，相对应的，系统对每一个待测软件有两个科目的评价，目标探测和环境建模，两个科目的考题数据是不同的，而且不能通用，自动评测模块相对考试过程是一个独立的模块，待测软件将答案返回给服务器，之后评测模块就可以独立运行，不需要再和服务器做交互，只有当评测模块计算出得分之后，调用服务器的持久化相关接口将得分保存到数据库，从而保证了数据在传递流动时的完整性。

【技术实现步骤摘要】
基于数据的测试评价系统
本专利技术涉及测试系统的
，具体为基于数据的测试评价系统。
技术介绍
现有对数据的测评需要通过数据测试评价系统来进行实现，数据的测评系统主要实现对基于数据的测评活动提供测试试题以及测试结果数据的管理，具体功能包括测试数据管理、被测单元信息管理、测试流程控制、统计评分以及系统管理等功能，现有多数数据测评系统在进行测评时，由于不同考题的数据是不同的因此在进行数据传输的过程中，不同的数据信息可能会产生冲突，进而可能导致数据的丢失。
技术实现思路
(一)解决的技术问题针对现有技术的不足，本专利技术提供了基于数据的测试评价系统，具备保证了数据在传递流动时的完整性等优点，解决了现有多数数据测评系统在进行测评时，由于不同考题的数据是不同的因此在进行数据传输的过程中，不同的数据信息可能会产生冲突，进而可能导致数据的丢失的问题。(二)技术方案为实现上述保证了数据在传递流动时的完整性目的，本专利技术提供如下技术方案：基于数据的测试评价系统，包括有服务端软件模块、客户端软件模块、投影显示模块、导调端软件模块和数据存储库，客户端软件模块、导调端软件模块和数据存储库均和服务端软件模块进行双向的信号连接，导调端软件模块包括有测试设置、测试准备、过程控制、席位控制、统计评分设计与环境建模这些子模块，其中统计评分设计包括有目标探测、有效性评测、正确率评测、目标位置评测与任务分评测等子模块。优选的，所述服务端软件模块的架构包括有导调端容器、客户端容器、通讯指令集、题库解析器、基础数据管理、测试结果与评判数据存储库。优选的，所述测试设置包括有考题设置、参赛单位设置与人员角色设置。优选的，所述测试准备主要包括题库数据准备，人员信息准备，参赛单位信息准备以及参赛单位数据通讯接口准备，题库准备中每一套题库对应服务器指定目录下一套完整的文件夹。优选的，所述过程控制主要包括以下几个过程，下发考题、考试准备、开始考试、考试完成以及考试成绩。优选的，所述席位控制包括有观摩席、专家席与导调席。(三)有益效果与现有技术相比，本专利技术提供了基于数据的测试评价系统，具备以下有益效果：1、该基于数据的测试评价系统，通过设置统计评分设置，将各个参赛单位的待测软件推送过来的答案与考题的真值数据比较，从而自动的计算出待测软件的目标识别功能、目标定位功能和环境建模能力，评判主要有两种评判依据、目标探测和环境建模，相对应的，系统对每一个待测软件有两个科目的评价，目标探测和环境建模，两个科目的考题数据是不同的，而且不能通用，自动评测模块相对考试过程是一个独立的模块，待测软件将答案返回给服务器，服务器接收答案之后，需要将答案发送一份给自动评测模块，之后评测模块就可以独立运行，不需要再和服务器做交互，只有当评测模块计算出得分之后，调用服务器的持久化相关接口将得分保存到数据库，从而保证了数据在传递流动时的完整性。2、该基于数据的测试评价系统，通过设置客户端软件模块，客户端接收服务器发过来的指令，然后转发给待测软件，待测软件将答案直接发给客户端，客户端再将答案转发给服务器，客户端唯一的业务模块就是客户端控制了令牌数据的发送节奏，待测软件接收的令牌数据就是客户端发送过来的，发送的消息主要有两种情况，即时发送和持续发送，向指令这类数据，即时发送就可以了，发送完指令，马上就关闭连接，向答案和令牌数据，这要求持续的发送，这就要求连接之后，不能断开连接，只有等数据全部发送完成，通过设置客户端软件模块可以防止数据在传输过程中连接断开造成的数据丢失问题，从而有效的提高了数据运输时的稳定性。3、该基于数据的测试评价系统，通过设置评判模块，评判模块收到一条答案之后，将会马上计算得分，首先比对真值和答案，判断该答案是识别到的哪一个目标，这个判断首先根据答案中的目标类型和真值的目标类型进行匹配，将不匹配的排除，然后根据答案中目标出现的时间和真值中的时间匹配，考虑到同一时间可能有多个目标出现，最后一再根据答案中包围框和真值包围框计算交并比，只有交并比大于某一个阈值，该答案才算作有效，从有效提高了评判成绩的准确性。4、该基于数据的测试评价系统，通过设置测试评价方法，并通过服务器的评判模块，服务器会收集所有待测软件的答案，并根据答案计算得分，考虑到如果评分系统失灵，考试也能正常继续下去，所以计算得分又是一个独立的系统，导调端就是可视化的人为控制考试流程，和展示考试的结果，使可以实时的看到考试的数据。5、该基于数据的测试评价系统，通过将各个参赛单位的待测软件推送过来的答案与考题的真值数据比较，从而自动的计算出待测软件的目标识别功能，目标定位功能，环境建模能力，评判主要有两种评判依据，目标探测和环境建模，相对应的，系统对每一个待测软件有两个科目的评价，目标探测和环境建模，两个科目的考题数据是不同的，而且不能通用，下面对这两个科目的自动评测进行说明，自动评测模块相对考试过程是一个独立的模块，待测软件将答案返回给服务器，服务器接收答案之后，需要将答案发送一份给自动评测模块，之后评测模块就可以独立运行，不需要再和服务器做交互，只有当评测模块计算出得分之后，调用服务器的持久化相关接口将得分保存到数据库。附图说明图1为本专利技术的系统框图；图2为本专利技术图1中服务端软件模块的系统框图；图3为本专利技术图1中导调端软件模块的系统框图；图4为本专利技术的流程示意图。具体实施方式以下结合附图对本专利技术作进一步详细说明，其中相同的零部件用相同的附图标记表示,需要说明的是，下面描述中使用的词语“前”、“后”、“左”、“右”、“上”和“下”、“底面”和“顶面”指的是附图中的方向，词语“内”和“外”分别指的是朝向或远离特定部件几何中心的方向。下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参阅图1-4，本专利技术提供技术方案：基于数据的测试评价系统，包括有服务端软件模块、客户端软件模块、投影显示模块、导调端软件模块和数据存储库，客户端软件模块、导调端软件模块和数据存储库均和服务端软件模块进行双向的信号连接，服务端软件模块的架构包括有导调端容器、客户端容器、通讯指令集、题库解析器、基础数据管理、测试结果与评判数据存储库，导调端容器用来管理所有与服务器连接的导调端，客户端容器管理所有与服务器连接的客户端，服务器与导调和客户端通讯，都通过通讯指令集完成他们之间的数据通讯，基础数据管理解决评测系统相关的人员信息，参赛单位信息，题库信息，同时依附该模块的题库解析器主要是给题库数据加密和解密，测试结果用来解决各个参赛单位的考试答案，如果保存答案，则根据答案评判待测软件性能，并将答案推给导调，使导调可以正常的展示和回放，评判数据存储库为mysql数据库，需要持久化的本文档来自技高网...

【技术保护点】
1.基于数据的测试评价系统，包括有服务端软件模块、客户端软件模块、投影显示模块、导调端软件模块和数据存储库，客户端软件模块、导调端软件模块和数据存储库均和服务端软件模块进行双向的信号连接，其特征在于：所述导调端软件模块按照职能划分为观摩席，专家席和导调席，按评测点分为环境建模和目标探测，其中采用的手段包括实时采集的视频，GPS定位数据，惯导数据，点云数据，从而实现参赛单位识别系统的目标定位能力，目标识别能力，环境建模能力的综合评测，导调端软件模块包括有测试设置、测试准备、过程控制、席位控制、统计评分设计与环境建模，其中统计评分设计包括有目标探测、有效性评测、正确率评测、目标位置评测与任务分评测。/n

【技术特征摘要】
1.基于数据的测试评价系统，包括有服务端软件模块、客户端软件模块、投影显示模块、导调端软件模块和数据存储库，客户端软件模块、导调端软件模块和数据存储库均和服务端软件模块进行双向的信号连接，其特征在于：所述导调端软件模块按照职能划分为观摩席，专家席和导调席，按评测点分为环境建模和目标探测，其中采用的手段包括实时采集的视频，GPS定位数据，惯导数据，点云数据，从而实现参赛单位识别系统的目标定位能力，目标识别能力，环境建模能力的综合评测，导调端软件模块包括有测试设置、测试准备、过程控制、席位控制、统计评分设计与环境建模，其中统计评分设计包括有目标探测、有效性评测、正确率评测、目标位置评测与任务分评测。


2.根据权利要求1所述的基于数据的测试评价系统，其特征在于：所述服务端软件模块的架构包括有导调端容器、客户端容器、通讯指令集、题库解析器、基础数据管理、测试结果与评判数据存储库。


3.根据权利要求1所述的基于数据的测试评价系统，其特征在于：所述测试设置包括有考题设置、参赛单位设置与人员角色设置。


4.根据权利要求1所述的基于数据的测试评价系统，其特征在于：所述测试准备主要包括题库...

【专利技术属性】
技术研发人员：于桓凯，陶溢，韩坤，杨春晖，黄书见，周亮，孙涛，王保军，冯晓霞，陈悦峰，
申请(专利权)人：中国人民解放军陆军研究院装甲兵研究所，
类型：发明
国别省市：北京;11