【技术实现步骤摘要】
本说明书实施例涉及计算机，特别涉及模型测试方法以及模型测试装置。
技术介绍
1、随着计算机技术的发展，深度学习模型开始大放异彩，在语言理解、生成、交互和推理方面表现出了非凡能力，广泛应用于对话、翻译、代码生成等自然语言处理领域。随着模型的规模和复杂度的不断增加，模型能力的测试与管理变得越来越重要。
2、目前，模型测试过程中，由模型对英文测试问题进行回答，并对回答进行打分，根据打分确定模型的测试结果。然而，英文测试问题无法体现模型对其他场景的能力，且模型测试以模型对问题的解决能力为主，无法对模型的其他能力进行测试，导致模型测试灵活性与准确性差，因此，亟需一种灵活且精准的模型测试方案。
技术实现思路
1、有鉴于此，本说明书实施例提供了一种模型测试方法。本说明书一个或者多个实施例同时涉及一种模型测试装置，一种计算设备，一种计算机可读存储介质以及一种计算机程序产品，以解决现有技术中存在的技术缺陷。
2、根据本说明书实施例的第一方面，提供了一种模型测试方法，包括：
3、获取针对目标模型的对话测试维度；
4、根据对话测试维度，确定目标模型的测试数据和测试策略；
5、将测试数据输入目标模型，获得目标模型输出的模型处理结果；
6、根据测试策略对模型处理结果进行测试，获得目标模型的测试结果。
7、根据本说明书实施例的第二方面，提供了一种模型测试装置，包括：
8、获取模块，被配置为获取针对目标模型的对话测试
9、确定模块，被配置为根据对话测试维度，确定目标模型的测试数据和测试策略；
10、输入模块，被配置为将测试数据输入目标模型，获得目标模型输出的模型处理结果；
11、测试模块，被配置为根据测试策略对模型处理结果进行测试，获得目标模型的测试结果。
12、根据本说明书实施例的第三方面，提供了一种计算设备，包括：
13、存储器和处理器；
14、所述存储器用于存储计算机程序/指令，所述处理器用于执行所述计算机程序/指令，该计算机程序/指令被处理器执行时实现上述第一方面所提供的模型测试方法的步骤。
15、根据本说明书实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机程序/指令，该计算机程序/指令被处理器执行时实现上述第一方面所提供的模型测试方法的步骤。
16、根据本说明书实施例的第五方面，提供了一种计算机程序产品，包括计算机程序/指令，该计算机程序/指令被处理器执行时实现上述第一方面所提供的模型测试方法的步骤。
17、本说明书一个实施例提供的模型测试方法，包括：获取针对目标模型的对话测试维度；根据对话测试维度，确定目标模型的测试数据和测试策略；将测试数据输入目标模型，获得目标模型输出的模型处理结果；根据测试策略对模型处理结果进行测试，获得目标模型的测试结果。通过获取目标模型特定的对话测试维度，实现了从不同维度衡量目标模型的表现，有助于理解模型在各种对话场景下的能力，并且，通过使用对话测试维度对应的测试数据和测试策略对目标模型进行测试，有针对性地有效检验目标模型在不同对话测试维度下的表现，使得模型测试过程更加灵活与精准。
本文档来自技高网...【技术保护点】
1.一种模型测试方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述对话测试维度包括表达能力维度；
3.根据权利要求2所述的方法，其特征在于，所述测试策略包括角色检测策略；
4.根据权利要求3所述的方法，其特征在于，所述识别所述待测试对话数据中的目标对话内容，并检测所述目标对话内容对应的对话角色，获得角色检测结果，包括：
5.根据权利要求2所述的方法，其特征在于，所述测试策略包括角色对比策略；
6.根据权利要求1所述的方法，其特征在于，所述对话测试维度包括数据分离能力维度；
7.根据权利要求6所述的方法，其特征在于，所述将所述测试数据输入所述目标模型，获得所述目标模型输出的模型处理结果，包括：
8.根据权利要求7所述的方法，其特征在于，所述根据所述测试策略对所述模型处理结果进行测试，获得所述目标模型的测试结果，包括：
9.根据权利要求1所述的方法，其特征在于，所述对话测试维度包括生成能力维度；
10.根据权利要求9所述的方法，其特征在于，所述测试策略包括
11.根据权利要求9所述的方法，其特征在于，所述测试策略包括质量对比策略；
12.根据权利要求1所述的方法，其特征在于，所述根据所述测试策略对所述模型处理结果进行测试，获得所述目标模型的测试结果之后，还包括：
13.一种模型测试装置，其特征在于，包括：
14.一种计算设备，其特征在于，包括：
15.一种计算机可读存储介质，其特征在于，其存储有计算机程序/指令，该计算机程序/指令被处理器执行时实现权利要求1至12任意一项所述方法的步骤。
16.一种计算机程序产品，其特征在于，包括计算机程序/指令，该计算机程序/指令被处理器执行时实现权利要求1至12任意一项所述方法的步骤。
...【技术特征摘要】
1.一种模型测试方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述对话测试维度包括表达能力维度；
3.根据权利要求2所述的方法，其特征在于，所述测试策略包括角色检测策略；
4.根据权利要求3所述的方法，其特征在于，所述识别所述待测试对话数据中的目标对话内容，并检测所述目标对话内容对应的对话角色，获得角色检测结果，包括：
5.根据权利要求2所述的方法，其特征在于，所述测试策略包括角色对比策略；
6.根据权利要求1所述的方法，其特征在于，所述对话测试维度包括数据分离能力维度；
7.根据权利要求6所述的方法，其特征在于，所述将所述测试数据输入所述目标模型，获得所述目标模型输出的模型处理结果，包括：
8.根据权利要求7所述的方法，其特征在于，所述根据所述测试策略对所述模型处理结果进行测试，获得所述目标模型的测试结果，包括：...
【专利技术属性】
技术研发人员：李文雅，王乐，王伟泽，朱珊珊，卢江虎，柳景明，
申请(专利权)人：北京飞象星球科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。