批量数据生成方法、装置、计算机设备及存储介质制造方法及图纸

本发明专利技术公开了批量数据生成方法、装置、计算机设备及存储介质。方法包括：根据数据生成请求配置得到信息采集程序，采集得到初始数据信息并通过筛选后得到筛选数据信息，根据项目信息及统计模板对筛选数据信息进行统计得到统计信息，根据统计信息、数据生成请求对数据生成模板进行配置得到数据生成任务，将数据生成任务分发至数据生成服务器以获取对应的虚拟数据信息。本发明专利技术基于数据采集技术，可对所采集得到的真实数据进行筛选并统计得到统计信息，根据统计信息中真实数据的分布情况配置数据生成任务以生成对应的虚拟数据信息，可大幅提升虚拟数据信息的真实性，从而满足软件产品测试过程中对测试数据真实性的要求。

【技术实现步骤摘要】
批量数据生成方法、装置、计算机设备及存储介质
本专利技术涉及数据采集
，属于智慧城市中智能数据生成相关的应用场景，尤其涉及一种批量数据生成方法、装置、计算机设备及存储介质。
技术介绍
软件测试是保证并提高软件质量的重要手段，它是软件生命周期中不可或缺的重要环节。软件测试过程中，测试数据的生成是其核心问题，也是软件测试的关键与难点所在，生成合适的测试数据是高效地进行软件测试的基础。在现有技术中，为提高对软件产品进行测试的质量，通常需要准备大量的虚拟数据信息作为测试数据，现有的数据生成方法虽然可大批量生成虚拟数据信息，但所生成的虚拟数据信息因真实性不足往往会脱离测试的实际需求，严重影响了对软件产品进行测试的效率及质量，无法满足软件产品测试过程中对测试数据真实性的要求。因此，现有的技术方法在生成海量虚拟数据信息时存在真实性不足的问题。
技术实现思路
本专利技术实施例提供了一种批量数据生成方法、装置、计算机设备及存储介质，旨在解决现有技术方法在生成海量虚拟数据信息时所存在的真实性不足的问题。第一方面，本专利技术实施例提供了一种批量数据生成方法，其包括：接收用户输入的数据生成请求，根据所述数据生成请求及预存的网络地址集合对预置的信息采集程序进行配置，得到配置的信息采集程序；执行所述配置的信息采集程序得到对应的初始数据信息，根据所述数据生成请求对所述初始数据信息进行筛选，得到对应的筛选数据信息；根据所述项目信息及预存的统计模板对所述筛选数据信息进行统计，获取与每一项目对应的统计信息，其中所述项目信息中包含多个项目；根据所述统计信息及所述数据生成请求对预存的数据生成模板进行配置，得到对应的数据生成任务；将所述数据生成任务分发至多台所述数据生成服务器，获取多台所述数据生成服务器执行所述数据生成任务所生成的虚拟数据信息。第二方面，本专利技术实施例提供了一种批量数据生成装置，其包括：信息采集程序配置单元，用于接收用户输入的数据生成请求，根据所述数据生成请求及预存的网络地址集合对预置的信息采集程序进行配置，得到配置的信息采集程序；筛选数据信息获取单元，用于执行所述配置的信息采集程序得到对应的初始数据信息，根据所述数据生成请求对所述初始数据信息进行筛选，得到对应的筛选数据信息；统计信息获取单元，用于根据所述项目信息及预存的统计模板对所述筛选数据信息进行统计，获取与每一项目对应的统计信息，其中所述项目信息中包含多个项目；数据生成任务获取单元，用于根据所述统计信息及所述数据生成请求对预存的数据生成模板进行配置，得到对应的数据生成任务；虚拟数据信息获取单元，用于将所述数据生成任务分发至多台所述数据生成服务器，获取多台所述数据生成服务器执行所述数据生成任务所生成的虚拟数据信息。第三方面，本专利技术实施例又提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述的批量数据生成方法。第四方面，本专利技术实施例还提供了一种计算机可读存储介质，其中所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的批量数据生成方法。本专利技术实施例提供了一种批量数据生成方法、装置、计算机设备及存储介质。根据数据生成请求配置得到信息采集程序，采集得到初始数据信息并通过筛选后得到筛选数据信息，根据项目信息及统计模板对筛选数据信息进行统计得到统计信息，根据统计信息、数据生成请求对数据生成模板进行配置得到数据生成任务，将数据生成任务分发至数据生成服务器以获取对应的虚拟数据信息。通过上述方法，可对所采集得到的真实数据进行筛选并统计得到统计信息，根据统计信息中真实数据的分布情况配置数据生成任务以生成对应的虚拟数据信息，可大幅提升虚拟数据信息的真实性，从而满足软件产品测试过程中对测试数据真实性的要求。附图说明为了更清楚地说明本专利技术实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的批量数据生成方法的流程示意图；图2为本专利技术实施例提供的批量数据生成方法的应用场景示意图；图3为本专利技术实施例提供的批量数据生成方法的子流程示意图；图4为本专利技术实施例提供的批量数据生成方法的另一子流程示意图；图5为本专利技术实施例提供的批量数据生成方法的另一子流程示意图；图6为本专利技术实施例提供的批量数据生成方法的另一子流程示意图；图7为本专利技术实施例提供的批量数据生成方法的另一流程示意图；图8为本专利技术实施例提供的批量数据生成方法的另一子流程示意图；图9为本专利技术实施例提供的批量数据生成装置的示意性框图；图10为本专利技术实施例提供的计算机设备的示意性框图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。还应当理解，在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。还应当进一步理解，在本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。请参阅图1及图2，图1是本专利技术实施例提供的批量数据生成方法的流程示意图，图2为本专利技术实施例提供的批量数据生成方法的应用场景示意图。该批量数据生成方法应用于管理服务器10中，该方法通过安装于管理服务器10中的应用软件进行执行，管理服务器10与多台数据生成服务器20进行通信，每一台数据生成服务器20对应连接一台分布式存储单元30，管理服务器10可通过发送程序指令至数据生成服务器20以对数据生成服务器20进行管理，管理服务器10即是用于获取用户所输入的数据生成请求以数据生成任务并将其发至数据生成服务器20以完成虚拟数据信息生成的服务器端，数据生成服务器20即是所构建的用于执行来自管理服务器10的程序指令以完成虚拟数据生成的分布式服务器，分布式存储单元30即是用于对数据生成服务器20所生成的虚拟数据信息进行分布式存储的存储设备，分布式存储单元30中所存储的虚拟数据信息可经数据生成本文档来自技高网...

【技术保护点】
1.一种批量数据生成方法，应用于管理服务器中，所述管理服务器与多台数据生成服务器进行通信，其特征在于，包括：/n接收用户输入的数据生成请求，根据所述数据生成请求及预存的网络地址集合对预置的信息采集程序进行配置，得到配置的信息采集程序，其中，所述数据生成请求包含数据类型及项目信息；/n执行所述配置的信息采集程序得到对应的初始数据信息，根据所述数据生成请求对所述初始数据信息进行筛选，得到对应的筛选数据信息；/n根据所述项目信息及预存的统计模板对所述筛选数据信息进行统计，获取与每一项目对应的统计信息，其中所述项目信息中包含多个项目；/n根据所述统计信息及所述数据生成请求对预存的数据生成模板进行配置，得到对应的数据生成任务；/n将所述数据生成任务分发至多台所述数据生成服务器，获取多台所述数据生成服务器执行所述数据生成任务所生成的虚拟数据信息。/n

【技术特征摘要】
1.一种批量数据生成方法，应用于管理服务器中，所述管理服务器与多台数据生成服务器进行通信，其特征在于，包括：
接收用户输入的数据生成请求，根据所述数据生成请求及预存的网络地址集合对预置的信息采集程序进行配置，得到配置的信息采集程序，其中，所述数据生成请求包含数据类型及项目信息；
执行所述配置的信息采集程序得到对应的初始数据信息，根据所述数据生成请求对所述初始数据信息进行筛选，得到对应的筛选数据信息；
根据所述项目信息及预存的统计模板对所述筛选数据信息进行统计，获取与每一项目对应的统计信息，其中所述项目信息中包含多个项目；
根据所述统计信息及所述数据生成请求对预存的数据生成模板进行配置，得到对应的数据生成任务；
将所述数据生成任务分发至多台所述数据生成服务器，获取多台所述数据生成服务器执行所述数据生成任务所生成的虚拟数据信息。


2.根据权利要求1所述的批量数据生成方法，其特征在于，所述根据所述数据生成请求及预存的网络地址集合对预置的信息采集程序进行配置，得到配置的信息采集程序，包括：
根据所述数据生成请求中的数据类型，获取所述网络地址集合中与所述数据类型相匹配的网络地址信息；
根据所述网络地址信息及所述数据生成请求中的项目信息对所述信息采集程序中的参数值进行配置，以得到完成配置的信息采集程序。


3.根据权利要求1所述的批量数据生成方法，其特征在于，所述数据生成请求还包括项目范围，所述根据所述数据生成请求对所述初始数据信息进行筛选，得到对应的筛选数据信息，包括：
根据所述数据生成请求中与所述项目信息对应的项目范围确定筛选范围；
根据所述筛选范围对所述初始数据信息进行筛选以得到对应的筛选数据信息。


4.根据权利要求1所述的批量数据生成方法，其特征在于，所述根据所述项目信息及预存的统计模板对所述筛选数据信息进行统计，获取与每一项目对应的统计信息，包括：
根据所述项目信息所包含的项目，获取所述统计模板中与每一所述项目对应的项目统计规则；
根据与每一所述项目对应的项目统计规则对所述筛选数据信息进行分项目统计，以获取与每一所述项目对应的统计信息。


5.根据权利要求1所述的批量数据生成方法，其特征在于，还包括：
根据预置的数据验证规则对每一所述项目对应的统计信息进行验证得到是否验证通过的验证结果；若验证结果为通过，执行所述根据所述统计信息及所述数据生成请求对预存的数据生成模板进行配置，得到对应的数据生成任务的步骤。


6.根据权利要求...

【专利技术属性】
技术研发人员：胡倩，
申请(专利权)人：平安国际智慧城市科技股份有限公司，
类型：发明
国别省市：广东;44