基于大数据的数据审核方法、装置及存储介质制造方法及图纸

本申请实施例提供一种基于大数据的数据审核方法、装置及存储介质，该方法包括：获取大数据平台中数据表单的应用场景；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够按照审核复杂度由低到高的顺序，对数据内容进行审核，提高数据审核效率。

【技术实现步骤摘要】
基于大数据的数据审核方法、装置及存储介质
本申请涉及大数据
，具体涉及一种基于大数据的数据审核方法、装置及存储介质。
技术介绍
现有的很多数据采集系统，除了系统表单上报验证之外，后台管理数据大都基于人工审核的方式，导致产生很多重复性的工作，浪费大量的人力物力，并且审核质量受人为因素影响。在已有数据表中，用户经常会针对这些数据期望过滤筛选出自己的目标数据，但往往这些目标数据需要经过表内、标间以及历史数据比较计算，过程冗长以及复杂，导致用户想要批量处理变得极其困难。此外，在数据采集系统中，经常会遇到验证需求需要变更的场景。每次审核逻辑的修改都需要重新编码、测试、发布等一系列工作，造成了很大的资源浪费，并且处理的及时性也较滞后。
技术实现思路
本申请实施例提供一种基于大数据的数据审核方法、装置及存储介质，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。本申请实施例的第一方面提供了基于大数据的数据审核方法，所述方法包括：获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；获取与所述应用场景对应的用于审核所述数据表单的审核公式；确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定所述至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。本申请实施例的第二方面提供了一种基于大数据的数据审核装置，所述装置包括：获取单元，用于获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；以及，获取与所述应用场景对应的用于审核所述数据表单的审核公式；确定单元，用于确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；以及确定所述至少一个目标数据标识对应的数据内容的审核复杂度；审核单元，用于按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。本申请实施例的第三方面提供了一种基于大数据的数据审核装置，包括处理器、存储器、通信接口，以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面所述的方法中的步骤的指令。本申请实施例的第四方面提供了一种计算机可读存储介质，上述计算机可读存储介质用于存储计算机程序，上述计算机程序被处理器执行，以实现如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。本申请实施例的第五方面提供了一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。实施本申请实施例，具有至少如下有益效果：可以看出，通过本申请实施例，获取大数据平台中数据表单的应用场景，应用场景为表单验证应用场景或批量审核应用场景，数据表单包括多个数据内容，每一数据内容对应一个数据标识；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本申请实施例提供的一种基于大数据的数据审核方法的流程示意图；图2为本申请实施例提供的一种地址树的演示示意图；图3为本申请实施例提供的另一种基于大数据的数据审核方法的流程示意图；图4为本申请实施例提供的一种基于大数据的数据审核装置的流程示意图；图5为本申请实施例提供的一种基于大数据的数据审核装置的结构示意图；图6为本申请实施例提供的如图5所示的基于大数据的数据审核装置的变型装置。具体实施方式下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本申请中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本申请所描述的实施例可以与其它实施例相结合。下面对本申请实施例进行详细介绍。请参阅图1，图1为本申请实施例提供的一种基于大数据的数据审核方法的流程示意图。如图1所示，本申请实施例提供的基于大数据的数据审核方法应用于基于大数据的数据审核装置，该基于大数据的数据审核方法可包括以下步骤：101、获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识。其中，在大数据平台中，所述应用场景可包括表单验证应用场景和批量审核应用场景。其中，上述数据表单本文档来自技高网...

【技术保护点】
1.一种基于大数据的数据审核方法，其特征在于，所述方法包括：/n获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；/n获取与所述应用场景对应的用于审核所述数据表单的审核公式；/n确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；/n确定所述至少一个目标数据标识对应的数据内容的审核复杂度；/n按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。/n

【技术特征摘要】
1.一种基于大数据的数据审核方法，其特征在于，所述方法包括：
获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；
获取与所述应用场景对应的用于审核所述数据表单的审核公式；
确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；
确定所述至少一个目标数据标识对应的数据内容的审核复杂度；
按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。


2.根据权利要求1所述的方法，其特征在于，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：
按照审核复杂度由低到高的顺序，根据所述第一审核公式生成页面脚本；
将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。


3.根据权利要求2所述的方法，其特征在于，所述根据所述第一审核公式生成页面脚本，包括：
根据所述第一审核公式生成预设脚本；
根据关键字标识从所述数据表单中提取关键字；
根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本。


4.根据权利要求1所述的方法，其特征在于，若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，所述N个数据表单具有相同的表单标签，N为正整数，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：
根据所述表单标签查找地址树；
遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点。


5.根据权利要求4所述的方法，其特征在于，在所述调用与所述数据标识对应的第二审核公式之前，所述方法还包括：
获取M个数据表单的M个表单标识信息，M为大于N的正整数；
确定所述M个表单标识信息中的具有相同表单标签的N个表单标识信息；
确定所述N个表单标识信息对应的N个数据表单；
所述调用与所述数据标识对应的第二审核公式，包括：
根据所述数...

【专利技术属性】
技术研发人员：黎惟春，吴中山，
申请(专利权)人：深圳市维度统计咨询股份有限公司，
类型：发明
国别省市：广东;44