质检规则确定方法、装置、设备和存储介质制造方法及图纸

本发明专利技术提供一种质检规则确定方法、装置、设备和存储介质，涉及数据质量管理技术领域，所述方法包括：响应用户的第一操作指令，获取待质检表；基于所述待质检表，确定目标提示信息；将所述目标提示信息输入生成式大语言模型，输出所述目标提示信息对应的第一质检规则建议信息；基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则。本发明专利技术可提高目标质检规则的创建效率和配置效率，确保目标质检规则的全面性。目标质检规则的全面性。目标质检规则的全面性。

【技术实现步骤摘要】
质检规则确定方法、装置、设备和存储介质


[0001]本专利技术涉及数据质量管理
，尤其涉及一种质检规则确定方法、装置、设备和存储介质。

技术介绍

[0002]数据中台中包括依据企业特有的业务模式和组织架构，构建的持续不断把数据变成资产并服务于业务的机制，数据中台需要具备数据汇聚整合、数据提纯加工、数据服务可视化、数据价值变现４个核心能力，便于企业员工和客户等应用数据。
[0003]数据中台中包括数据质量管理（Data Quality Management）功能，通过配置质检规则，对各数据表中的数据进行质检，及时发现数据质量问题，以纠正数据质量问题，形成高质量的数据资产。
[0004]然而，在配置质检规则时，一般由操作人员人工创建各数据表对应的质检规则，且各数据表对应的业务领域不同，各数据表的字段信息较多，往往需要对表级或字段级设置多个质检规则，人工创建质检规则容易遗漏且效率较低。

技术实现思路

[0005]本专利技术提供一种质检规则确定方法、装置、设备和存储介质，用以解决现有技术中人工创建质检规则容易遗漏且效率较低的缺陷，提高目标质检规则的创建效率和配置效率，确保目标质检规则的全面性。
[0006]本专利技术提供一种质检规则确定方法，包括：响应用户的第一操作指令，获取待质检表；基于所述待质检表，确定目标提示信息；将所述目标提示信息输入生成式大语言模型，输出所述目标提示信息对应的第一质检规则建议信息；基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则。
>[0007]根据本专利技术提供的质检规则确定方法，所述基于所述待质检表，确定目标提示信息，包括：基于所述待质检表对应的表格信息，确定第一提示信息；响应用户的第二操作指令，获取目标语法信息；将所述第一提示信息和所述目标语法信息进行拼接，确定所述目标提示信息。
[0008]根据本专利技术提供的质检规则确定方法，所述表格信息包括：表名信息和所述待质检表中各字段对应的字段信息；所述基于所述待质检表对应的表格信息，确定第一提示信息，包括：基于所述表名信息，确定领域提示信息；基于各所述字段信息，确定所述待质检表中各字段对应的质检规则提示信息；将所述领域提示信息和所有质检规则提示信息进行拼接，确定所述第一提示信
息。
[0009]根据本专利技术提供的质检规则确定方法，所述基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则，包括：识别所述第一质检规则建议信息中的分隔符；基于所述分隔符，从所述第一质检规则建议信息中确定第二质检规则建议信息；基于所述第二质检规则建议信息，确定所述待质检表对应的目标质检规则。
[0010]根据本专利技术提供的质检规则确定方法，所述基于所述第二质检规则建议信息，确定所述待质检表对应的目标质检规则，包括：获取预设关联表；基于所述预设关联表，确定所述目标语法信息对应的目标解析器，所述预设关联表中包括语法信息与解析器的对应关系；基于所述目标解析器对所述第二质检规则建议信息进行解析，确定所述待质检表对应的目标质检规则。
[0011]根据本专利技术提供的质检规则确定方法，所述基于所述目标解析器对所述第二质检规则建议信息进行解析，确定所述待质检表对应的目标质检规则，包括：基于所述目标解析器对所述第二质检规则建议信息进行解析，得到质检规则清单信息；将所述质检规则清单信息发送至终端，所述终端用于显示所述质检规则清单信息；响应用户的第三操作指令，基于所述质检规则清单信息，确定所述待质检表对应的目标质检规则。
[0012]根据本专利技术提供的质检规则确定方法，所述方法还包括：响应用户的第四操作指令，在数据中台中配置所述目标质检规则，并将所述目标质检规则保存至质检规则库。
[0013]本专利技术还提供一种质检规则确定装置，包括：获取模块，用于响应用户的第一操作指令，获取待质检表；第一确定模块，用于基于所述待质检表，确定目标提示信息；输出模块，用于将所述目标提示信息输入生成式大语言模型，输出所述目标提示信息对应的第一质检规则建议信息；第二确定模块，用于基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则。
[0014]本专利技术还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述质检规则确定方法。
[0015]本专利技术还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述质检规则确定方法。
[0016]本专利技术提供的质检规则确定方法、装置、设备和存储介质，通过获取待质检表，并根据待质检表确定目标提示信息，之后将目标提示信息输入生成式大语言模型，输出第一质检规则建议信息，并根据第一质检规则建议信息，确定该待质检表对应的目标质检规则，
实现目标质检规则的自动创建，提高目标质检规则的创建效率和配置效率，确保目标质检规则的全面性，降低对操作人员的专业度要求，提高普适性。
附图说明
[0017]为了更清楚地说明本专利技术或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0018]图1是现有技术提供的质检规则配置方法的流程示意图；图2是现有技术提供的质检规则配置界面的界面示意图；图3是本专利技术实施例提供的质检规则确定方法的流程示意图之一；图4是本专利技术实施例提供的获取待质检表的界面示意图；图5是本专利技术实施例提供的质检规则确定方法的流程示意图之二；图6是本专利技术实施例提供的质检规则确定方法的流程示意图之三；图7是本专利技术实施例提供的质检规则确定装置的结构示意图；图8是本专利技术实施例提供的电子设备的结构示意图。
具体实施方式
[0019]为使本专利技术的目的、技术方案和优点更加清楚，下面将结合本专利技术中的附图，对本专利技术中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0020]图1是现有技术提供的质检规则配置方法的流程示意图，如图1所示，现有技术中，在进行质检规则配置时，在获取数据中台中的数据表后，读取该数据表的表格信息，响应数据质量管理员的操作，可开启质检规则配置界面，该质检规则配置界面如图2所示。之后，由数据质量管理员进行质检规则的创建和配置，并将质检规则保存至质检规则库中。然而，人工创建质检规则和配置质检规则的效率较低，且较为片面，容易遗漏数据表中的字段信息。
[0021]针对上述问题，本申请实施例提供一种质检规则确定方法，图3是本专利技术实施例提供的质检规则确定方法的流程示意图之一，如图3所示，该方法包括：步骤310、响应用户的第一操作指令，获取待质检表。
[0022]具体的，数据中台是一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种质检规则确定方法，其特征在于，包括：响应用户的第一操作指令，获取待质检表；基于所述待质检表，确定目标提示信息；将所述目标提示信息输入生成式大语言模型，输出所述目标提示信息对应的第一质检规则建议信息；基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则。2.根据权利要求1所述的质检规则确定方法，其特征在于，所述基于所述待质检表，确定目标提示信息，包括：基于所述待质检表对应的表格信息，确定第一提示信息；响应用户的第二操作指令，获取目标语法信息；将所述第一提示信息和所述目标语法信息进行拼接，确定所述目标提示信息。3.根据权利要求2所述的质检规则确定方法，其特征在于，所述表格信息包括：表名信息和所述待质检表中各字段对应的字段信息；所述基于所述待质检表对应的表格信息，确定第一提示信息，包括：基于所述表名信息，确定领域提示信息；基于各所述字段信息，确定所述待质检表中各字段对应的质检规则提示信息；将所述领域提示信息和所有质检规则提示信息进行拼接，确定所述第一提示信息。4.根据权利要求2或3所述的质检规则确定方法，其特征在于，所述基于所述第一质检规则建议信息，确定所述待质检表对应的目标质检规则，包括：识别所述第一质检规则建议信息中的分隔符；基于所述分隔符，从所述第一质检规则建议信息中确定第二质检规则建议信息；基于所述第二质检规则建议信息，确定所述待质检表对应的目标质检规则。5.根据权利要求4所述的质检规则确定方法，其特征在于，所述基于所述第二质检规则建议信息，确定所述待质检表对应的目标质检规则，包括：获取预设关联表；基于所述预设关联表，确定所述目标语法信息对应的目标解析器，所述预设关联表中包括语法信息与解析器...

【专利技术属性】
技术研发人员：郑扬勇，柳宁，
申请(专利权)人：云粒智慧科技有限公司，
类型：发明
国别省市：