元数据更新方法、装置、电子设备及存储介质制造方法及图纸

本申请提出一种元数据更新方法、装置、电子设备及存储介质。本申请的技术方案包括：根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段；在查找到符合所述元数据类型的目标字段的情况下，基于所述目标字段，更新所述目标存储对象的元数据；其中，所述目标存储对象的元数据用于管理所述目标存储对象的存储。采用本申请的技术方案，可以更新元数据，利用更新后的元数据管理元数据对应的对象的存储。据对应的对象的存储。据对应的对象的存储。

【技术实现步骤摘要】
元数据更新方法、装置、电子设备及存储介质


[0001]本申请涉及计算机
，尤其涉及一种元数据更新方法、装置、电子设备及存储介质。

技术介绍

[0002]现有的存储引擎可以包括以下这几种：
[0003]数据湖，其类似于一个开放的储物空间，是一种在系统或存储库中以自然格式存储数据的方法，有助于以各种模式和结构形式配置数据，通常是对象块或文件。数据湖的主要思想是对企业中的所有数据进行统一存储，从原始数据(源系统数据的副本)转换为用于报告、可视化、分析和机器学习等各种任务的目标数据。数据湖中的数据可以包括结构化数据(例如关系数据库的数据)、半结构化数据例如(CSV(Comma
‑
Separated Values，逗号分隔值)、XML(Extensible Markup Language，可扩展标记语言)、JSON(JavaScript Object Notation，JavaScript对象简谱)等格式文件)、非结构化数数据(例如电子邮件、文档、PDF(Portable Document Format，便携式文档格式)文件等)和二进制数据(例如图像、音频、视频等)，从而形成一个可以容纳所有形式的数据的集中式数据存储。
[0004]数据仓，其类似于将一个储物间分隔成多个小格子，储物间内的数据按照存储要求存储到相应的小格子中，数据的存储结构清晰，使用方便。
[0005]业务数据库，其一般存储结构化数据，例如SQL(Structured Query Language，结构化查询语言)数据库、MySQL(关系型数据库管理系统)、Oracle数据库。
[0006]但是，上述存储引擎中存储的数据缺乏元数据或者即使拥有元数据但元数据中的描述较少或不符合要求，这会给存储引擎的数据存储或者存储引擎间的数据转换、流入/流出等存储管理带来困难。

技术实现思路

[0007]本申请实施例提供一种元数据更新方法、装置、电子设备及存储介质，以解决相关技术存在的问题，技术方案如下：
[0008]第一方面，本申请实施例提供一种元数据更新方法，包括：
[0009]根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段；
[0010]在查找到符合所述元数据类型的目标字段的情况下，基于所述目标字段，更新所述目标存储对象的元数据；其中，所述目标存储对象的元数据用于管理所述目标存储对象的存储。
[0011]第二方面，本申请实施例提供一种元数据更新装置，包括：
[0012]目标字段查找模块，用于根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段；
[0013]元数据更新模块，用于在查找到符合所述元数据类型的目标字段的情况下，基于
所述目标字段，更新所述目标存储对象的元数据；其中，所述目标存储对象的元数据用于管理所述目标存储对象的存储。
[0014]第三方面，本申请实施例提供了一种电子设备，该电子设备包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本申请任一种实施方式中的元数据更新方法。
[0015]第四方面，本申请实施例一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机指令，所述计算机指令被处理器执行时实现本申请任一种实施方式中的元数据更新方法。
[0016]上述技术方案中的优点或有益效果至少包括：
[0017]在本申请提供的技术方案中，根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段，并基于查找到的目标字段更新目标存储对象的元数据，从而可以利用元数据来管理其对应的目标存储对象。
[0018]上述技术方案的优点或有益效果还可以包括：
[0019]1、对多种类型的存储引擎如业务数据库、数据湖、数据仓等统一了元数据的描述。
[0020]2、增加了元数据对存储对象的属性描述，例如版本信息、数据存储路径、数据中的字段的血缘关系，存储引擎可以根据元数据跟踪元数据对应的数据对象，且追踪能力强。
[0021]3、元数据不限定存储引擎的类型，接入成本低，能够兼容市面上主流的存储引擎，做到拆箱即用。
[0022]上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本申请进一步的方面、实施方式和特征将会是容易明白的。
附图说明
[0023]在附图中，除非另外规定，否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解，这些附图仅描绘了根据本申请公开的一些实施方式，而不应将其视为是对本申请范围的限制。
[0024]图1为本申请第一实施例提供的元数据更新方法的流程图；
[0025]图2A为本申请第二实施例提供的元数据管理数据的存储的流程图；
[0026]图2B为本申请第三实施例提供的元数据管理数据的存储的流程图；
[0027]图3为本申请第三实施例提供的元数据更新装置的结构框图；
[0028]图4为本申请第四实施例提供的元数据更新装置的结构框图；
[0029]图5为本申请提供的可实现本申请实施例的元数据更新方法的电子设备的结构框图。
具体实施方式
[0030]在下文中，仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样，在不脱离本申请的精神或范围的情况下，可通过各种不同方式修改所描述的实施例。因此，附图和描述被认为本质上是示例性的而非限制性的。
[0031]元数据(Metadata)，又称为中介数据、中继数据，是描述数据的数据，主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。简而言之，元数据就是关于数据的数据。
[0032]图1示出了本申请提供的元数据更新方法的一个实施例的流程图。如图1所示，该元数据更新的方法，可以包括以下步骤：
[0033]S110，根据元数据类型，在目标存储对象记载的字段中查找符合元数据类型的目标字段。
[0034]S120，在查找到符合元数据类型的目标字段的情况下，基于目标字段，更新目标存储对象的元数据；其中，目标存储对象的元数据用于管理目标存储对象的存储。
[0035]其中，元数据类型可以是指其描述目标存储对象的相关信息的类型。目标存储对象可以包括文件、文档、表格、图像、视频、音频、应用程序等数据，其可存储于存储介质或存储器中。元数据类型可以包括对象的属性、对象中记载的字段的类型、对象中记载的字段与字段之间的关系类型、对象与其他对象之间的关系类型等。
[0036]示例性地，元数据类型可以包括数据(目标存储对象)的基本属性、数据的类型、数据中的字段类型、数据的相关信息等。
[0037本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种元数据更新方法，其特征在于，包括：根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段；在查找到符合所述元数据类型的目标字段的情况下，基于所述目标字段，更新所述目标存储对象的元数据；其中，所述目标存储对象的元数据用于管理所述目标存储对象的存储。2.根据权利要求1所述的方法，其特征在于，所述基于所述目标字段，更新所述目标存储对象的元数据，包括：获取与所述目标存储对象相关的执行脚本；在所述执行脚本中，确定与所述目标字段相关的语句；基于与所述目标字段相关的语句的语意，确定所述目标字段的来源，并在所述目标存储对象的元数据中，记录所述目标字段的来源。3.根据权利要求1所述的方法，其特征在于，所述基于所述目标字段，更新所述目标存储对象的元数据，包括：在所述目标存储对象包含有与所述目标字段相关的字典信息的情况下，基于所述字典信息，记录所述目标字段的相关信息。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：在所述目标存储对象为表格的情况下，根据所述目标存储对象的主键名称，确定所述目标存储对象的关联存储对象和主子明细；在所述目标存储对象的元数据中，记录所述目标存储对象的关联存储对象和主子明细。5.根据权利要求4所述的方法，其特征在于，所述方法还包括：在所述目标存储对象的关联存储对象记载的字段中，确定与所述目标字段相关的字段；基于所述与所述目标字段相关的字段，在所述目标存储对象的元数据中，记录所述目标字段的引用信息。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：识别所述目标存储对象的属性；在所述目标存储对象的元数据中，记录所述目标存储对象的属性信息。7.一种元数据更新装置，其特征在于，包括：目标字段查找模块，用于根据元数据类型，在目标存储对象记载的字段中查找符合所述元数据类型的目标字段；元数据更新模块，用于在查找到符合所述元数据类型的目标字段的情况下，基于所述目标字段，更新所述目标存储对象的元数据；其中，所述目标存储对象的元数据用于管理所述目标存储对象的存储。8.根据权利...

【专利技术属性】
技术研发人员：姜良友，
申请(专利权)人：北京鲸鹳科技有限公司，
类型：发明
国别省市：