一种数据模型统一管理系统、方法、设备和存储介质技术方案

技术编号:29998338 阅读:14 留言:0更新日期:2021-09-11 04:40
本发明专利技术提供一种数据模型统一管理系统、方法、设备和存储介质,包括数据架构模块、标准管控模块、事前模型管控模块和事后元数据管控模块;所述数据架构模块的输出端与所述标准管控模块的输入端电性连接,所述标准管控模块的输出端与所述事前模型管控模块的输入端电性连接,所述事前模型管控模块的输出端与所述事后元数据管控模块的输入端电性连接。数据架构模块搭建数据模型的整体架构,标准管控模块根据整体架构制定数据标准,整理标准代码,梳理业务术语和目录标签,事前模型管控模块将数据标准、标准代码、业务术语和目录标签映射到事前模型管控模块中,并存储到事后元数据管控模块,事后元数据管控模块调用存储的信息生产元数据。数据。数据。

【技术实现步骤摘要】
一种数据模型统一管理系统、方法、设备和存储介质


[0001]本专利技术涉及数据管理领域,具体涉及一种数据模型统一管理系统、方法、设备和存储介质。

技术介绍

[0002]中国银行业协会城商行工作委员会发布的《城市商业银行发展报告(2018)》数据指出,在开放共享的信息时代,金融科技体系呈现出主体多元、业态多样、关联度高的生态系统特征,封闭的经营发展思路难以适应时代要求,而金融科技技术投入巨大,多数城商行独木难支,因此城商行需要通过运用金融科技的多样发展模式,实现优势互补和系统发展效应。
[0003]工作过程中,我们发现元数据和数据关系严重缺失,极大的影响了数据模型的构建和数据应用建模的效率,付出了很多人力成本。而且还有很多问题没有解决:
[0004](1)数据业务关系缺失
[0005]目前数据的业务关系没有很好的文档来管理,信息被存储在不同的物理表里,这导致根据业务对象取信息时,不能将信息拉通在一起。
[0006](2)业务主题定义没有统一管理
[0007]目前已经开展了数据业务主题的建模,在集市层对数据分析提供服务,目前需要可以承载业务主题的平台,能够将按主题建设的主题,一期发布给数据取数和敏捷分析的分析人员手中。
[0008](3)元数据文档无法保证与生产库一致
[0009]数据模型文档与数据库的一致性缺乏监控和管理,造成模型文档过于老旧,甚至缺失。对数据仓库建设造成很大的影响,过去几个域的模型建设,已经深刻发现这个问题,需要有机制和工具,保证数据模型的质量。
[0010](4)元数据管理工具不统一
[0011]通过前期调研,使用的模型工具有PowerDesigner,Erwin等多种,也存在非合规的元数据工具,如Excel、Word等,造成模型查阅不便,不能体现数据间关系,不确定是否最新版本,对于某些工具没有相应的软件服务,存在潜在风险。
[0012]现有的技术中,中国专利技术专利CN103067461B公开了“一种文件的元数据管理系统以及元数据管理方法”,公开日为2016年03月30日,包括:元数据管理子系统,用于存储并管理文件的元数据;元数据位置管理子系统,用于存储并管理所述元数据的存储位置信息;以及服务接入节点,用于在接收到文件的应用请求时,从所述元数据位置管理子系统获取所述文件的元数据的存储位置信息,并根据所述元数据的存储位置信息从所述元数据管理子系统获取所述元数据。该方案中,使对外提供的元数据的并发访问能力提高,但是其文档与管理工具并没有统一管理,无法保证数据质量,存在潜在风险。

技术实现思路

[0013]本专利技术为了解决业务主题定义和元数据管理工具没有统一管理、数据业务关系缺失的问题,提供一种数据模型统一管理系统、方法、设备和存储介质。
[0014]为实现以上专利技术目的,采用的技术方案是:
[0015]一种数据模型统一管理系统,包括数据架构模块、标准管控模块、事前模型管控模块和事后元数据管控模块;所述数据架构模块的输出端与所述标准管控模块的输入端电性连接,所述标准管控模块的输出端与所述事前模型管控模块的输入端电性连接,所述事前模型管控模块的输出端与所述事后元数据管控模块的输入端电性连接。
[0016]上述方案中,数据架构模块搭建数据模型的整体架构,标准管控模块根据整体架构制定数据标准,整理标准代码,梳理业务术语和目录标签,事前模型管控模块将数据标准、标准代码、业务术语和目录标签映射到事前模型管控模块中,并存储到事后元数据管控模块,事后元数据管控模块调用存储的信息生产元数据,对业务主题定义和元数据管理工具进行统一管理。
[0017]数据模型是一个更好的数据字典,其向上承接业务语义,向下实现物理数据,它不但包含了数据字典,更重要的是包含了业务的主题,业务主对象,数据关系,以及数据标准的映射。所以模型及其工具的运用不但是企业数据管理是否成熟的重要标志,也是数据标准落标的重要依托。
[0018]所述数据架构模块基于企业级逻辑模型的整体架构。
[0019]所述标准管控模块包括数据标准子模块、标准代码子模块、业务术语子模块和目录标签子模块,所述数据架构模块的输出端与所述数据标准子模块的输入端、标准代码子模块的输入端、业务术语子模块的输入端和目录标签子模块的输入端均电性连接,所述数据标准子模块的输出端、标准代码子模块的输出端、业务术语子模块的输出端和目录标签子模块的输出端均与所述事前模型管控模块的输入端电性连接。
[0020]所述事前模型管控模块基于系统级开发模型。
[0021]所述系统级开发模型包括OLTP模型和数据仓库模型;所述数据标准子模块的输出端、标准代码子模块的输出端、业务术语子模块的输出端和目录标签子模块的输出端均与所述OLTP模型的输入端和数据仓库模型的输入端电性连接,所述OLTP模型的输出端和数据仓库模型的输出端均与所述事后元数据管控模块的输入端电性连接。
[0022]上述方案中,事前模型管控模块是在基于系统级开发模型进一步细化扩展而来,根据系统的不同应用又分为OLTP模型和数据仓库模型。系统级开发模型在构建过程中通过应用数据标准或者继承模型中的数据标准信息实现数据标准的落地。
[0023]所述事后元数据管控模块包括OLTP数据库。
[0024]一种数据模型统一管理方法,用于一种数据模型统一管理系统,包括以下步骤:
[0025]S1:数据架构模块从业务角度搭建企业级数据模型的整体架构;
[0026]S2:标准管控模块根据企业级数据模型的整体架构制定数据标准,整理标准代码,梳理业务术语和目录标签;
[0027]S3:事前模型管控模块将数据标准、标准代码、业务术语和目录标签映射到系统级开发模型中,并存储到OLTP数据库中;
[0028]S4:事后元数据管控模块调用OLTP数据库的信息生产元数据。
[0029]在步骤S3中,所述系统级开发模型包括OLTP模型和数据仓库模型。
[0030]上述方案中,数据架构模块基于企业级逻辑模型,从业务角度做企业级数据模型的整体架构,在梳理企业级逻辑模型的过程中会涉及数据标准的定义和审批发布,而标准体系的建设会对企业逻辑模型提供有力的支撑。
[0031]标准管控模块主要包括数据标准体系的建设,数据标准对应的代码管理,以及业务术语和目录标签的梳理,将企业需要共同遵循的数据标准整理发布出来,数据标准会提供数据的业务和技术属性。
[0032]事前模型管控模块是在基于系统级开发模型进一步细化扩展而来,根据系统的不同应用又分为OLTP模型和数据仓库模型。系统级开发模型在构建过程中通过应用数据标准或者继承模型中的数据标准信息实现数据标准的落地。
[0033]对应新建系统的生产元数据是由事后元数据管控模块依据OLTP数据库的类型进一步继承转换,自带数据标准。对于已有存量的生产元数据可以通过逆向数据库提取OLTP数据库结构模型,并参考数据标准对数据开发模型进行完善来监控生产元数据本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据模型统一管理系统,其特征在于,包括数据架构模块、标准管控模块、事前模型管控模块和事后元数据管控模块;所述数据架构模块的输出端与所述标准管控模块的输入端电性连接,所述标准管控模块的输出端与所述事前模型管控模块的输入端电性连接,所述事前模型管控模块的输出端与所述事后元数据管控模块的输入端电性连接。2.根据权利要求1所述的一种数据模型统一管理系统,其特征在于,所述数据架构模块基于企业级逻辑模型的整体架构。3.根据权利要求2所述的一种数据模型统一管理系统,其特征在于,所述标准管控模块包括数据标准子模块、标准代码子模块、业务术语子模块和目录标签子模块,所述数据架构模块的输出端与所述数据标准子模块的输入端、标准代码子模块的输入端、业务术语子模块的输入端和目录标签子模块的输入端均电性连接,所述数据标准子模块的输出端、标准代码子模块的输出端、业务术语子模块的输出端和目录标签子模块的输出端均与所述事前模型管控模块的输入端电性连接。4.根据权利要求3所述的一种数据模型统一管理系统,其特征在于,所述事前模型管控模块基于系统级开发模型。5.根据权利要求4所述的一种数据模型统一管理系统,其特征在于,所述系统级开发模型包括OLTP模型和数据仓库模型;所述数据标准子模块的输出端、标准代码子模块的输出端、业务术语子模块的输出端和目录标签子模块的输出端均与所...

【专利技术属性】
技术研发人员:萧展辉
申请(专利权)人:南方电网数字电网研究院有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1