System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种政务数据资源库的构建方法技术_技高网

一种政务数据资源库的构建方法技术

技术编号:41456998 阅读:7 留言:0更新日期:2024-05-28 20:43
本发明专利技术公开一种政务数据资源库的构建方法,涉及计算机大数据技术领域,针对数据处理需求进行个性化的任务构建,导致数据管理松散,系统性、规范性较差,数据价值挖掘不充分的问题,采用方案包括:梳理基于应用导向的政务数据架构,包括确定需要建设的资源库、梳理资源库数据模型、梳理数据资源;通过依次执行填写库基本信息、构建业务模型、构建物理模型、构建数据处理任务和发布数据应用完成资源库的在线构建;统计并分析应用运营信息,并通过数据分析优化数据模型和资源库构建流程。本发明专利技术可以实现资源库的流程化、模式化建设,提升资源库构建的标准程度和效率,并提高数据利用的工作效率和效果。

【技术实现步骤摘要】

本专利技术涉及计算机大数据,具体的说是一种政务数据资源库的构建方法


技术介绍

1、大数据技术作为数字时代的核心驱动力之一,已经深入到社会各个领域,并对社会产生深远的影响。其中,智慧政务是大数据利用的一个重要方向。通过分析政务数据平台建设模式发现,当前政务数据治理存在三种建设场景,一种以质量检测为导向,主要目的为发现业务系统数据质量问题,并提供解决方案,统一数据标准;第二种以数据协同共享为导向,打通业务部门共享通道,消除部门、系统间的数据烟囱;第三种以数据应用为导向,对特定数据进行清洗整合或挖掘分析,应对具体的个性化推荐、智能化决策等应用业务场景。三种数据治理模式的支撑系统情况各不相同,其中第一种可通过较成熟的数据质量检测系统进行支撑,第二种可通过统一共享交换平台或相似系统进行支撑,而第三种由于应用场景复杂,数据来源、数据模型、处理流程、数据支撑方式等都不相同,当前支撑方法大多依托etl数据处理工具,针对数据处理需求进行个性化的任务构建,导致数据管理松散,系统性、规范性较差,数据价值挖掘不充分。


技术实现思路

1、本专利技术针对目前技术发展的需求和不足之处,提供一种政务数据资源库的构建方法,通过系统性的资源库构建流程,提高数据治理和数据应用的规范性,为以数据应用为导向的数据治理提供科学的系统架构和实施方法,提升数据治理和数据应用工作的效率和效果。

2、本专利技术的一种政务数据资源库的构建方法,解决上述技术问题采用的技术方案如下:

3、一种政务数据资源库的构建方法,其包括如下步骤:

4、s1、梳理基于应用导向的政务数据架构,包括确定需要建设的资源库、梳理资源库数据模型、梳理数据资源;

5、s2、通过依次执行填写库基本信息、构建业务模型、构建物理模型、构建数据处理任务、发布数据应用五个步骤完成资源库的在线构建;

6、s3、统计数据应用支持的系统、调用次数、调用时间趋势,分析应用运营信息,并通过数据分析优化数据模型和资源库构建流程。

7、可选的,执行步骤s1,所述资源库的数据架构包括原始库、基础库、对象库、主题库和专题库,其中:

8、原始库为基础库、对象库、主题库和专题库的建设提供基础数据;

9、基础库负责保存基于应用导向的基础资源数据;

10、对象库以政务业务职责为依托,梳理服务和管理对象,梳理对象库,有助于业务场景和应用场景的明确;

11、主题库和专题库均以各业务部门业务应用场景为导向,按照相关要求进行建设。

12、进一步可选的,梳理基础库、对象库、主题库和专题库内的数据模型,其中:

13、基础库具有基础性、基准性、标识性、稳定性,按照相关规范进行建设;

14、对象库在基础库基础上进行业务对象的精细化、业务化管理,基于对象全生命周期进行数据模型构建;

15、主题库和专题库按应用场景进行数据模型的梳理,包括明细信息、行为信息、统计信息。

16、进一步可选的,对象库基于对象全生命周期进行数据模型构建,具体数据模型分为基本信息、核心信息、扩展信息和基础服务信息,其中:基本信息为基准和稳定性信息,核心信息为状态信息和属性信息,扩展信息为状态和属性的明细、统计信息,基础服务为对象库能够为数据应用提供的基础的服务。

17、进一步可选的,执行步骤s1,基于数据模型进行数据资源的梳理,包括梳理数据来源需求、确定原始数据的来源部门和来源系统,形成原始数据资源目录清单,并进行原始目录编目。

18、进一步可选的,执行步骤s2,通过依次执行填写库基本信息、构建业务模型、构建物理模型、构建数据处理任务、发布数据应用五个步骤完成资源库的在线构建,其中:

19、填写库基本信息包括:填写资源库的类型、牵头单位和关联库,创建资源库的载体;

20、通过数据目录分类和数据目录呈现资源库业务模型,业务模型的目录信息项包括:基础信息目录选择,状态信息和核心信息维护,明细信息和统计信息的维护;

21、物理模型将业务模型转化为数据库物理表映射,并生成数据资源;

22、通过数据处理任务,将原始数据汇聚处理至对象库,实现数据物理集中;

23、数据应用提供数据服务接口和数据应用程序两种发布方式。

24、进一步可选的,业务模型支持数据的物理集中和逻辑集中,其中:

25、物理集中需将原始数据抽取至对象库中,并创建记录库目录与原始目录的关联关系,维护目录信息项来源的原始目录信息项;

26、逻辑集中只在目录层面将原始目录与对象库关联,具体数据不再进行物理集中,在业务模型维护中直接将原始目录进行关联维护。

27、进一步可选的,物理模型的映射支持两种场景:

28、1)一种为业务模型直接映射为物理库表,该场景为物理库表未手动创建,完全通过业务模型进行物化创建的情况,该场景需选择库表生成数据源,输入数据表名,根据目录信息项自动生成字段名、字段类型、字段长度,确认后在数据源库中生成相应的数据表;

29、2)另外一种为物理库表关联业务模型,该场景为物理库表已手动创建的情况,选择数据源和数据表,并与资源库中目录进行关联,形成物理模型。

30、可选的,执行步骤s3,api接口在数据服务接口网关提供接口调用频次统计,应用程序在系统提供埋点统计应用使用频次,通过统计分析应用运营信息,为资源库建设提供优化提升建议,提升数据应用的利用程度。

31、本专利技术的一种政务数据资源库的构建方法,与现有技术相比具有的有益效果是:

32、1、本专利技术可以实现资源库的流程化、模式化建设,提升资源库构建的标准程度和效率,并提高数据利用的工作效率和效果;

33、2、本专利技术从政务数据应用导向出发,从政务数据利用全局考虑,结合不同应用场景需求,提供流程化的资源库构建过程,对数据价值挖掘的实施工作存在指导意义,可提高治理工作的灵活性和条理性,使数据治理更加规范化;

34、3、本专利技术通过系统性的资源库构建流程,可以提高数据治理和数据应用的规范性,为以数据应用为导向的数据治理提供科学的系统架构和实施方法,提升数据治理和数据应用工作的效率和效果。

本文档来自技高网...

【技术保护点】

1.一种政务数据资源库的构建方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种政务数据资源库的构建方法,其特征在于,执行步骤S1,所述资源库的数据架构包括原始库、基础库、对象库、主题库和专题库,其中:

3.根据权利要求2所述的一种政务数据资源库的构建方法,其特征在于,梳理基础库、对象库、主题库和专题库内的数据模型,其中:

4.根据权利要求3所述的一种政务数据资源库的构建方法,其特征在于,对象库基于对象全生命周期进行数据模型构建,具体数据模型分为基本信息、核心信息、扩展信息和基础服务信息,其中:基本信息为基准和稳定性信息,核心信息为状态信息和属性信息,扩展信息为状态和属性的明细、统计信息,基础服务为对象库能够为数据应用提供的基础的服务。

5.根据权利要求4所述的一种政务数据资源库的构建方法,其特征在于,执行步骤S1,基于数据模型进行数据资源的梳理,包括梳理数据来源需求、确定原始数据的来源部门和来源系统,形成原始数据资源目录清单,并进行原始目录编目。

6.根据权利要求5所述的一种政务数据资源库的构建方法,其特征在于,执行步骤S2,通过依次执行填写库基本信息、构建业务模型、构建物理模型、构建数据处理任务、发布数据应用五个步骤完成资源库的在线构建,其中:

7.根据权利要求6所述的一种政务数据资源库的构建方法,其特征在于,业务模型支持数据的物理集中和逻辑集中,其中:

8.根据权利要求6所述的一种政务数据资源库的构建方法,其特征在于,物理模型的映射支持两种场景:

9.根据权利要求1所述的一种政务数据资源库的构建方法,其特征在于,执行步骤S3,API接口在数据服务接口网关提供接口调用频次统计,应用程序在系统提供埋点统计应用使用频次。

...

【技术特征摘要】

1.一种政务数据资源库的构建方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的一种政务数据资源库的构建方法,其特征在于,执行步骤s1,所述资源库的数据架构包括原始库、基础库、对象库、主题库和专题库,其中:

3.根据权利要求2所述的一种政务数据资源库的构建方法,其特征在于,梳理基础库、对象库、主题库和专题库内的数据模型,其中:

4.根据权利要求3所述的一种政务数据资源库的构建方法,其特征在于,对象库基于对象全生命周期进行数据模型构建,具体数据模型分为基本信息、核心信息、扩展信息和基础服务信息,其中:基本信息为基准和稳定性信息,核心信息为状态信息和属性信息,扩展信息为状态和属性的明细、统计信息,基础服务为对象库能够为数据应用提供的基础的服务。

5.根据权利要求4所述的一种政务数据资源库的构建方法,其特征在于,执行步...

【专利技术属性】
技术研发人员:周双张连超陈晏鹏司衍芹张兆勇
申请(专利权)人:浪潮软件股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1