本申请提供了一种数据处理方法及装置,涉及数据处理技术领域,包括:确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;基于所述研究主题,选取与所述研究主题对应的数据包模板;利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。与现有技术中的数据处理方法相比,能够规范化数据,进而简化数据加载、使用的过程。
A Data Processing Method and Device
【技术实现步骤摘要】
一种数据处理方法及装置
本申请涉及数据处理
,尤其是涉及一种数据处理方法及装置。
技术介绍
勘探开发研究是石油天然气等行业的生存之本、发展之基。随着勘探开发工作难度加大,勘探开发专题研究内容日趋复杂,需要基于种类繁多的研究数据、专业软件和研究工具进行协同研究,而传统的研究模式存在数据准备和组织困难、数据交互和共享复杂、数据加载过程繁琐等情况。目前,勘探开发研究的数据缺乏集中管理,无法有效的继承和共享,每次都需要重新组织数据,并且存在研究人员工作习惯不一致,准备研究数据和资料的环节很多,容易出错,缺乏流程化规范和自动化辅助手段的问题。
技术实现思路
有鉴于此,本申请的目的在于提供一种数据处理方法及装置,以规范化数据,进而简化数据加载、使用的过程。本申请实施例提供了一种数据处理方法,所述数据处理方法包括:确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;基于所述研究主题,选取与所述研究主题对应的数据包模板;利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。进一步的,所述数据处理方法还包括:基于所述目标数据包的目录,检测所述目标数据包中的数据与所述研究主题的匹配度,并基于所述匹配度对所述目标数据包中的数据进行增添或删减。进一步的,所述数据处理方法还包括:获取待处理的数据,并确定每个数据对应的至少一个研究主题,及每个数据的数据类型、数据属性和数据内容;基于每个数据的数据类型、数据属性和数据内容,建立多个数据集,并将分别将每个数据对应的研究主题作为该待处理的数据的标签,其中,每个数据集包括与该数据集的数据类型一致的数据。进一步的,所述数据处理方法还包括生成数据包模板的步骤:基于待生成的数据包模板的研究主题,确定所述待生成的数据包模板的框架结构;基于所述待生成的数据包模板的框架结构,确定所述待生成的数据包模板中各部分对应的数据的类型;基于所述待生成的数据包模板的框架结构和所述待生成的数据包模板中各部分对应的数据的类型,生成所述数据包模板。进一步的,所述数据处理方法还包括:确定使用的数据处理工具;确定包括能够用于所述数据处理工具的数据的目标数据集;推送所述目标数据集的目录至客户端,以使客户端在所述数据集的目录中选择的需要推送的数据;获取所述客户端选择的需要推送的数据,并将所述需要推送的数据压缩和封装;将压缩和封装后的数据推送至所述数据处理工具。本申请实施例还提供了一种数据处理装置,所述装置包括:第一确定模块,用于确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;第二确定模块,用于基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;选取模块,用于基于所述研究主题,选取与所述研究主题对应的数据包模板;第一生成模块,用于利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。进一步的,所述数据处理装置还包括:调整模块,用于基于所述目标数据包的目录,检测所述目标数据包中的数据与所述研究主题的匹配度,并基于所述匹配度对所述目标数据包中的数据进行增添或删减。进一步的,所述数据处理装置还包括数据集建立模块,所述数据集建立模块用于:获取待处理的数据,并确定每个数据对应的至少一个研究主题,及每个数据的数据类型、数据属性和数据内容;基于每个数据的数据类型、数据属性和数据内容,建立多个数据集,并将分别将每个数据对应的研究主题作为该待处理的数据的标签,其中,每个数据集包括与该数据集的数据类型一致的数据。进一步的,所述数据处理装置还包括第二生成模块,所述第二生成模块用于:基于待生成的数据包模板的研究主题,确定所述待生成的数据包模板的框架结构;基于所述待生成的数据包模板的框架结构,确定所述待生成的数据包模板中各部分对应的数据的类型;基于所述待生成的数据包模板的框架结构和所述待生成的数据包模板中各部分对应的数据的类型,生成所述数据包模板。进一步的,所述数据处理装置还包括推送模块,所述推送模块用于:确定使用的数据处理工具;确定包括能够用于所述数据处理工具的数据的目标数据集;推送所述目标数据集的目录至客户端,以使客户端在所述数据集的目录中选择的需要推送的数据;获取所述客户端选择的需要推送的数据,并将所述需要推送的数据压缩和封装;将压缩和封装后的数据推送至所述数据处理工具。本申请实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述的数据处理方法的步骤。本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述的数据处理方法的步骤。本申请实施例提供的数据处理方法及装置,确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;基于所述研究主题,选取与所述研究主题对应的数据包模板;利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。与现有技术中的数据处理方法相比,能够规范化数据,进而简化数据加载、使用的过程。为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。附图说明为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。图1示出了本申请实施例所提供的一种数据处理方法的流程图;图2示出了本申请实施例所提供的另一种数据处理方法的流程图;图3示出了本申请实施例所提供的一种数据处理装置的结构示意图之一;图4示出了本申请实施例所提供的一种数据处理装置的结构示意图之二;图5示出了本申请实施例所提供的一种电子设备的结构示意图。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的每个其他实施例,都属于本申请保护的范围。首先,对本申请可适用的应用场景进行介绍。本申请可应用于在进行研究时,需要针对某个研究主题获取其对应的研究数据的应用场景。经研究发现,勘探开发研究的数据缺乏集中管理,无法有效的继承和共享,每次都需要重新组织数据,并且存在研究人员工作习惯不一致,准备研究数据和资料的本文档来自技高网...
【技术保护点】
1.一种数据处理方法,其特征在于,所述数据处理方法包括:确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;基于所述研究主题,选取与所述研究主题对应的数据包模板;利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。
【技术特征摘要】
1.一种数据处理方法,其特征在于,所述数据处理方法包括:确定当前的研究主题,从多个数据集中获取与所述研究主题对应的目标数据;基于每个目标数据携带的属性标签,和每个目标数据对应的数据集的类型,确定每个目标数据的类型;基于所述研究主题,选取与所述研究主题对应的数据包模板;利用所述数据包模板,按照每个目标数据的类型,将所述目标数据写入所述数据包模板中对应的位置,生成目标数据包。2.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:基于所述目标数据包的目录,检测所述目标数据包中的数据与所述研究主题的匹配度,并基于所述匹配度对所述目标数据包中的数据进行增添或删减。3.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:获取待处理的数据,并确定每个数据对应的至少一个研究主题,及每个数据的数据类型、数据属性和数据内容;基于每个数据的数据类型、数据属性和数据内容,建立多个数据集,并将分别将每个数据对应的研究主题作为该待处理的数据的标签,其中,每个数据集包括与该数据集的数据类型一致的数据。4.根据权利要求3所述的数据处理方法,其特征在于,所述数据处理方法还包括生成数据包模板的步骤:基于待生成的数据包模板的研究主题,确定所述待生成的数据包模板的框架结构;基于所述待生成的数据包模板的框架结构,确定所述待生成的数据包模板中各部分对应的数据的类型;基于所述待生成的数据包模板的框架结构和所述待生成的数据包模板中各部分对应的数据的类型,生成所述数据包模板。5.根据权利要求3所述的数据处理方法,其特征在于,所述数据处理方法还包括:确定使用的数据处理工具;确定包括能够用于所述数据处理工具的数据的目标数据集;推送所述目标数据集的目录至客户端,以使客户端在所述数据集的目录中选择的需要推送的数据;获取所述客户端选择的需要推送的数据,并将所述需要推送的数据压缩和封装;将压缩和封装后的数据推送至所述数据处理工具。6.一种数据处理装置,其特征在于,所述数据处理装置包括:第一确定模块,用于确定当...
【专利技术属性】
技术研发人员:王铁成,吴迪,崔家奇,杨勇,李鑫,王淼,
申请(专利权)人:北京中油瑞飞信息技术有限责任公司,中国石油集团东方地球物理勘探有限责任公司,
类型:发明
国别省市:北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。