一种遥感影像的入库系统及方法技术方案

技术编号:35414632 阅读:22 留言:0更新日期:2022-11-03 11:12
本发明专利技术提供一种遥感影像的入库系统及方法,涉及遥感影像入库技术领域,包括数据获取模块,其配置为获取具备入库需求的遥感影像数据,所述遥感影像数据包括影像数据和元数据;数据检测模块,其配置为对获取的遥感影像数据进行初步检测,检测的内容包括影像数据内容的正确性、影像数据基于质量检测项的评定、元数据的完整性;数据分配模块,其配置为对遥感影像数据的初步检测结果进行任务分配,基于任务执行存储结构的自动选取;数据存储模块,其配置为采用选取的存储结构对遥感数据进行存储;数据查询模块,其配置为根据索引表对遥感影像数据进行查询。本发明专利技术能够实现遥感影像的高效快速入库和合理存储,并能提升数据的管理水平。平。平。

【技术实现步骤摘要】
一种遥感影像的入库系统及方法


[0001]本专利技术涉及遥感数据处理
,尤其涉及一种遥感影像的入库系统及方法。

技术介绍

[0002]随着空间信息科学的迅速发展,各种空间数据获取的手段和方式日趋快速和多样化,表现较为突出的是遥感影像数据。目前许多国家政府已将海量遥感影像数据应用于国防、国土、环境、资源等领域,为大众提供各种地图导航服务,而且逐渐的遥感影像数据成为空间信息科学重要的数据来源之一。
[0003]但是遥感影像数据往往数据量庞大,传统的遥感影像数据一般是把影像数据放置到大型关系数据库中,因此数据的读取、传输、加工处理的时间都很长,这严重影响了操作系统的快捷易用性。
[0004]遥感是以航空摄影技术为基础,在20世纪60年代初发展起来的一门新兴技术。遥感数据作为一种超高容量的信息载体,因其能及时、可靠、方便地提供多种信息,已经在资源调查、灾害监测、海洋渔业、地质找矿等领域广泛应用。伴随着航空航天技术、传感器技术的不断发展,遥感数据获取技术趋向三多(多平台、多传感器、多角度)和三高(高空间分辨率、高光谱分辨率、高时间分辨率),使得不同领域内遥感数据量以惊人的速度增长。
[0005]遥感数据的入库作为数据处理人员的日常工作,目前自动化程度较低,成为了遥感数据应用中的薄弱环节。实现遥感数据的自动关联、自动入库、自动存储等功能,对缩短遥感数据处理时间,扩展遥感数据应用都有着重要的意义。

技术实现思路

[0006]基于上述技术问题,本专利技术提供的遥感影像入库系统能够针对遥感影像数据的分析结果自动匹配对应的存储结构,并且实时动态的进行资源调配,实现遥感影像数据的快速自动入库并保证数据的高效存储和读取。
[0007]本专利技术一种遥感影像的入库系统,所述系统包括:数据获取模块,其配置为获取具备入库需求的遥感影像数据,所述遥感影像数据包括影像数据和元数据;数据检测模块,其配置为对获取的遥感影像数据进行初步检测,检测的内容包括影像数据内容的正确性、影像数据基于质量检测项的评定、元数据的完整性;数据分配模块,其配置为对遥感影像数据的初步检测结果进行任务分配,基于任务执行存储结构的自动选取;数据存储模块,其配置为采用选取的存储结构对遥感数据进行存储;数据查询模块,其配置为根据索引表对遥感影像数据进行查询。
[0008]于本专利技术一具体实施例中,所述数据分配模块包括:遥感影像数据分析单元,其配置为对初步检测的结果进行分析计算,获取分析信息;
遥感影像数据调度单元,包括多个任务节点,其配置为根据分析信息创建任务,并分配到任务节点,所述任务节点对应有存储结构;遥感影像数据整合单元,其配置为将遥感影像数据与对应的存储结构进行关联整合,以实现自动选择该存储结构。
[0009]于本专利技术一具体实施例中,所述存储结构包括数据湖结构、数据仓结构、云存储结构。
[0010]于本专利技术一具体实施例中,所述系统采用资源动态调度,资源动态调度机制支持动态规划资源、动态分配任务以及实时计算的执行,根据实时计算所述任务节点的资源占用情况和性能,对任务进行分配。
[0011]于本专利技术一具体实施例中,所述数据获取模块包括:遥感影像数据获取单元,其配置为接收用户上传的遥感影像数据;元数据获取单元,其配置为对遥感影像数据进行描述,获取对应的元数据;其中,所述遥感影像数据获取单元进一步配置为支持接收不同文件形式和多种上传方式的遥感影像数据上传。
[0012]于本专利技术一具体实施例中,所述上传方式包括本地上传、网页上传、云上传,所述文件形式包括tif文件、tfw文件、xml文件、ovr文件、xls文件、tet文件和表格文件。
[0013]于本专利技术一具体实施例中,所述数据检测模块进一步配置为形成一张检测结果表,所述检测结果表包括遥感影像文件内容的正确性结果、遥感影像数据的质量检测项评定结果和遥感影像的元数据完整性结果;其中,所述质量检测项包括云量检测、阴影检测、空值检测、直方图检测中的至少一项。
[0014]于本专利技术一具体实施例中,所述数据存储模块,其配置为对遥感影像数据进行建模和描述,所述建模为对所述元数据、影像数据、文件形式、存储结构的实例化过程,所述描述包括对元数据、影像数据的描述,不同的数据分区存储。
[0015]于本专利技术一具体实施例中,所述数据查询模块,进一步配置为通过时空混合索引进行遥感影像数据的查询,所述时空混合索引是由所述元数据通过通用搜索树构建得到的。
[0016]本专利技术还提供一种遥感影像的入库方法,所述方法应用于上述所述的系统。
[0017]针对现有技术,本专利技术的有益效果如下:(1)通过对遥感影像数据进行内容、质量检测项、元数据完整性的检测,对遥感影像数据的各个方面在入库时就预先检测,能够保证遥感影像数据的有效性,以及便于后续遥感影像数据的分发应用。
[0018](2)通过对检测的结果进行分析,并设置修复的流程,能够对错误以及缺失的数据进行修复,避免因数据缺陷而导致数据导入无效,从而影响入库的效率。
[0019](3)对遥感影像数据进行特定的存储结构的分配,能够实现入库时自动选取存储结构,将遥感影像数据合理高效的进行存储,并同时建立索引机制,便于遥感影像数据的查询管理。
[0020](4)另外,入库系统采用资源动态调度机制,能够实时的对系统资源进行规划,并采用实时计算的方式对任务进行分配,实现遥感影像数据的高效合理入库,并能够做到最
大限度的存储遥感影像数据,并对这些数据进行有效的管理,避免资源的浪费以及降低入库失败的概率。
附图说明
[0021]为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0022]图1为本专利技术一实施例中遥感影像的入库系统的结构示意图;图2为本专利技术一实施例中数据获取模块的结构示意图;图3为本专利技术一实施例中数据检测模块的结构示意图;图4为本专利技术一实施例中数据分配模块的结构示意图;图5为本专利技术实施例的遥感影像的入库方法的流程示意图。
具体实施方式
[0023]下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。需要说明的是,只要不构成冲突,本专利技术中的各个实施例以及各实施例的各个特征可以相互结合,所形成的技术方案均在本专利技术的保护范围之内。
[0024]需要注意的是,这里所使用的术语仅是为了描述具体实施方式,而非意图限制根据本专利技术的示例性实施方式。如在这里所使用的,除非上下文另外明确指出,否则单数形式也意图包括复数形式,此外,还应当理解的是,当在本说明书中使用术语“包含”和/或“包括”时,其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
[0025]请参阅图1,本专利技术提本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种遥感影像的入库系统,其特征在于,所述系统包括:数据获取模块,其配置为获取具备入库需求的遥感影像数据,所述遥感影像数据包括影像数据和元数据;数据检测模块,其配置为对获取的遥感影像数据进行初步检测,检测的内容包括影像数据内容的正确性、影像数据基于质量检测项的评定、元数据的完整性;数据分配模块,其配置为对遥感影像数据的初步检测结果进行任务分配,基于任务执行存储结构的自动选取;数据存储模块,其配置为采用选取的存储结构对遥感数据进行存储;数据查询模块,其配置为根据索引表对遥感影像数据进行查询。2.根据权利要求1所述的系统,其特征在于,所述数据分配模块包括:遥感影像数据分析单元,其配置为对初步检测的结果进行分析计算,获取分析信息;遥感影像数据调度单元,包括多个任务节点,其配置为根据分析信息创建任务,并分配到任务节点,所述任务节点对应有存储结构;遥感影像数据整合单元,其配置为将遥感影像数据与对应的存储结构进行关联整合,以实现自动选择该存储结构。3.根据权利要求2所述的系统,其特征在于,所述存储结构包括数据湖结构、数据仓结构、云存储结构。4.根据权利要求2所述的系统,其特征在于,所述系统采用资源动态调度,资源动态调度机制支持动态规划资源、动态分配任务以及实时计算的执行,根据实时计算所述任务节点的资源占用情况和性能,对任务进行分配。5.根据权利要求1所述的系统,其特征在于,所述数据获取模块包括:遥感影像...

【专利技术属性】
技术研发人员:陈莉陈家严博施磊李洁邹圣兵
申请(专利权)人:北京数慧时空信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1