The invention discloses a police data processing application system, which aims to improve the efficiency of the police system. Including data preparation module, data processing for police information in the data source, the data storage module storage requirements; data storage module for storing the data to police data processing modules; data calculation module, using SPARK calculation system for police related data to the data storage module storage for various scene calculation; data application module, man-machine interface for application. The core of the invention is calculated by Spark technology greatly improves the processing speed of police data as a memory efficient distributed solution, a stack reduces the conversion of data between multiple systems and systems of learning cost and maintenance cost, and improve the working efficiency of the police service system.
【技术实现步骤摘要】
一种警务数据处理应用系统
本专利技术属于数据处理技术方案领域,具体涉及一种简单实用的警务数据处理应用系统。
技术介绍
随着科学技术的发展,数据信息进入大数据时代,数据量越来越大,面对庞大的数据量很难快速的提取出有价值的信息,警务行业的建筑在信息如此发达的时代,对数据的依赖性较强,只有快速准确的在海量数据中提取出所需的数据信息,才能不断提高警务系统的工作效率,保护人民生命财产安全。只有在多个数据领域中提取所需信息并进行数据转储(ELT,Extract,Transform,Load,抽取、转载、加载),使各个部分组成一个整体,才能将所需的数据信息作用最大化。
技术实现思路
本专利技术的目的在于提供一种高效、实用性强的警务数据处理应用系统,能快速得到所需数据信息并进行应用。本专利技术技术方案是一种警务数据处理应用系统,包括数据准备模块、数据存储模块、数据计算模块和数据应用模块,所述数据准备模块用于对从数据源获得的警务相关数据进行处理,具体包括以下之一或任意组合:抽取、转换、加载;文件导入;网络爬取,使其符合数据存储模块的存储要求,所述数据存储模块,用于存储所述数据准备模块处理后的警务相关数据,主要存储以下之一或任意组合:实时流数据、结构化数据、非结构化数据,所述数据计算模块,采用SPARK计算系统,用于对所述数据存储模块存储的警务相关数据进行计算,所述数据应用模块,用于人机接口,包括分警种系统接口和通用应用接口。优选的,所述结构化数据包括专题库和元数据库,所述非结构化数据包括全文、图片和多媒体。优选的,所述数据计算模块包括SPARK流处理模块,用于进行实时轨迹分析, ...
【技术保护点】
一种警务数据处理应用系统,其特征在于,包括数据准备模块、数据存储模块、数据计算模块和数据应用模块,所述数据准备模块用于对从数据源获得的警务相关数据进行处理,具体包括以下之一或任意组合:抽取、转换、加载;文件导入;网络爬取,使其符合数据存储模块的存储要求,所述数据存储模块,用于存储所述数据准备模块处理后的警务相关数据,主要存储以下之一或任意组合:实时流数据、结构化数据、非结构化数据,所述数据计算模块,采用SPARK计算系统,用于对所述数据存储模块存储的警务相关数据进行计算,所述数据应用模块,用于人机接口,包括分警种系统接口和通用应用接口。
【技术特征摘要】
1.一种警务数据处理应用系统,其特征在于,包括数据准备模块、数据存储模块、数据计算模块和数据应用模块,所述数据准备模块用于对从数据源获得的警务相关数据进行处理,具体包括以下之一或任意组合:抽取、转换、加载;文件导入;网络爬取,使其符合数据存储模块的存储要求,所述数据存储模块,用于存储所述数据准备模块处理后的警务相关数据,主要存储以下之一或任意组合:实时流数据、结构化数据、非结构化数据,所述数据计算模块,采用SPARK计算系统,用于对所述数据存储模块存储的警务相关数据进行计算,所述数据应用模块,用于人机接口,包括分警种系统接口和通用应用接口。2.根据权利要求1所述的一种警务数据处理应用系统,其特征在于,所述结构化数据包括专题库...
【专利技术属性】
技术研发人员:吴丹丹,
申请(专利权)人:合肥智贤智能化科技有限公司,
类型:发明
国别省市:安徽,34
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。