一种键值对数据存储的结构化查询系统技术方案

本发明专利技术提供了一种键值对数据存储的结构化查询系统，它包括告警应用端功能模块，它包括告警集中展现组件、告警采集组件、知识丰富组件和告警底层采集组件，与JDBC驱动模块连接；JDBC驱动功能模块，作为告警应用端功能模块读取redis内存数据库的桥梁，与redis内存数据库连接；redis内存数据库，作为告警数据的承载体，前端通过JDBC驱动功能模块对内存数据库进行查询，实现实时告警信息的关联分析；解决了现有技术用内存数据库承载告警系统的大量数据，但是目前主流的内存数据库多采用自行定义的API接口与应用系统进行集成，不遵循SQL接口，导致系统的开发和维护成本较高，且不利于向外部系统集成等技术问题。

【技术实现步骤摘要】

本专利技术属于数据库开发与告警处理领域，尤其涉及一种键值对数据存储的结构化查询系统。
技术介绍
在传统的数据库中，由于磁盘的物理结构限制，其存取和检索效率以及并行计算能力在大数据量的环境中显得非常乏力，虽然有很多办法来解决这类问题，比如应用程序缓存，分布式等，但成本会很高。而随着这些年硬件的发展，现在服务器拥有的内存容量逐渐增大，此外由于NUMA架构的成熟，也消除了多CPU访问内存的瓶颈问题，因此内存数据库得以应用，用内存数据库承载告警系统的大量数据，更能发挥内存数据库的优势。但是目前主流的内存数据库多采用自行定义的API接口与应用系统进行集成，不遵循SQL接口，这将导致开发和运维人员投入大量人力和时间去重新学习NOSQL语法和API接口从而使系统的开发和维护成本较高，并且不利于向外部系统集成。
技术实现思路
本专利技术要解决的技术问题是：提供一种键值对数据存储的结构化查询系统，以解决现有技术用内存数据库承载告警系统的大量数据，但是目前主流的内存数据库多采用自行定义的API接口与应用系统进行集成，不遵循SQL接口，这将导致开发和运维人员投入大量人力和时间去重新学习NOSQL语法和API接口从而使系统的开发和维护成本较高，并且不利于向外部系统集成等技术问题。本专利技术技术方案：一种键值对数据存储的结构化查询系统，它包括：告警应用端功能模块，它包括告警集中展现组件、告警采集组件、知识丰富组件和告警底层采集组件，与JDBC驱动模块连接；JDBC驱动功能模块，作为告警应用端功能模块读取redis内存数据库的桥梁，与redis内存数据库连接；redis内存数据库，作为告警数据的承载体，前端通过JDBC驱动功能模块对内存数据库进行查询，实现实时告警信息的关联分析。它还包括内存管理器功能模块，通过图形化界面，管理内存数据。内存管理器功能模块通过j JDBC驱动功能模块连入内存数据库，在内存管理器功能模块的管理界面上通过SQL语句对数据库进行直接操作，告警应用端功能模块发出的数据也由内存管理器功能模块管理维护。所述JDBC驱动功能模块包括JDBC驱动模块、数据库连接模块和SQL-JEDIS语法转换模块，JDBC驱动模块作为告警应用端功能模块所有组件的桥梁，通过JDBC驱动模块与redis内存数据库实现数据交互；数据库连接模块用于设置数据库的IP地址、用户名和密码配置信息，并保存封装在JDBC驱动功能模块中；SQL-JEDIS语法转换模块，将告警应用端功能模块发出的SQL语句通过SQL-JEDIS语法转换模块进行转换，该模块使用CCJSqlParserManager对输入的SQL语句进行解析。所述使用CCJSqlParserManager对输入的SQL语句进行解析，其解析方法包括：对于查询语句，先解析出查询的表名与条件，然后解析成Jedis的语法：通过redis内存数据库连接对象获取到redis内存数据库的连接，然后使用BinaryJedis.keys方法查询redis内存数据库；对于更新语句，包括update和 delete，同样先解析出表名和包含的条件字段，然后解析成Jedis的语法：通过redis内存数据库连接对象获取到redis内存数据库的连接，再使用BinaryJedis.hset操作redis内存数据库。本专利技术有益效果：本专利技术的整个应用端程序由告警集中展现组件、告警采集组件、知识丰富组件与告警底层采集工具组成，告警底层采集通过采集各检测端的实时状态随之产生大量数据，这些数据被汇总进入告警组件分类处理，并通过JDBC驱动功能模块连接进入数据库，保存在redis内存数据库中，redis内存数据库的数据直接加载到内存，驱动程序存取也都在内存里面操作，当持久化的时候才保存到磁盘，比传统数据库对磁盘文件的IO操作效率要至少高一个数量级，进入redis内存数据库所配置的ip地址、用户名、密码均事先写入数据库连接模块中，若出现更换redis内存数据库情况，则只需重新将新的redis内存数据配置信息写入数据库连接模块即可，告警展现端通过SQL-JEDIS语法转换模块发出SQL语句包括插入、更新、删除等常见语句可将redis内存数据库的大量数据库按告警要求展现给用户，另外知识丰富组件可将用户新增的告警有关知识插入进数据库分类保存，解决了现有技术用内存数据库承载告警系统的大量数据，但是目前主流的内存数据库多采用自行定义的API接口与应用系统进行集成，不遵循SQL接口，这将导致开发和运维人员投入大量人力和时间去重新学习NOSQL语法和API接口从而使系统的开发和维护成本较高，并且不利于向外部系统集成等技术问题。附图说明图1为本专利技术模块结构示意图；图2为本专利技术数据库连接模块架构示意图；图3为本专利技术总体处理流程示意图；图4为本专利技术内存管理器功能模块架构图；图5为本专利技术JDBC驱动功能模块组成结构示意图。具体实施方式一种键值对数据存储的结构化查询系统，它包括：告警应用端功能模块，它包括告警集中展现组件、告警采集组件、知识丰富组件和告警底层采集组件，与JDBC驱动模块连接；告警应用端功能模块所有组件均使用java语言开发完成，所以要想连接进入redis内存库必须要由JDBC驱动作为桥梁，通过使用JEDIS客户端实现告警应用能正常的与Redis内存数据库库进行数据交互。JDBC驱动功能模块，作为告警应用端功能模块读取redis内存数据库的桥梁，与redis内存数据库连接；所述JDBC驱动功能模块包括JDBC驱动模块、数据库连接模块和SQL-JEDIS语法转换模块。JDBC驱动模块作为告警应用端功能模块所有组件的桥梁，通过JDBC驱动模块与redis内存数据库实现数据交互，JDBC驱动模块采用JEDIS客户端实现。数据库连接模块用于设置数据库的IP地址、用户名和密码配置信息，并保存封装在JDBC驱动功能模块中；告警应用端要想连接redis内存数据库必须要设置数据库的IP地址、用户名、密码等配置信息，这个配置信息需人工写入数据库连接模块，然后将此模块封装进JDBC驱动功能模块中。告警应用端通过调用NOSQL的JDBC驱动模块作成功连接数据库，其对于数据库的一切操作都是在这个连接基础上进行，本专利技术定义一系列的类，实现JDBC标准接口，用于获取内存的连接，如下：定义驱动类RedisDriver，实现 java.sql.Driver接口；定义数据库连接类RedisConnection，实现 java.sql.Connection接口；使用Jedis开放的开发接口，设置好IP，端口，用户密码后得到数据库连接。该连接还包括其他属性，比如是否关闭等；RedisConnection对象的工作过程：1.将IP、用户名、密码写入配置文件，以准备登陆。2.调用Jedis的API方可操作Redis。3.通过已定义好的JDBC驱动连接数据库。SQL-JEDIS语法转换模块，将告警应用端功能模块发出的SQL语句通过SQL-JEDIS语法转换模块进行转换，该模块使用CCJSqlParserManager对输入的SQL语句进行解析。所述使用CCJSqlParserManager对输入的SQL语句进行解析，其解析方法包括：对于查询语句，先解析出查询的表名与条件，然后解析成J本文档来自技高网...

【技术保护点】
一种键值对数据存储的结构化查询系统，它包括：告警应用端功能模块，它包括告警集中展现组件、告警采集组件、知识丰富组件和告警底层采集组件，与JDBC驱动模块连接；JDBC驱动功能模块，作为告警应用端功能模块读取redis内存数据库的桥梁，与redis内存数据库连接；redis内存数据库，作为告警数据的承载体，前端通过JDBC驱动功能模块对内存数据库进行查询，实现实时告警信息的关联分析。

【技术特征摘要】
1.一种键值对数据存储的结构化查询系统，它包括：告警应用端功能模块，它包括告警集中展现组件、告警采集组件、知识丰富组件和告警底层采集组件，与JDBC驱动模块连接；JDBC驱动功能模块，作为告警应用端功能模块读取redis内存数据库的桥梁，与redis内存数据库连接；redis内存数据库，作为告警数据的承载体，前端通过JDBC驱动功能模块对内存数据库进行查询，实现实时告警信息的关联分析。2.根据权利要求1所述的一种键值对数据存储的结构化查询系统，其特征在于：它还包括内存管理器功能模块，通过图形化界面，管理内存数据；内存管理器功能模块通过j JDBC驱动功能模块连入内存数据库，在内存管理器功能模块的管理界面上通过SQL语句对数据库进行直接操作，告警应用端功能模块发出的数据也由内存管理器功能模块管理维护。3.根据权利要求1所述的一种键值对数据存储的结构化查询系统，其特征在于：所述JDBC驱动功能模块包括JDBC驱动模块、数据库连接模块和SQL-JEDIS语法转换模块，JDBC驱动模块作为告警应用端功能模块所有组件的桥梁，通过JDB...

【专利技术属性】
技术研发人员：龙玉江，罗念华，汪浩，朱颖琪，钟掖，王杰峰，朱彬，徐敬峰，
申请(专利权)人：贵州电网有限责任公司信息中心，
类型：发明
国别省市：贵州;52