一种在网络大流量中快速检测与识别特定信息的方法技术

本发明专利技术公开了一种在网络大流量中快速检测与识别特定信息的方法，包括处理器，所述处理器连接有数据库模块、信息识别模块、信息存储模块以及防护模块，其中所述数据库模块包括数据采集模块、发送模块、接收模块和中央控制模块；所述信息识别模块包括获取模块和筛选模块；所述信息存储模块包括数据转换单元、通信单元、云端存储器和反馈系统，所述防护模块包括无线入侵防护系统、防火墙系统。本发明专利技术可以快速从网络大流量中，在对各应用、协议进行分类识别的基础上，利用信息指纹技术准确识别特定信息内容，可以大幅度提高互联网特定信息鉴别和提取的准确性；且能对信息安全进行防护，避免信息丢失。

【技术实现步骤摘要】
一种在网络大流量中快速检测与识别特定信息的方法
本专利技术涉及网络信息处理
，尤其涉及一种在网络大流量中快速检测与识别特定信息的方法。
技术介绍
随着互联网的迅猛发展、WEB信息的增加，要对海量互联网流量进行准实时的数据采集、协议分类、应用识别、特征提取，就象大海捞针一样，信息处理技术则应运而生，信息处理是指将网络上大量网站的页面信息收集到本地，经过加工处理建立信息数据库和索引数据库，从而对用户提出的各种检索作出响应，提供用户所需的信息或相关指针。用户的检索途径主要包括自由词全文检索、关键词检索、分类检索及其他特定信息的检索。为此，我们提出了一种在网络大流量中快速检测与识别特定信息的方法。
技术实现思路
本专利技术的目的是为了解决
技术介绍
中的问题，而提出的一种在网络大流量中快速检测与识别特定信息的方法。为了实现上述目的，本专利技术采用了如下技术方案：一种在网络大流量中快速检测与识别特定信息的方法，包括处理器，所述处理器连接有数据库模块、信息识别模块、信息存储模块以及防护模块，其中所述数据库模块包括数据采集模块、发送模块、接收模块和中央控制模块；所述信息识别模块包括获取模块和筛选模块；所述信息存储模块包括数据转换单元、通信单元、云端存储器和反馈系统，所述防护模块包括无线入侵防护系统、防火墙系统模块。在上述的在网络大流量中快速检测与识别特定信息的方法中，在所述数据库模块中，所述数据采集模块用于采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；所述发送模块接收数据采集模块发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；所述接收模块按照数据类别进行分组，并对接收模块组进行编号，接收模块组按照数据分类，不同的接收模块组只接收同类别的数据，并保存接收的数据；所述中央控制模块采集接收模块的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收模块的工作状态和繁忙程度。在上述的在网络大流量中快速检测与识别特定信息的方法中，在所述信息识别模块中，所述获取模块用于获取网络信息集合；所述筛选模块用于依照指定的信息编号，在网络信息集合中筛选与指定的信息编号相匹配的发布信息。在上述的在网络大流量中快速检测与识别特定信息的方法中，在所述信息储存模块中，所述数据转换单元可将存储的信息压缩为电信号，并向所述通信单元发送请求信号，所述通信单元将请求信号发送至云端存储器，所述云端存储器接收请求信号，所述云端存储器接收上传请求并通过反馈系统将允许信息上传的信号反馈至通信单元，所述通信单元接收反馈信号后开始上传信息，达到数据保存的效果。在上述的在网络大流量中快速检测与识别特定信息的方法中，所述数据库模块内还设置有数据冗余判断模块；数据冗余判断模块与接收模块和数据采集模块连接，对数据采集模块采集的数据进行冗余判断，若接收模块内保存的数据与数据采集模块采集的数据相同则将相同的数据丢弃。在上述的在网络大流量中快速检测与识别特定信息的方法中，所述中央控制模块内还设置有电力控制模块，电力控制模块根据接收队列表保存的接收模块的状态和发送队列表的数据类别控制相应空闲的接收服务器处于待机状态。在上述的在网络大流量中快速检测与识别特定信息的方法中，包括以下步骤：S1、数据库的信息采集及构建：采集不同计算机或智能设备的IP地址，以及该计算机或智能设备属性数据组，将计算机或智能设备属性数据组内的所有元素处理后均转化为数字格式，将数字格式的计算机或智能设备属性数据组进行分类保存，从而构建数据库；S2、信息的快速检测以及识别：将获取的网络信息集合输入至数据库模块当中在网络信息集合中筛选与指定的信息编号相匹配的发布信息；S3、信息储存：数据转换单元可将存储的信息压缩为电信号，并向通信单元发送请求信号，通信单元将请求信号发送至云端存储器，云端存储器接收请求信号，云端存储器接收上传请求并通过反馈系统将允许信息上传的信号反馈至通信单元，通信单元接收反馈信号后开始上传信息，对数据进行保存，防止信息丢失；S4、信息防护：防护模块可实时对网络安全进行防护，通过控制网卡上配置的IP地址，对防火墙所检测到的IP地址实时预警，并将预警信息在内网Web服务器进行日志记录备份。与现有的技术相比，本在网络大流量中快速检测与识别特定信息的方法的优点在于：通过前期对数据进行分类，并建立发送队列表，再对发送队列表进行循环侦测，让用户的信息具有很好的识别性，同时，不破坏或极少破坏用户信息的可读性和自然性，可以快速从众多类似信息中，找出归属于特定用户的信息，从而在获取到的大量同类信息时，利用信息指纹排准确找出特定用户的信息，可以大幅度提高互联网特定信息鉴别和提取的准确性；且通过设置防护模块对信息安全进行防护，避免信息丢失。附图说明图1为本专利技术提出的一种在网络大流量中快速检测与识别特定信息的方法的结构框图。具体实施方式以下实施例仅处于说明性目的，而不是想要限制本专利技术的范围。实施例参照图1，一种在网络大流量中快速检测与识别特定信息的方法，包括处理器，处理器连接有数据库模块、信息识别模块、信息存储模块以及防护模块；其中数据库模块包括数据采集模块、发送模块、接收模块和中央控制模块，数据采集模块用于采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；发送模块接收数据采集模块发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；接收模块按照数据类别进行分组，并对接收模块组进行编号，接收模块组按照数据分类，不同的接收模块组只接收同类别的数据，并保存接收的数据；中央控制模块采集接收模块的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收模块的工作状态和繁忙程度；其中数据库模块内还设置有数据冗余判断模块；数据冗余判断模块与接收模块和数据采集模块连接，对数据采集模块采集的数据进行冗余判断，若接收模块内保存的数据与数据采集模块采集的数据相同则将相同的数据丢弃；中央控制模块内还设置有电力控制模块，电力控制模块根据接收队列表保存的接收模块的状态和发送队列表的数据类别控制相应空闲的接收服务器处于待机状态；信息识别模块包括获取模块和筛选模块，获取模块用于获取网络信息集合；筛选模块用于依照指定的信息编号，在网络信息集合中筛选与指定的信息编号相匹配的发布信息；信息存储模块包括数据转换单元、通信单元、云端存储器和反馈系统，数据转换单元可将存储的信息压缩为电信号，并向通信单元发送请求信号，通信单元将请求信号发送至云端存储器，云端存储器接收请求信号，云端存储器接收上传请求并通过反馈系统将允许信息上传的信号反馈至通信单元，通信单元接收反馈信号后开始上传信息，达到数据保存的效果。本专利技术中，在网络大流量中快速检测与识别特定信息的方法，包括以下步骤：S1、数据库的信息采集及构建：采集不同计算机或智能设备的IP地址，以及该计算机或智能设备属性数据组，将计算机或智本文档来自技高网...

【技术保护点】
1.一种在网络大流量中快速检测与识别特定信息的方法，包括处理器，其特征在于，所述处理器连接有数据库模块、信息识别模块、信息存储模块以及防护模块，其中所述数据库模块包括数据采集模块、发送模块、接收模块和中央控制模块；所述信息识别模块包括获取模块和筛选模块；所述信息存储模块包括数据转换单元、通信单元、云端存储器和反馈系统，所述防护模块包括无线入侵防护系统、防火墙系统。/n

【技术特征摘要】
1.一种在网络大流量中快速检测与识别特定信息的方法，包括处理器，其特征在于，所述处理器连接有数据库模块、信息识别模块、信息存储模块以及防护模块，其中所述数据库模块包括数据采集模块、发送模块、接收模块和中央控制模块；所述信息识别模块包括获取模块和筛选模块；所述信息存储模块包括数据转换单元、通信单元、云端存储器和反馈系统，所述防护模块包括无线入侵防护系统、防火墙系统。


2.根据权利要求1所述的一种在网络大流量中快速检测与识别特定信息的方法，其特征在于，在所述数据库模块中，数据采集模块用于采集互联网上的数据，并对数据进行初步分类，并将相同类别的数据压缩处理后传输至发送服务器；所述发送模块接收数据采集模块发送的数据后，保存接收的数据并按照数据类别和接收时间建立发送队列表；所述接收模块按照数据类别进行分组，并对接收模块组进行编号，接收模块组按照数据分类，不同的接收模块组只接收同类别的数据，并保存接收的数据；所述中央控制模块采集接收模块的状态，并根据采集的状态建立接收队列表，接收队列表内保存各个接收模块的工作状态和繁忙程度。


3.根据权利要求1所述的一种在网络大流量中快速检测与识别特定信息的方法，其特征在于，在所述信息识别模块中，所述获取模块用于获取网络信息集合；所述筛选模块用于依照指定的信息编号，在网络信息集合中筛选与指定的信息编号相匹配的发布信息。


4.根据权利要求1所述的一种在网络大流量中快速检测与识别特定信息的方法，其特征在于，在所述信息储存模块中，所述数据转换单元可将存储的信息压缩为电信号，并向所述通信单元发送请求信号，所述通信单元将请求信号发送至云端存储器，所述云端存储器接收请求信号，所述云端存储器接收上传请求并通过反馈系统将允许信息上传的信号反馈至通信单元，所述...

【专利技术属性】
技术研发人员：马旸，蔡冰，罗雅琼，尹魏昕，仲思超，王祥，赵云，
申请(专利权)人：国家计算机网络与信息安全管理中心江苏分中心，
类型：发明
国别省市：江苏;32