一种大数据流查询的方法技术

技术编号:22641578 阅读:24 留言:0更新日期:2019-11-26 16:08
本发明专利技术公开了数据流管理技术领域的一种大数据流查询的方法,包括如下步骤:步骤一、获取数据流的初始端和终端,并在初始端和终端产生和保持数据交换时,将所有的数据流转载到云端进行异常数据流查询;步骤二、检测到异常数据流时,将异常数据流所对应的前后段进行语义识别;步骤三、建立云端语义数据库,在识别出包括异常数据流的前后段语义时,将识别语义与数据库中的正常语义进行对比,提取与异常数据流语义相对应的正常语义,本发明专利技术通过对通讯数据流的查询和检测,找寻出现异常的数据流,并通过建立的云端数据流数据库对异常数据流进行重新替换,可以有效的提高在通讯过程中,对语义无法理解的尴尬境地,提高了对通讯数据的智能补提。

A method of big data stream query

The invention discloses a big data flow query method in the field of data flow management technology, which comprises the following steps: Step 1: obtain the initial end and terminal of data flow, and when the initial end and terminal generate and maintain data exchange, transfer all data flows to the cloud for abnormal data flow query; step 2: when abnormal data flow is detected, the corresponding abnormal data flow In the third step, the cloud semantic database is established. When identifying the front and back semantics including the abnormal data flow, the recognition semantics is compared with the normal semantics in the database, and the normal semantics corresponding to the abnormal data flow semantics are extracted. Through the query and detection of the communication data flow, the abnormal data flow is found, and through the establishment of the cloud semantic database In the process of communication, it can effectively improve the embarrassment of semantic incomprehension and improve the intelligent supplement of communication data.

【技术实现步骤摘要】
一种大数据流查询的方法
本专利技术涉及数据流管理
,具体为一种大数据流查询的方法。
技术介绍
数据通信是通信技术和计算机技术相结合而产生的一种新的通信方式。要在两地间传输信息必须有传输信道,根据传输媒体的不同,有有线数据通信与无线数据通信之分。但它们都是通过传输信道将数据终端与计算机联结起来,而使不同地点的数据终端实现软、硬件和信息资源的共享。现有的通讯数据在进行通讯双方的交换时,由于外界环境等因素的影响,容易对通讯数据的传输造成一定的干扰,并且会对通讯双方在获取对方通讯数据时,导致语义无法正常传输。基于此,本专利技术设计了一种大数据流查询的方法,以解决上述问题。
技术实现思路
本专利技术的目的在于提供一种大数据流查询的方法,以解决上述
技术介绍
中提出的现有的通讯数据在进行通讯双方的交换时,由于外界环境等因素的影响,容易对通讯数据的传输造成一定的干扰,并且会对通讯双方在获取对方通讯数据时,导致语义无法正常传输的问题。为实现上述目的,本专利技术提供如下技术方案:一种大数据流查询的方法,包括如下步骤:步骤一、获取数据流的初始端和终端,并在初始端和终端产生和保持数据交换时,将所有的数据流转载到云端进行异常数据流查询;步骤二、检测到异常数据流时,将异常数据流所对应的前后段进行语义识别;步骤三、建立云端语义数据库,在识别出包括异常数据流的前后段语义时,将识别语义与数据库中的正常语义进行对比,提取与异常数据流语义相对应的正常语义;步骤四、将提取的正常语义重新替换添加到数据交换的传输端上,保证数据交换的畅通。优选的,所述步骤一中的异常数据流查询包括对出现丢失或中断的数据流查询和对出现异常的模型构造数据流查询。优选的,所述步骤二的语义识别,用于以各种形式表达的语言的识别,且所述步骤三种的语义数据库包括与所述语义识别相对应的所有形式的语言数据。优选的,所述步骤三和步骤四中,在获取和替换异常数据流时,先压缩语义数据流再进行传输和替换。优选的,所述步骤四中在数据交换完成后,自动将云端异常数据流查询的反馈信息发送给数据流的初始端和终端保存。与现有技术相比,本专利技术的有益效果是:本专利技术通过对通讯数据流的查询和检测,找寻出现异常的数据流,并通过建立的云端数据流数据库对异常数据流进行重新替换,可以有效的提高在通讯过程中,对语义无法理解的尴尬境地,提高了对通讯数据的智能补提。附图说明为了更清楚地说明本专利技术实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术的流程框架图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本专利技术保护的范围。请参阅图1,本专利技术提供一种技术方案:一种大数据流查询的方法,包括如下步骤:步骤一、获取数据流的初始端和终端,并在初始端和终端产生和保持数据交换时,将所有的数据流转载到云端进行异常数据流查询;步骤二、检测到异常数据流时,将异常数据流所对应的前后段进行语义识别;步骤三、建立云端语义数据库,在识别出包括异常数据流的前后段语义时,将识别语义与数据库中的正常语义进行对比,提取与异常数据流语义相对应的正常语义;步骤四、将提取的正常语义重新替换添加到数据交换的传输端上,保证数据交换的畅通。需要说明的是,在网络通讯双方进行数据交换时,初始端和终端会产生和保持数据流的交换,在出现通讯数据异常时,即出现通讯语义无法正常从初始端传输到终端时,可以通过利用云端检测出出现异常的片段,并通过建立的语义数据库,将异常片段所对应的正常语义重新替换到通讯双方的数据交换中,此种方式可以很好的在通讯时,出现通讯数据异常,导致通讯上方无法真正的了解到对方语言表达时,对交换数据的重新补入。更进一步的实施方式为,所述步骤一中的异常数据流查询包括对出现丢失或中断的数据流查询和对出现异常的模型构造数据流查询;可以便于通过云端保护对通讯双方出现的异常数据流进行分析,并且实现异常数据和正常语义数据进行替换。更进一步的实施方式为,所述步骤二的语义识别,用于以各种形式表达的语言的识别,且所述步骤三种的语义数据库包括与所述语义识别相对应的所有形式的语言数据;可以保证通讯双方在语义替换时,能够实现多种语言的交流。更进一步的实施方式为,所述步骤三和步骤四中,在获取和替换异常数据流时,先压缩语义数据流再进行传输和替换;通过利用压缩的数据流,可以实现快速的检测查询和数据交替工作。更进一步的实施方式为,所述步骤四中在数据交换完成后,自动将云端异常数据流查询的反馈信息发送给数据流的初始端和终端保存;可以便于通讯双方及时的了解到通讯双方在进行通讯数据交换时产生的异常通讯语义进行正常语义替换是否正确,提高了对通讯数据的保护。在本说明书的描述中,参考术语“一个实施例”、“示例”、“具体示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本专利技术的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。以上公开的本专利技术优选实施例只是用于帮助阐述本专利技术。优选实施例并没有详尽叙述所有的细节,也不限制该专利技术仅为所述的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本专利技术的原理和实际应用,从而使所属
技术人员能很好地理解和利用本专利技术。本专利技术仅受权利要求书及其全部范围和等效物的限制。本文档来自技高网
...

【技术保护点】
1.一种大数据流查询的方法,其特征在于,包括如下步骤:/n步骤一、获取数据流的初始端和终端,并在初始端和终端产生和保持数据交换时,将所有的数据流转载到云端进行异常数据流查询;/n步骤二、检测到异常数据流时,将异常数据流所对应的前后段进行语义识别;/n步骤三、建立云端语义数据库,在识别出包括异常数据流的前后段语义时,将识别语义与数据库中的正常语义进行对比,提取与异常数据流语义相对应的正常语义;/n步骤四、将提取的正常语义重新替换添加到数据交换的传输端上,保证数据交换的畅通。/n

【技术特征摘要】
1.一种大数据流查询的方法,其特征在于,包括如下步骤:
步骤一、获取数据流的初始端和终端,并在初始端和终端产生和保持数据交换时,将所有的数据流转载到云端进行异常数据流查询;
步骤二、检测到异常数据流时,将异常数据流所对应的前后段进行语义识别;
步骤三、建立云端语义数据库,在识别出包括异常数据流的前后段语义时,将识别语义与数据库中的正常语义进行对比,提取与异常数据流语义相对应的正常语义;
步骤四、将提取的正常语义重新替换添加到数据交换的传输端上,保证数据交换的畅通。


2.根据权利要求1所述的一种大数据流查询的方法,其特征在于,所述步骤一中的异常数据流查询包括对出...

【专利技术属性】
技术研发人员:杜乐
申请(专利权)人:武汉东湖大数据交易中心股份有限公司
类型:发明
国别省市:湖北;42

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1