一种用于多个服务器间的数据传输系统及数据传输方法技术方案

技术编号:32649459 阅读:24 留言:0更新日期:2022-03-12 18:38
本发明专利技术公开的一种用于多个服务器间的数据传输系统及数据传输方法,包括数据接收模块、分类处理模块、状态同步模块、数据库索引及测试模块以及数据安全模块,所述数据接收模块主要由类型识别单元与数据备份单元以及风险筛查单元组成,所述分类处理模块主要由图像处理单元、文本处理单元、音频处理单元以及视频处理单元组成,所述状态同步模块主要部分为数据交换单元。本发明专利技术所述的一种用于多个服务器间的数据传输系统及数据传输方法,通过数据模块对服务器间的数据进行预处理,并经过分类处理模块进行细化处理,然后在服务器同步的状态下完成数据库的建立并提升数据安全性,有效提升了多个服务器间的数据传输效率,保障数据安全。全。全。

【技术实现步骤摘要】
一种用于多个服务器间的数据传输系统及数据传输方法


[0001]本专利技术涉及数据传输领域,特别涉及一种用于多个服务器间的数据传输系统及数据传输方法。

技术介绍

[0002]服务器是计算机的一种,它比普通计算机运行更快、负载更高,服务器在网络中为其它客户机(如PC机、智能手机、ATM等终端甚至是火车系统等大型设备)提供计算或者应用服务,服务器具有高速的CPU运算能力、长时间的可靠运行、强大的外部数据吞吐能力以及更好的扩展性,并且具备承担响应服务请求、承担服务、保障服务的能力,由于服务器传输的数据量较大,在多个服务器之间进行数据传输时,由于对数据的细化处理程度较低,且服务器之间信息不同步,因此数据的传输效率较低,造成不便。

技术实现思路

[0003]本专利技术的主要目的在于提供一种用于多个服务器间的数据传输系统及数据传输方法,可以有效解决
技术介绍
中问题。
[0004]为实现上述目的,本专利技术采取的技术方案为:
[0005]一种用于多个服务器间的数据传输系统,其特征在于,所述系统包括:
[0006]数据接收模块,用于对服务器间传输的数据进行各项预处理,包括类型识别、重要数据备份、风险筛查等。
[0007]分类处理模块,在获得分类后的各项数据后,针对不同类型的数据文件进行进一步处理,并按照数据量规模进行排序。
[0008]状态同步模块,在多个服务器之间实现数据传输状态的实时同步,降低数据重复传输的概率,同时可根据多个服务器之间的传输请求实现同步转发、群发,提升效率。<br/>[0009]数据库索引及测试模块,针对传输的数据进行汇总编入数据库,实现对传输数据的实时索引,并根据用户习惯提取常用索引关键词及代码,输入数据库内进行索引测试。
[0010]数据安全模块,针对重要数据如用户信息、地理位置信息、账号信息等进行整合处理,并在多个服务器之间进行输出与备份,保障重要数据信息的安全性。
[0011]优选的,所述数据接收模块还包括类型识别单元,用于获取服务区之间传输数据内的非代码文件,并确定文件类型,包括图片数据、视频数据、文本数据等。
[0012]优选的,所述数据接收模块还包括数据备份单元,针对服务器之间传输的加密文件,预先对加密文件进行备份处理。
[0013]优选的,所述数据接收模块还包括风险筛查单元,针对服务器之间传输的各项压缩文件进行筛查检测,结合查杀系统进行处理,降低数据感染损坏的风险。
[0014]优选的,所述分类处理模块还包括图像处理单元,用于当所述数据类型为图片数据时,对图片数据进行快速预处理以及快视筛选,首先对图片文件进行查重检测,剔除其中的重复文件,然后对图片文件进行拼接、差异检测、栅格化等各项处理,最后对图片文件进
行整编处理。
[0015]优选的,所述分类处理模块还包括文本处理单元,用于当所述文件类型为文本数据时,对文本信息进行快速检索筛查,包括各项关键词、敏感词检索,并提取文字信息,得到纯文本文件。
[0016]优选的,所述分类处理模块还包括音频处理单元,用于当所述文件类型为音频数据时,对传输的音频文件进行快速语音识别,并将其转动为文本文件。
[0017]优选的,所述分类处理模块还包括视频处理单元,用于当所述数据类型为视频数据时,对视频数据进行快速处理,将所述视频文件转换为图像数据、音频数据以及文本数据,然后对处理后的数据进行再次处理。
[0018]优选的,所述状态同步模块还包括数据交换单元,利用光信号实现多个服务器之间的传输信息高度同步,可有效降低数据传输的重复率,同时可实现已处理数据的快速调换与传输,避免数据的多次处理,提升效率。
[0019]一种用于多个服务器间的数据传输系统的数据传输方法,其特征在于:包括以下步骤:
[0020]S1:数据接收,对服务器间传输的数据进行各项预处理,包括类型识别、重要数据备份、风险筛查,利用类型识别单元获取服务区之间传输数据内的非代码文件,并确定文件类型,包括图片数据、视频数据、文本数据等,利用数据备份单元针对服务器之间传输的加密文件,预先对加密文件进行备份处理,利用风险筛查单元针对服务器之间传输的各项压缩文件进行筛查检测,结合查杀系统进行处理,降低数据感染损坏的风险;
[0021]S2:分类处理,在获得分类后的各项数据后,针对不同类型的数据文件进行进一步处理,并按照数据量规模进行排序,利用图像处理单元对图片数据进行快速预处理以及快视筛选,首先对图片文件进行查重检测,剔除其中的重复文件,然后对图片文件进行拼接、差异检测、栅格化等各项处理,最后对图片文件进行整编处理,利用文本处理单元对文本信息进行快速检索筛查,包括各项关键词、敏感词检索,并提取文字信息,得到纯文本文件,利用音频处理单元对传输的音频文件进行快速语音识别,并将其转动为文本文件,利用视频处理单元将所述视频文件转换为图像数据、音频数据以及文本数据,然后对处理后的数据进行再次处理;
[0022]S3:状态同步,在多个服务器之间实现数据传输状态的实时同步,降低数据重复传输的概率,同时可根据多个服务器之间的传输请求实现同步转发、群发,提升效率;
[0023]S4:数据库索引及测试,针对传输的数据进行汇总编入数据库,实现对传输数据的实时索引,并根据用户习惯提取常用索引关键词及代码,输入数据库内进行索引测试;
[0024]S5:数据安全,针对重要数据如用户信息、地理位置信息、账号信息等进行整合处理,并在多个服务器之间进行输出与备份,保障重要数据信息的安全性。
[0025]与现有技术相比,本专利技术具有如下有益效果:
[0026]通过在多个服务器之间数据传输时建立数据接收模块、分类处理模块、状态同步模块、数据库索引及测试模块、数据安全模块,通过数据模块对服务器间的数据进行预处理,并经过分类处理模块进行细化处理,然后在服务器同步的状态下完成数据库的建立并提升数据安全性,有效提升了多个服务器间的数据传输效率,保障数据安全。
附图说明
[0027]图1为本专利技术一种用于多个服务器间的数据传输系统及数据传输方法的系统详解图。
具体实施方式
[0028]为使本专利技术实现的技术手段、创作特征、达成目的与功效易于明白了解,下面结合具体实施方式,进一步阐述本专利技术。
[0029]如图1所示,一种用于多个服务器间的数据传输系统,其特征在于,系统包括:
[0030]数据接收模块,用于对服务器间传输的数据进行各项预处理,包括类型识别、重要数据备份、风险筛查等。
[0031]分类处理模块,在获得分类后的各项数据后,针对不同类型的数据文件进行进一步处理,并按照数据量规模进行排序。
[0032]状态同步模块,在多个服务器之间实现数据传输状态的实时同步,降低数据重复传输的概率,同时可根据多个服务器之间的传输请求实现同步转发、群发,提升效率。
[0033]数据库索引及测试模块,针对传输的数据进行汇总编入数据库,实现对传输数据的实时索引,并根本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种用于多个服务器间的数据传输系统,其特征在于,所述系统包括:数据接收模块,用于对服务器间传输的数据进行各项预处理,包括类型识别、重要数据备份、风险筛查等;分类处理模块,在获得分类后的各项数据后,针对不同类型的数据文件进行进一步处理,并按照数据量规模进行排序;状态同步模块,在多个服务器之间实现数据传输状态的实时同步,降低数据重复传输的概率,同时可根据多个服务器之间的传输请求实现同步转发、群发,提升效率;数据库索引及测试模块,针对传输的数据进行汇总编入数据库,实现对传输数据的实时索引,并根据用户习惯提取常用索引关键词及代码,输入数据库内进行索引测试;数据安全模块,针对重要数据如用户信息、地理位置信息、账号信息等进行整合处理,并在多个服务器之间进行输出与备份,保障重要数据信息的安全性。2.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述数据接收模块还包括类型识别单元,用于获取服务区之间传输数据内的非代码文件,并确定文件类型,包括图片数据、视频数据、文本数据等。3.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述数据接收模块还包括数据备份单元,针对服务器之间传输的加密文件,预先对加密文件进行备份处理。4.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述数据接收模块还包括风险筛查单元,针对服务器之间传输的各项压缩文件进行筛查检测,结合查杀系统进行处理,降低数据感染损坏的风险。5.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述分类处理模块还包括图像处理单元,用于当所述数据类型为图片数据时,对图片数据进行快速预处理以及快视筛选,首先对图片文件进行查重检测,剔除其中的重复文件,然后对图片文件进行拼接、差异检测、栅格化等各项处理,最后对图片文件进行整编处理。6.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述分类处理模块还包括文本处理单元,用于当所述文件类型为文本数据时,对文本信息进行快速检索筛查,包括各项关键词、敏感词检索,并提取文字信息,得到纯文本文件。7.根据权利要求1所述的一种用于多个服务器间的数据传输系统,其特征在于:所述分类处理模块还包括音频处理单元,用于当所述文件类型为音频数据时,对传输的音频文件进行快速语音识别,并将其转动为文本文件...

【专利技术属性】
技术研发人员:王浩
申请(专利权)人:深圳市安田数据服务有限公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1