一种基于使用频次的热数据提取方法技术

本发明专利技术公开了一种基于使用频次的热数据提取方法，针对依附的信息热度排行往往要比其他数据主要获取渠道慢，热度信息无法及时掌握，从而造成营销等手段的被动的问题，现提出以下方案，包括S1：本数据处理系统通过5G互联网络与网络云端相连接；S2：数据处理系统运行过程中，系统中的监控模块实时监控网络上的流量分布，设定流量值阈值信息和预警配套单元；S3：建立上网时间t与每个时间点数据使用频次的坐标系；S4：利用算力系统将流量反应在每个时间点t的使用频次记录下来，同时记录坐标点集合。本发明专利技术获取到的信息数据具有时效性，通过数据抓取模块将高频次热度信息抓取后，有效的保证获取信息的高价值。的保证获取信息的高价值。的保证获取信息的高价值。

【技术实现步骤摘要】
一种基于使用频次的热数据提取方法


[0001]本专利技术涉及数据处理
，尤其涉及一种基于使用频次的热数据提取方法。

技术介绍

[0002]目前，数据(Data)是对事实、概念或指令的一种表达形式，可由人工或自动化装置进行处理。数据经过解释并赋予一定的意义之后，便成为信息。数据处理是对数据的采集、存储、检索、加工、变换和传输。数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据。数据处理是系统工程和自动控制的基本环节。数据处理贯穿于社会生产和社会生活的各个领域。数据处理技术的发展及其应用的广度和深度，极大地影响了人类社会发展的进程。数据处理离不开软件的支持，数据处理软件包括：用以书写处理程序的各种程序设计语言及其编译程序，管理数据的文件系统和数据库系统，以及各种数据处理方法的应用软件包。为了保证数据安全可靠，还有一整套数据安全保密的技术。现今社会的网络数据复杂冗余，对企业来说，如果想要做到先人一步的营销策略，就必须及时掌握信息数据的大众走向。数据处理对数据(包括数值的和非数值的)进行分析和加工的技术过程；包括对各种原始数据的分析、整理、计算、编辑等的加工和处理。比数据分析含义广，随着计算机的日益普及，在计算机应用领域中，数值计算所占比重很小，通过计算机数据处理进行信息管理已成为主要的应用。
[0003]现有的热数据提取方法存在以下问题：提取的热数据信息是从现有市场上已有的热搜捆绑搜索的，依附的信息热度排行往往要比其他数据主要获取渠道慢，热度信息无法及时掌握，从而造成营销等手段的被动，而现有专利不易解决此类问题，因此，亟需一种基于使用频次的热数据提取方法来解决上述问题。

技术实现思路

[0004]基于现有基于使用频次的热数据提取方法，依附的信息热度排行往往要比其他数据主要获取渠道慢，热度信息无法及时掌握，从而造成营销等手段的被动的技术问题，本专利技术提出了一种基于使用频次的热数据提取方法。
[0005]为了实现上述目的，本专利技术采用了如下技术方案：
[0006]一种基于使用频次的热数据提取方法，利用5G网络将数据处理系统与网络云端数据相连，包括以下步骤：
[0007]S1：本数据处理系统通过5G互联网络与网络云端相连接；
[0008]S2：数据处理系统运行过程中，系统中的监控模块实时监控网络上的流量分布，设定流量值阈值信息和预警配套单元；
[0009]S3：建立上网时间t与每个时间点数据使用频次的坐标系；
[0010]S4：利用算力系统将流量反应在每个时间点t的使用频次记录下来，同时记录坐标点集合，将坐标信息反映在建立好的坐标系中；
[0011]S5：再利用处理模块对网络信息进行处理，针对流量阈值时间段通过频次监控模
块和搜索引擎进行搜索；
[0012]S6：获取某时刻或者某时间段内高频次热数据信息。
[0013]作为本专利技术再进一步的方案：所述数据处理系统包括控制模块、第二通讯模块、监控模块、数据运营模块、处理模块和数据抓取模块，且监控模块与处理模块相连，处理模块与数据抓取模块相连，数据抓取模块与数据运营模块相连。
[0014]作为本专利技术再进一步的方案：所述S1，数据处理系统通过5G网络连接在云端数据库上。
[0015]作为本专利技术再进一步的方案：所述S2，监控模块包括流量监控模块和频次监控模块，流量监控模块用于无选择性检测当前时段的热度数据，频次监控模块用于筛选出高流量时间段内的高热度信息。
[0016]作为本专利技术再进一步的方案：所述S3，建立的时间t与当前频次的函数关系可以在坐标系中显示。
[0017]作为本专利技术再进一步的方案：所述S4，流量监控模块筛选出当前时间段的热度数据，频次监控模块从云端获取到每个时间段的热点数据的频次，该频次数据与时间的数值构成坐标点集合。
[0018]作为本专利技术再进一步的方案：所述S5，处理模块中包括分布储存引擎、大数据计算引擎、通用数据引擎、IOT数据引擎和结构化数据引擎，分布储存引擎、大数据计算引擎、通用数据引擎、IOT数据引擎和结构化数据引擎分别对数据进行处理。
[0019]作为本专利技术再进一步的方案：所述S6，数据抓取模块从频次较高的数据段筛选出高热度信息，将获取信息反馈到数据运营模块。
[0020]本专利技术的有益效果为：
[0021]1.通过设置监控模块，监控模块包括流量监控模块和频次监控模块，流量监控模块用于无选择性检测当前时段的热度数据，频次监控模块用于筛选出高流量时间段内的高热度信息，监控的信息都是通过5G网络从云端获取的，筛选处理后的数据可以显示到坐标系中，在坐标系中设置阈值顶点，达到阈值的数据将及时被监控和获取，获取的信息数据具有时效性，通过数据抓取模块将高频次热度信息抓取后，有效的保证获取信息的高价值；
[0022]2.通过设置处理模块，处理模块中的分布储存引擎、大数据计算引擎、通用数据引擎、IOT数据引擎和结构化数据引擎分别对数据进行处理，热点数据的信息被有效的反馈到数据抓取模块中，精准的对高频次热度信息进行筛选，高速的数据处理有效辅助了重点信息的获取；
[0023]3.通过设置数据运营模块，获得的及时高热度数据信息具有很高的价值，传输到数据运营模块中，无论是面向个人、面向企业还是面向政府，大量的信息都会被关注，高效成熟的数据运营模块可以将数据进行营销，从而有效的换取资金，在资金的支撑下逐步完善更新该数据处理系统。
附图说明
[0024]图1为本专利技术提出的一种基于使用频次的热数据提取方法的系统结构框图；
[0025]图2为本专利技术提出的一种基于使用频次的热数据提取方法的处理模块结构示意图；
[0026]图3为本专利技术提出的一种基于使用频次的热数据提取方法的时段频次分布曲线图；
[0027]图4为本专利技术提出的一种基于使用频次的热数据提取方法的流程图。
具体实施方式
[0028]下面将结合附图对本专利技术专利的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术专利一部分实施例，而不是全部的实施例。
[0029]通常在此处附图中描述和显示出的本专利技术专利实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本专利技术专利的实施例的详细描述并非旨在限制要求保护的本专利技术专利的范围，而是仅仅表示本专利技术专利的选定实施例。
[0030]基于本专利技术专利中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术专利保护的范围。
[0031]在本专利技术专利的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术专利和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利技术专利的限制。此外本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于使用频次的热数据提取方法，利用5G网络将数据处理系统与网络云端数据相连，其特征在于，包括以下步骤：S1：本数据处理系统通过5G互联网络与网络云端相连接；S2：数据处理系统运行过程中，系统中的监控模块实时监控网络上的流量分布，设定流量值阈值信息和预警配套单元；S3：建立上网时间t与每个时间点数据使用频次的坐标系；S4：利用算力系统将流量反应在每个时间点t的使用频次记录下来，同时记录坐标点集合，将坐标信息反映在建立好的坐标系中；S5：再利用处理模块对网络信息进行处理，针对流量阈值时间段通过频次监控模块和搜索引擎进行搜索；S6：获取某时刻或者某时间段内高频次热数据信息。2.根据权利要求1所述的一种基于使用频次的热数据提取方法，其特征在于，所述数据处理系统包括控制模块、第二通讯模块、监控模块、数据运营模块、处理模块和数据抓取模块，且监控模块与处理模块相连，处理模块与数据抓取模块相连，数据抓取模块与数据运营模块相连。3.根据权利要求1所述的一种基于使用频次的热数据提取方法，其特征在于，所述S1，数据处理系统通过5G网络连接在云端数据库上。4.根据权利要求1所...

【专利技术属性】
技术研发人员：李俊跃，
申请(专利权)人：国链云计算江苏有限公司，
类型：发明
国别省市：