一种实现雾霾在线监测的大数据处理方法技术

本发明专利技术涉及雾霾监测技术领域，且公开了一种实现雾霾在线监测的大数据处理方法，具体方法包括以下步骤：S1、雾霾监测仪将数据通过数据传输设备将数据转换为电信号传输到数据接收设备，数据接收设备接收数据信息进行数据信息初步汇总；S2、数据接收设备将数据信息转换为电信号传输到数据收集处理设备，数据收集处理设备对汇总的数据进行初步的分析，根据预先设定的数据筛选条件进行对比筛选；S3、数据收集设备进行筛选后，将无效数据、非法数据和有效数据分离，对无效数据和非法数据进行及时的删除粉碎处理。该实现雾霾在线监测的大数据处理方法，降低了数据分析的误差，降低了数据分析设备的工作难度，提高了数据分析的速度。

A Large Data Processing Method for On-line Monitoring of Haze

The invention relates to the technical field of haze monitoring, and discloses a large data processing method for realizing on-line haze monitoring. The specific methods include the following steps: S1, haze monitor converts data into electrical signal through data transmission equipment and transmits data to data receiving equipment, data receiving equipment receives data information for preliminary data information aggregation; S2, data receiving equipment will transfer data to data receiving equipment through data transmission equipment. Data information is converted into electrical signals and transmitted to data collection and processing equipment. Data collection and processing equipment carries out preliminary analysis of the aggregated data, and carries out comparative screening according to pre-set data screening conditions. After screening of S3 and data collection equipment, invalid data, illegal data and effective data are separated, and invalid data and illegal data are deleted and crushed in time. Li. The large data processing method for on-line monitoring of haze reduces the error of data analysis, reduces the difficulty of data analysis equipment, and improves the speed of data analysis.

【技术实现步骤摘要】
一种实现雾霾在线监测的大数据处理方法
本专利技术涉及雾霾监测
，具体为一种实现雾霾在线监测的大数据处理方法。
技术介绍
雾霾，是雾和霾的组合词。雾是由大量悬浮在近地面空气中的微小水滴或冰晶组成的气溶胶系统。多出现于秋冬季节，是近地面层空气中水汽凝结的产物。雾的存在会降低空气透明度，使能见度恶化，如果目标物的水平能见度降低到1000米以内，就将悬浮在近地面空气中的水汽凝结物的天气现象称为雾。霾，也称灰霾，空气中的灰尘、硫酸、硝酸、有机碳氢化合物等粒子也能使大气混浊。将目标物的水平能见度在1000～10000米的这种现象称为轻雾或霭，形成雾时大气湿度应该是饱和的，由于液态水或冰晶组成的雾散射的光与波长关系不大，因而雾看起来呈乳白色或青白色和灰色。雾霾常见于城市。雾霾是特定气候条件与人类活动相互作用的结果。高密度人口的经济及社会活动必然会排放大量细颗粒物（PM2.5），一旦排放超过大气循环能力和承载度，细颗粒物浓度将持续积聚，此时如果受静稳天气等影响，极易出现大范围的雾霾。现有的大型雾霾监测仪监测数据量巨大，每秒都会得到上百个数据，人工进行数据存储和传输到分析设备中工作量十分大，且原始数据十分复杂，原始数据中有许多无效数据，这些无效数据会影响分析设备的分析结果，导致结果产生较大的误差。
技术实现思路
针对现有技术的不足，本专利技术提供了一种实现雾霾在线监测的大数据处理方法，具备能够降低误差和提高数据处理速度等优点，解决了现有技术中数据处理结果误差较大和处理速度慢的问题。为实现上述能够降低误差和提高数据处理速度的目的，本专利技术提供如下技术方案：一种实现雾霾在线监测的大数据处理方法，具体方法包括以下步骤：S1、雾霾监测仪将数据通过数据传输设备将数据转换为电信号传输到数据接收设备，数据接收设备接收数据信息进行数据信息初步汇总；S2、数据接收设备将数据信息转换为电信号传输到数据收集处理设备，数据收集处理设备对汇总的数据进行初步的分析，根据预先设定的数据筛选条件进行对比筛选；S3、数据收集处理设备进行筛选后，将无效数据、非法数据和有效数据分离，对无效数据和非法数据进行及时的删除粉碎处理；S4、数据收集设备将筛选出的有效数据传输到数据库中保存备份；S5、数据收集设备将有效数据传输到数据分析设备，数据分析设备对数据进行初步分析计算，得到初步分析结果；S6、数据分析设备自动调用数据库中存储的原有数据，数据分析设备将初步分析结果与数据库中调用的数据进行对比分析，得到最终结果。优选的，所述数据分析设备对不同时段的最终结果进行对比分析，根据分析结果预测未来几天空气中PM2.5的含量，判断未来几天是否会出现雾霾天气。优选的，所述数据分析设备将最终结果数据传输到数据库进行储存备份。优选的，所述数据库将数据分为有效数据和最终结果数据，数据库会定期对存储的数据进行删除，删除顺序根据存储时间进行。优选的，所述雾霾监测仪周期性的进行数据传输。优选的，所述数据分析设备调用数据库中的数据时，会根据时间顺序调用最新存储的数据。优选的，所述数据分析设备通过网络将最终结果数据进行公开共享。优选的，所述数据接收设备对数据进行时段划分，对不同时段的数据进行整合。与现有技术相比，本专利技术提供了一种实现雾霾在线监测的大数据处理方法，具备以下有益效果：1、该实现雾霾在线监测的大数据处理方法，通过在数据收集处理设备中进行筛选条件预设，将非法数据和无效数据的特征数值输入收集处理设备的筛选模块，筛选时，数据收集处理设备将接收到的数据与预设的条件数值进行逐一对比，当发现接收的数据的特征与预设的条件数据相同时，将此条数据判定为非法数据或无效数据，数据收集处理设备将此条数据取出进行删除粉碎处理，避免非法数据或无效数据对数据分析设备造成干扰，降低了数据分析的误差，降低了数据分析设备的工作难度，提高了数据分析的速度；2、该实现雾霾在线监测的大数据处理方法，整个处理流程全自动进行，无需人工手动进行数据的转移和存储，通过电信号和网络信号进行数据传输，自动进行数据收集、筛选、删除和分析，较好的提高了数据分析处理的速度。附图说明图1为本专利技术提出的一种实现雾霾在线监测的大数据处理方法的流程图；图2为本专利技术提出的一种实现雾霾在线监测的大数据处理方法的数据库的示意图。具体实施方式下面将对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参阅图1-2，一种实现雾霾在线监测的大数据处理方法，具体方法包括以下步骤：S1、雾霾监测仪将数据通过数据传输设备将数据转换为电信号传输到数据接收设备，数据接收设备接收数据信息进行数据信息初步汇总，雾霾监测仪通过光线效应对空气中PM2.5的浓度进行检测，pm2.5检测仪检测大气中粒径小于2.5μm细颗粒物质量的检测仪，虽然细颗粒物只是地球大气成分中含量很少的组分，但它对空气质量和能见度等有重要的影响，细颗粒物粒径小，有些细颗粒物富含大量的有毒、有害物质且在大气中的停留时间长、输送距离远，因而对人体健康和大气环境质量的影响更大，由专用的激光模块产生一束特定的激光,当颗粒物经过时,其信号会被超高灵敏的数字电路模块检测到,通过对信号数据进行智能识别分析得到颗粒计数和颗粒大小,根据专业的标定技术得到粒径分布与质量浓度转换公式,最终得到跟官方单位统一的质量浓度，它能同时对两个粒径档进行检测分析，仪器默认测量设置为前，也就是此时用户将仪器拿到进风口处测量单位体积内尘埃粒子个数20秒后自动显示设置为后，用户此时就拿仪器到出风口处测量20秒，测量完后根据当前测量的进出气风口尘埃粒子个数自动计算出净化效率，每秒进行上百次采集检测，提高检测数据的准确性，使检测数据无限接近与真实数据，数据接收设备能够对数据进行初步的汇总，对不同时段的数据进行归类，提高数据的整齐性，避免海量的数据混合在一起，导致数据处理困难，影响分析速度；S2、数据接收设备将数据信息转换为电信号传输到数据收集处理设备，数据收集处理设备对汇总的数据进行初步的分析，根据预先设定的数据筛选条件进行对比筛选，数据收集处理设备能够对汇总的数据进行简单的分析处理，通过在数据收集处理设备中进行筛选条件预设，将非法数据和无效数据的特征数值输入收集处理设备的筛选模块，筛选时，数据收集处理设备将接收到的数据与预设的条件数值进行逐一对比，当发现接收的数据的特征与预设的条件数据相同时，将此条数据判定为非法数据或无效数据，数据收集处理设备将此条数据取出进行删除粉碎处理；S3、数据收集设备处理进行筛选后，将无效数据、非法数据和有效数据分离，对无效数据和非法数据进行及时的删除粉碎处理，数据收集处理设备将无效数据和非法数据单独划分到特定的区域进行删除粉碎，避免非法数据和无效数据大量占用收据收集处理设备的存储空间，避免非法数据和无效数据被传输到数据分析设备，导致数据分析设备对非法数据和无效数据进行分析，影响分析结果，导致分析结果误差较大，影响最终结果；S4、数据收集设备将筛选出的有效数据传输到数据库中保存备份，数据库，简而言之可视为电子化的文件柜——存储电子文件的处所，本文档来自技高网...

【技术保护点】
1.一种实现雾霾在线监测的大数据处理方法，其特征在于，具体方法包括以下步骤：S1、雾霾监测仪将数据通过数据传输设备将数据转换为电信号传输到数据接收设备，数据接收设备接收数据信息进行数据信息初步汇总；S2、数据接收设备将数据信息转换为电信号传输到数据收集处理设备，数据收集处理设备对汇总的数据进行初步的分析，根据预先设定的数据筛选条件进行对比筛选；S3、数据收集处理设备进行筛选后，将无效数据、非法数据和有效数据分离，对无效数据和非法数据进行及时的删除粉碎处理；S4、数据收集设备将筛选出的有效数据传输到数据库中保存备份；S5、数据收集设备将有效数据传输到数据分析设备，数据分析设备对数据进行初步分析计算，得到初步分析结果；S6、数据分析设备自动调用数据库中存储的原有数据，数据分析设备将初步分析结果与数据库中调用的数据进行对比分析，得到最终结果。

【技术特征摘要】
1.一种实现雾霾在线监测的大数据处理方法，其特征在于，具体方法包括以下步骤：S1、雾霾监测仪将数据通过数据传输设备将数据转换为电信号传输到数据接收设备，数据接收设备接收数据信息进行数据信息初步汇总；S2、数据接收设备将数据信息转换为电信号传输到数据收集处理设备，数据收集处理设备对汇总的数据进行初步的分析，根据预先设定的数据筛选条件进行对比筛选；S3、数据收集处理设备进行筛选后，将无效数据、非法数据和有效数据分离，对无效数据和非法数据进行及时的删除粉碎处理；S4、数据收集设备将筛选出的有效数据传输到数据库中保存备份；S5、数据收集设备将有效数据传输到数据分析设备，数据分析设备对数据进行初步分析计算，得到初步分析结果；S6、数据分析设备自动调用数据库中存储的原有数据，数据分析设备将初步分析结果与数据库中调用的数据进行对比分析，得到最终结果。2.根据权利要求1所述的一种实现雾霾在线监测的大数据处理方法，其特征在于：所述数据分析设备对不同时段的最终结果进行对比分析，根据分析结果预测未...

【专利技术属性】
技术研发人员：叶竹梅，
申请(专利权)人：叶竹梅，
类型：发明
国别省市：江西,36