一种基于网络服务与应用的监控分析系统技术方案

本发明专利技术提供一种基于网络服务与应用的监控分析系统，其直接采集、代理、传感器等方式获得目标的结构化资源和监控数据，并储存在特定结构的数据库中；实现从逻辑结构上查询任意目标节点和目标的结构化资源，或者任意选取结构化资源的任意节点进行水平和垂直方向的比对与分析，并输出报表和告警信息。本发明专利技术的基于网络服务与应用的监控分析系统对目标资源进行实时性监控和可配置的任务监控，进而获得实际网络中运行的网络服务与应用的运行状态，然后以图形、数据和报表等直观形式将数据分析结果提供给网络维护和管理人员；同时可对网络突发事件给出实时警告，并进行准确的网络节点定位，将发现时间降低到最小，为及时处理提供支持。

【技术实现步骤摘要】
一种基于网络服务与应用的监控分析系统
本专利技术涉及网络监控的
，特别是涉及一种基于网络服务与应用的监控分析系统。
技术介绍
目前，随着各种网络技术和网络设备迅速发展并投入实际应用与生产当中，网络环境发生了翻天覆地的变化。在具体的商业应用中，在特定网络中存在各式各样的网络服务和应用。大至全球数据中心，小至企业网络、校园网络，随着其中运行的网络服务日益重要，急需一个覆盖面广、功能强大、配置和使用灵活的监控与统计分析工具，从而在降低网络维护成本的同时，又能提供强大管理与统计分析功能。由于网络服务与应用千差万别，对其的监控根据实际的情况需要采用不同的技术和网络协议。目前我们对监控目标提供全面的技术支持，在此基础上获得大量的结构化监控资源信息和监控数据，并使用特有的结构化存储与管理功能进行统计和分析。目前，在网络设备管理方面国内一些大型的设备供应商如华为、H3C、中兴等，都提供类似的针对网络设备的管理和监控功能，如华为的eSight、H3C的iMC等。现有网络管理软件大部分针对网络设备进行管理，提供对网络设备的监控和管理。有些软件也会提供一些有限的针对网络服务与应用的监控，但是提供对网络服务与应用的监控软件的功能及覆盖面不够广泛。同时，现有的网络服务与应用的监控软件对于所监控目标的详细监控资源的组织、管理、查询功能非常不合理，造成的结果是可操作性差，自定义资源与监控指标的组合难以实现，资源的特定情况的横向与纵向对比无法实现，进而无法全方位、灵活的统计出选定资源的详细信息。综上所述，随着目前网络技术的快速发展，已有的网络管理方式和方法已无法满足我们的对网络使用的需求。伴随着网络规模和复杂度的增加，网络管理和网络设备的维护所需的人力和财力越来越大，但是却远远没有达到管理的目标。
技术实现思路
鉴于以上所述现有技术的缺点，本专利技术的目的在于提供一种基于网络服务与应用的监控分析系统，主要应用于特定网络，如企业网，教育网等网络软硬件复杂的环境中，提供全方位的应用与网络服务的监控和分析功能，能够及时处理网络异常，发现和监控网络性能瓶颈，并将突发事故造成的影响降低到最小，从而降低了网络管理和维护成本。为了实现上述目的，本专利技术提供了一种基于网络服务与应用的监控分析系统，至少包括：数据采集模块，用于采集网络服务与应用的结构化资源数据和监控数据；数据验证模块，用于对采集到的结构化资源数据和监控数据进行有效性验证和阈值判断；数据处理模块，用于结构化资源数据构建结构化资源列表，根据监控数据构建指标列表；数据管理模块，用于将结构化资源数据和监控数据进行存储管理；数据查询与分析模块，用于对存储的结构化资源数据和监控数据进行查询和分析。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据采集模块中针对不同的监控目标采用专用的采集适配器进行数据采集。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据处理模块中，将每个种类资源的最小树形结构作为一个结构化资源模板；结构化资源列表使用结构化资源模板为蓝本，在结构化资源模板的最小规模的树形结构中扩展出一个与实际资源结构逻辑上相同的大规模树形结构。根据上述的基于网络服务与应用的监控分析系统，其中：指标为资源的监控属性，对目标进行的监控就是对指定目标的所有规定的指标进行取值，指标模板使用结构化资源模板的形式，指标列表为树形结构。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据处理模块中，指标列表拼接到结构化资源列表之后，再加上监控资源对应的配置信息。进一步地，根据上述的基于网络服务与应用的监控分析系统，其中：所述配置信息包括结构化资源列表的阈值上限与下限、条目的启用开关、紧急程度。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据管理模块中，按照指标的层级和结构分组将监控数据分散存储在不同的物理数据存储单元。根据上述的基于网络服务与应用的监控分析系统，其中：在结构化资源数据和监控数据存入数据库之前，所述数据验证模块对所述结构化资源数据和监控数据进行验证，对于超过阈值的结构化资源数据和监控数据进行告警操作。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据分析与查询模块中，使用数据表格或线性图或饼图输出结果。根据上述的基于网络服务与应用的监控分析系统，其中：所述数据分析与查询模块中，首先构建动态查询语句查询监控数据，资源数据则作为过滤条件再配合用户输入。如上所述，本专利技术基于网络服务与应用的监控分析系统，具有以下有益效果：（1）具有覆盖面极为广泛的监控采集功能；（2）能够对支持的监控目标给出符合用户直观感受的、合理化的资源模板，并根据模板格式化出目标的结构化资源列表，在此基础上配合设计的特殊指标列表，高效率地实现对大数据量中采集数据的有效性和配置的阈值的验证；（3）本专利技术使用可配置的、分散的数据存储方式，保证了大范围的数据均匀分布和小范围的数据的有效性，即大范围数据采用宽松式存储结构和小范围数据采用资源分组的结构化存储结构；（4）由于优秀的数据存储管理，在配合资源和指标的前提下，本专利技术可以快速的定位数据存储位置，并且在不影响查询效率的前提下提供各种维度的数据分析对比功能。附图说明图1显示为本专利技术的基于网络服务与应用的监控分析系统的结构示意图；图2显示为本专利技术中的数据采集流程图；图3显示为本专利技术中的数据处理流程图；图4显示为本专利技术中数据查询与分析流程图。具体实施方式以下通过特定的具体实例说明本专利技术的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本专利技术的其他优点与功效。本专利技术还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本专利技术的精神下进行各种修饰或改变。需要说明的是，本实施例中所提供的图示仅以示意方式说明本专利技术的基本构想，遂图式中仅显示与本专利技术中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。本专利技术的基于网络服务与应用的监控分析系统对网络中可访问的服务与应用提供完善的监控功能，其中主要包括网络状态、目标服务与应用的可用性和目标的特定性能统计、可扩展指标等；同时提供目标服务与应用的实时状态展示和历史数据统计和分析功能，并针对获得的数据进行安全分析，以及对用户设定的条件进行分析与判断，并根据最终结果判断是否需要使用必要通知手段告知管理人员或用户。本专利技术针对复杂多变的网络环境中的网络服务与应用使用，直接采集、代理、传感器等方式获得目标的结构化资源和监控数据，并储存在特定结构的数据库中，使结构化资源和监控数据维持一种物理结构上松散，但是查询和逻辑上紧密的关系。在此基础上，可以从逻辑结构上查询任意目标节点和目标的结构化资源，也可以任意选取结构化资源的任意节点进行水平和垂直方向的比对与分析，并输出报表和告警信息。本专利技术的基于网络服务和应用的监控分析系统包括数据采集模块、数据处理模块、数据管理模块、数据验证模块和数据分析与查询模块。下面具体介绍各个模块的结构与功能。（1）数据采集模块数据采集是数据统计与管理的基础，本专利技术在数据采集方面做到了最大范围的覆盖，几乎覆盖到所有的网络服务和应用。其中，针对某些特殊类别，本文档来自技高网...

【技术保护点】
一种基于网络服务与应用的监控分析系统，其特征在于，至少包括：数据采集模块，用于采集网络服务与应用的结构化资源数据和监控数据；数据验证模块，用于对采集到的结构化资源数据和监控数据进行有效性验证和阈值判断；数据处理模块，用于结构化资源数据构建结构化资源列表，根据监控数据构建指标列表；数据管理模块，用于将结构化资源数据和监控数据进行存储管理；数据查询与分析模块，用于对存储的结构化资源数据和监控数据进行查询和分析。

【技术特征摘要】
1.一种基于网络服务与应用的监控分析系统，其特征在于，至少包括：数据采集模块，用于采集网络服务与应用的结构化资源数据和监控数据；数据验证模块，用于对采集到的结构化资源数据和监控数据进行有效性验证和阈值判断；数据处理模块，用于结构化资源数据构建结构化资源列表，根据监控数据构建指标列表；所述数据处理模块中，将每个种类资源的最小树形结构作为一个结构化资源模板；结构化资源列表使用结构化资源模板为蓝本，在结构化资源模板的最小规模的树形结构中扩展出一个与实际资源结构逻辑上相同的大规模树形结构；数据管理模块，用于将结构化资源数据和监控数据进行存储管理；数据查询与分析模块，用于对存储的结构化资源数据和监控数据进行查询和分析。2.根据权利要求1所述的基于网络服务与应用的监控分析系统，其特征在于：所述数据采集模块中针对不同的监控目标采用专用的采集适配器进行数据采集。3.根据权利要求1所述的基于网络服务与应用的监控分析系统，其特征在于：指标为资源的监控属性，对目标进行的监控就是对指定目标的所有规定的指标进行取值，指标模板使用结构化资源模板的形式，指标列表为树形结构。4.根据...

【专利技术属性】
技术研发人员：苏民举，
申请(专利权)人：上海斐讯数据通信技术有限公司，
类型：发明
国别省市：