一种基于积分日志量化分析的应用动态分级评估方法技术

一种基于积分日志量化分析的应用动态分级评估方法，其特征在于：根据积分业务运营要求，设置应用分级模型，并统一配置具备可量化评估的模型因子（服务/接口类型）；按照模型因子在积分应用的多个用户访问和交互环节进行用户访问轨迹日志埋点；并在积分日志服务系统基础上，构建海量日志采集与汇聚模块，将各埋点日志信息汇聚到本模块；构建应用动态分级评估处理模块，按照系统设定的动态评估频率，调用日志预处理模块对汇聚的日志信息进行预处理，并结合应用分级模型进行量化计算和匹配，得到当前积分系统中各应用的动态量化分级评估结果；发明专利技术包括海量日志采集与汇聚模块、日志预处理模块、应用分级模型、应用动态分级评估处理模块。估处理模块。估处理模块。

【技术实现步骤摘要】
一种基于积分日志量化分析的应用动态分级评估方法


[0001]本专利技术涉及积分技术和应用领域，特别是涉及一种基于积分日志量化分析的应用动态分级评估方法。

技术介绍

[0002]系统日志是记录系统中硬件、软件和系统问题的信息，同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。系统日志包括系统日志、应用程序日志和安全日志。
[0003]互联网业务系统，通常都构建了日志服务器获日志服务系统。日志服务器记录了web服务器接收处理请求以及运行时错误等各种原始信息。通过对日志进行统计、分析、综合，就能有效地掌握服务器的运行状况，发现和排除错误原因、了解客户访问分布等，更好的加强系统的维护和管理。
[0004]积分业务系统中，涵盖了大量的第三方应用服务，面向第三方应用的日常运营，同样也构建了应用日志服务系统，用于全流程记录个应用服务的过程记录信息、内外部服务节点信息等。同时，积分业务体系中，由于业务、技术、运营等的不一致性，导致第三方应用的服务质量高低不齐。这样对积分用户的服务质量也有差别，对积分体系的统一管理和运营也有较大的难度以及因此衍生的差异化管理需求等。当然，第三方应用的服务质量也在持续的运营服务过程中得到不同程度的提升，所以需要一种基于过程服务监督机制的应用动态分级评估方法，便于积分体系在运营过程中，对大量第三方应用服务质量进行动态监控和量化评估，便于对应用进行动态分类分级、有效监督并持续提升第三方应用服务质量，并提供差异化的管理措施等。
专利
技术实现思路

[0005]本专利技术提供了一种基于积分日志量化分析的应用动态分级评估方法。根据积分业务运营要求，设置应用分级模型，并统一配置具备可量化评估的模型因子（服务/接口类型）；按照模型因子在积分应用的多个用户访问和交互环节进行用户访问轨迹日志埋点；并在积分日志服务系统基础上，构建海量日志采集与汇聚模块，将各埋点日志信息汇聚到本模块；构建应用动态分级评估处理模块，按照系统设定的动态评估频率，调用日志预处理模块对汇聚的日志信息进行预处理，并结合应用分级模型进行量化计算和匹配，得到当前积分系统中各应用的动态量化分级评估结果。
[0006]本专利技术包括海量日志采集与汇聚模块、日志预处理模块、应用分级模型、应用动态分级评估处理模块。
[0007]1、海量日志采集与汇聚模块：通过Flume等相关日志采集工具，将积分业务系统中按照应用分级模型中各模型因子设置的埋点日志信息，统一采集和汇聚到本模块。
[0008]2、日志预处理模块：本模块负责将采集和汇聚的日志信息进行初始化预处理，通过ETL等工具，将原始日志信息，按照应用分级模型各因子的定义，将日志进行统一标签化
和格式化处理，并做好分类、归类处理及统计。
[0009]3、应用分级模型：按照积分业务运营要求，设置应用分级模型。将不同业务访问类型映射到不同的系统接口中，对接口服务进行分类：正常业务浏览（标签：N_V）、正常信息交互（标签：N_I）、正常交易支付（标签：N_P）、异常业务浏览（标签：A_V）、异常信息交互（标签：A_I）、异常交易支付（标签：A_P）；并针对不同对接口服务类型，设置不同的量化评估权重Q（X）、以及量化评估条件F(X)和取值区间D（X）。针对不同业务编号（SID）下的应用分级模型设置如图1示。
[0010]根据积分业务运营及管理要求，可以对应用分级总体设置如图2型。
[0011]4、应用动态分级评估处理模块：按照系统设定的频率，对系统所述的各应用进行周期性的动态评估。扫描各业务编号（SID），调用日志预处理模块获取当前SID下，在预设时间周期内收集并预处理后的格式化日志信息；按照应用分级模型中各因子的设定，将预处理并分类日志信息进行量化计算及换算，首先将当前SID下的各分类日志进行日志频率换算，得到评估条件集合{F（N_V）,F（N_I）,F（N_P）,F（A_V）,F（A_I）,F（A_P）}；按照应用分级模型定义的个评估条件的取值范围，获得当前SID下各模型因子的取值结果集合{D（N_V）,D（N_I）,D（N_P）,D（A_V）,D（A_I）,D（A_P）}；按照模型设定的各因子设定的权重，进行线性计算；最后合并各模型因子的评估得分，得到当前SID的动态分级评估结果。量化计算方法为：V（SID）=∑（D（x）*Q（x）），其中D（x）分别代表当前SID下的取值集合{D（N_V）,D（N_I）,D（N_P）,D（A_V）,D（A_I）,D（A_P）}，Q（x）代表各模型因子的权重值集合{Q（N_V）,Q（N_I）,Q（N_P）,Q（A_V）,Q（A_I）,Q（A_P）}。
附图说明
[0012]图1为应用分级模型设置示例图。
[0013]图2为用分级总体设置示例图。
[0014]图3为一种基于积分日志量化分析的应用动态分级评估方法结构图。
具体实施方式
[0015]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0016]请参阅图3本专利技术实施实例中，一种基于积分日志量化分析的应用动态分级评估方法。根据积分业务运营要求，设置应用分级模型，并统一配置具备可量化评估的模型因子（服务/接口类型）；按照模型因子在积分应用的多个用户访问和交互环节进行用户访问轨迹日志埋点；并在积分日志服务系统基础上，构建海量日志采集与汇聚模块，将各埋点日志信息汇聚到本模块；构建应用动态分级评估处理模块，按照系统设定的动态评估频率，调用日志预处理模块对汇聚的日志信息进行预处理，并结合应用分级模型进行量化计算和匹配，得到当前积分系统中各应用的动态量化分级评估结果。本专利技术包括海量日志采集与汇聚模块（S01）、日志预处理模块（S02）、应用分级模型（S03）、应用动态分级评估处理模块（S04）。
[0017]1、海量日志采集与汇聚模块（S01）：通过Flume等相关日志采集工具，将积分业务系统中按照应用分级模型中各模型因子设置的埋点日志信息，统一采集和汇聚到本模块。
[0018]2、日志预处理模块（S02）：本模块负责将采集和汇聚的日志信息进行初始化预处理，通过ETL等工具，将原始日志信息，按照应用分级模型（S03）各因子的定义，将日志进行统一标签化和格式化处理，并做好分类、归类处理及统计。
[0019] 3、分级模型（S03）：按照积分业务运营要求，设置应用分级模型。将不同业务访问类型映射到不同的系统接口中，对接口服务进行分类：正常业务浏览（标签：N_V）、正常信息交互（标签：N_I）、正常交易支付（标签：N_P）、异常业务浏览（标签：A_V）、异常信息交互（标签：A_I）、异常交易支付（标签：A_P）；并针对不同对接口服务类型，设置不同的量化评估权重Q（X）本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于积分日志量化分析的应用动态分级评估方法，其特征在于：根据积分业务运营要求，设置应用分级模型，并统一配置具备可量化评估的模型因子（服务/接口类型）；按照模型因子在积分应用的多个用户访问和交互环节进行用户访问轨迹日志埋点；并在积分日志服务系统基础上，构建海量日志采集与汇聚模块，将各埋点日志信息汇聚到本模块；构建应用动态分级评估处理模块，按照系统设定的动态评估频率，调用日志预处理模块对汇聚的日志信息进行预处理，并结合应用分级模型进行量化计算和匹配，得到当前积分系统中各应用的动态量化分级评估结果。本发明包括海量日志采集与汇聚模块、日志预处理模块、应用分级模型、应用动态分级评估处理模块。2.根据权利要求1所述的一种基于积分日志量化分析的应用动态分级评估方法，其特征在于：海量日志采集与汇聚模块：通过Flume等相关日志采集工具，将积分业务系统中按照应用分级模型中各模型因子设置的埋点日志信息，统一采集和汇聚到本模块。3.根据权利要求1所述的一种基于积分日志量化分析的应用动态分级评估方法，其特征在于：日志预处理模块：本模块负责将采集和汇聚的日志信息进行初始化预处理，通过ETL等工具，将原始日志信息，按照应用分级模型各因子的定义，日志进行统一标签化和格式化处理，并做好分类、归类处理及统计。4.根据权利要求1所述的一种基于积分日志量化分析的应用动态分级评估方法，其特征在于：应用分级模型：按照积分业务运营要求，设置应用分级模型。将不同业务访问类型映射到不同的系统接口中，对接口服务进行分类：正常业务浏览（标签：N_V）、正常信息交互（...

【专利技术属性】
技术研发人员：宋立伟，陈宝，汪哲，
申请(专利权)人：翼集分上海数字科技有限公司，
类型：发明
国别省市：