【技术实现步骤摘要】
本申请涉及计算机，尤其涉及一种基于业务属性的日志提取方法、装置、设备及存储介质。
技术介绍
1、日志文件是一种记录系统或应用程序运行时发生事件和活动的文件，系统错误、警告、信息和调试信息等数据都会存储在日志文件当中，因此日志文件对诊断与解决系统问题有着非常重要的作用。日志文件通常存储在本地磁盘或者远程服务器中。
2、现有技术中，日志文件的分类方式通常是按照日志目录进行分类，并对日志文件进行索引，进而以文件形式对日志文件进行存储，用户查询标日志时，也是在存储的日志文件库中进行搜索并以结果进行排序。
3、然而，现有技术提供的日志分类方式和日志存储方式较为单一，用户查询日志时，存在搜索效率低，查询准确度也低的问题；文件保存形式单一会产生对存储位置压力大的问题。
技术实现思路
1、本申请提供一种基于业务属性的日志提取方法、装置、设备及存储介质，用以解决现有技术提供的日志分类方式和日志存储方式较为单一，用户查询日志时，存在搜索效率低，查询准确度也低的问题；文件保存形式单一会产生对存储位置压力大的问题。
2、第一方面，本申请提供了一种基于业务属性的日志提取方法，包括：
3、获取待提取日志的属性范围；
4、根据所述属性范围获取所述待提取日志的存储位置，并生成与所述存储位置对应的日志提取请求，所述日志提取请求用于指示所述待提取日志的存储等级，不同的存储位置存储有对应的属性范围的日志；
5、根据所述存储等级，从所述存储位置处提取
6、可选的，所述属性范围包括：查询时段、业务属性以及所述业务属性对应的业务属性值，所述根据所述属性范围获取所述待提取日志的存储位置，包括：
7、获取数据库中存储的第一映射关系，所述第一映射关系用于指示日志索引与日志在对象存储服务器中的存储位置；
8、根据所述查询时段、业务属性以及所述业务属性对应的业务属性值，确定所述待提取日志的日志索引；
9、根据所述待提取日志的日志索引和所述第一映射关系，确定所述待提取日志在所述对象存储服务器中的存储位置。
10、可选的，所述根据所述存储等级，从所述存储位置处提取所述待提取日志，包括：
11、根据所述存储等级，从所述存储位置中的目标区域内提取所述待提取日志，所述目标区域为所述存储位置中用于存储所述存储等级对应的日志的区域。
12、可选的，所述获取待提取日志的属性范围之前，所述方法还包括：
13、定时从日志收集器中抓取日志文件，并解析所述日志文件，得到所述日志文件对应的属性范围以及所述日志文件对应的存储等级；
14、根据所述日志文件对应的属性范围，生成所述日志文件的日志索引，并确定与所述属性范围对应的存储位置；
15、根据所述日志文件对应的存储等级以及所述日志索引，将所述日志文件分类存储至对象存储服务器中对应的存储位置，并将所述属性范围对应的存储位置以及所述日志文件的日志索引之间的第一映射关系存储至数据库中。
16、可选的，所述根据所述存储等级，从所述存储位置处提取所述待提取日志之后，所述方法还包括：
17、获取所述待提取日志中的异常日志；
18、对所述异常日志进行索引处理，并将所述异常日志的存储位置与所述异常日志的日志索引之间的第二映射关系存储至数据库中；
19、根据所述异常日志，执行事件分析处理，得到分析结果。
20、可选的，所述根据所述异常日志，执行事件分析处理，得到分析结果之后，所述方法还包括：
21、判断所述分析结果是否能够确定存在异常的原因；
22、若是，则输出所述异常日志；
23、若否，则重新设置待提取日志的属性范围，并从新的属性范围对应的存储位置处提取新的异常日志；
24、并根据所述新的异常日志，执行事件分析处理，得到新的分析结果，直至所述新的分析结果能够确定存在异常的原因。
25、第二方面，本申请提供一种基于业务属性的日志提取装置，包括：
26、获取模块，用于获取待提取日志的属性范围；
27、生成模块，用于根据所述属性范围获取所述待提取日志的存储位置，并生成与所述存储位置对应的日志提取请求，所述日志提取请求用于指示所述待提取日志的存储等级，不同的存储位置存储有对应的属性范围的日志；
28、处理模块，用于根据所述存储等级，从所述存储位置处提取所述待提取日志。
29、可选的，所述基于业务属性的日志提取装置，还包括：确定模块；
30、所述获取模块，还用于获取数据库中存储的第一映射关系，所述第一映射关系用于指示日志索引与日志在对象存储服务器中的存储位置；
31、所述确定模块，用于根据所述查询时段、业务属性以及所述业务属性对应的业务属性值，确定所述待提取日志的日志索引；
32、所述确定模块，还用于根据所述待提取日志的日志索引和所述第一映射关系，确定所述待提取日志在所述对象存储服务器中的存储位置。
33、可选的，所述处理模块，具体用于根据所述存储等级，从所述存储位置中的目标区域内提取所述待提取日志，所述目标区域为所述存储位置中用于存储所述存储等级对应的日志的区域。
34、可选的，所述处理模块，还用于定时从日志收集器中抓取日志文件，并解析所述日志文件，得到所述日志文件对应的属性范围以及所述日志文件对应的存储等级；
35、所述生成模块，还用于根据所述日志文件对应的属性范围，生成所述日志文件的日志索引，并确定与所述属性范围对应的存储位置；
36、所述处理模块，还用于根据所述日志文件对应的存储等级以及所述日志索引，将所述日志文件分类存储至对象存储服务器中对应的存储位置，并将所述属性范围对应的存储位置以及所述日志文件的日志索引之间的第一映射关系存储至数据库中。
37、可选的，所述获取模块，还用于获取所述待提取日志中的异常日志；
38、所述处理模块，还用于对所述异常日志进行索引处理，并将所述异常日志的存储位置与所述异常日志的日志索引之间的第二映射关系存储至数据库中；
39、所述处理模块，还用于根据所述异常日志，执行事件分析处理，得到分析结果。
40、可选的，所述基于业务属性的日志提取装置，还包括：判断模块；
41、所述判断模块，用于判断所述分析结果是否能够确定存在异常的原因；
42、所述处理模块，还用于当所述分析结果能够确定存在异常的原因，则输出所述异常日志；
43、所述处理模块，还用于当所述分析结果无法确定存在异常的原因，则重新设置待提取日志的属性范围，并从新的属性范围对应的存储位置处提取新的异常日志；
44、所述处理模块，还用于根据所述新的异常日志，执行事件分析处理，得到新的分析结果，直至所述新的分析结果能够确定存在异常的原本文档来自技高网...
【技术保护点】
1.一种基于业务属性的日志提取方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述属性范围包括：查询时段、业务属性以及所述业务属性对应的业务属性值，所述根据所述属性范围获取所述待提取日志的存储位置，包括：
3.根据权利要求1所述的方法，其特征在于，所述根据所述存储等级，从所述存储位置处提取所述待提取日志，包括：
4.根据权利要求1所述的方法，其特征在于，所述获取待提取日志的属性范围之前，所述方法还包括：
5.根据权利要求1所述的方法，其特征在于，所述根据所述存储等级，从所述存储位置处提取所述待提取日志之后，所述方法还包括：
6.根据权利要求5所述的方法，其特征在于，所述根据所述异常日志，执行事件分析处理，得到分析结果之后，所述方法还包括：
7.一种基于业务属性的日志提取装置，其特征在于，包括：
8.根据权利要求7所述的装置，其特征在于，还包括：确定模块；
9.一种基于业务属性的日志提取设备，其特征在于，包括：处理器，以及与所述处理器通信连接的存储器；
1
...【技术特征摘要】
1.一种基于业务属性的日志提取方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述属性范围包括：查询时段、业务属性以及所述业务属性对应的业务属性值，所述根据所述属性范围获取所述待提取日志的存储位置，包括：
3.根据权利要求1所述的方法，其特征在于，所述根据所述存储等级，从所述存储位置处提取所述待提取日志，包括：
4.根据权利要求1所述的方法，其特征在于，所述获取待提取日志的属性范围之前，所述方法还包括：
5.根据权利要求1所述的方法，其特征在于，所述根据所述存储等级，从所述存储位置处提取所述待提取日志之后...
【专利技术属性】
技术研发人员：李书尧，孙戌杰，
申请(专利权)人：中国联合网络通信集团有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。