【技术实现步骤摘要】
【技术保护点】
一种通过高速内存、分布式处理海量日志的系统,其特征在于:所述系统是由多个日志产生设备和一个日志管理服务器所组成,其中:日志产生设备,分散地配置在各个网元中,用于将各种原始日志进行格式归一化处理后,再缓存于高速内存组件,并周期地将其产生的关联索引文件上传至日志管理服务器;该日志产生设备设有下述三个部件:原始日志产生模块:用于为电信网络产生各种业务应用的原始日志;日志预处理模块:负责读取配置文件,根据配置文件中的日志类型,从原始日志产生模块读取相应的原始日志,然后创建相应子进程,分别对不同类型的日志以“key,value”的形式进行格式归一化,同时将key写入关联索引文件并周期地以文件传输协议FTP的方式上传至日志管理服务器;高速内存组件:用于缓存格式归一化预处理后的日志。日志管理服务器,负责将分布于各个日志产生设备的高速内存组件中超过缓存期限的日志统一导出、归档存储,以供其他系统对日志进行查询、分析。
【技术特征摘要】
【专利技术属性】
技术研发人员:陈涛,谭立彦,李学春,张云生,王菲,
申请(专利权)人:北京首信科技股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。