一种基于文件类SQL功能处理海量数据的方法技术

技术编号:4384419 阅读:274 留言:0更新日期:2012-04-11 18:40
本发明专利技术涉及电信网络中的数据处理领域,具体提供一种基于文件类SQL功能处理海量数据的方法。本发明专利技术的一种基于文件类SQL功能处理海量数据的方法包括以下步骤:A.对采集后产生的文本文件进行标准化格式处理;B.基于标准化后的文本文件进行海量数据处理,使用类SQL语句的方式进行相关数据操作;C.操作的结果可以定义输出为最终结果或者中间结果,对于中间结果符合标准化后的格式,继续对该文件进行数据操作,直至达到结果要求。本发明专利技术结合了文件和数据库方式的各自优点,既保证了海量数据处理的高效率,也使操作非常方便、灵活并具有很强的扩展能力。

【技术实现步骤摘要】

【技术保护点】
一种基于文件类SQL功能处理海量数据的方法,包括以下步骤: A、对采集后产生的文本文件进行标准化格式处理; B、基于标准化后的文本文件进行海量数据处理,使用类SQL语句的方式进行相关数据操作; C、操作的结果可以定义输出为 最终结果或者中间结果,对于中间结果符合标准化后的格式,继续对该文件进行数据操作,直至达到结果要求。

【技术特征摘要】

【专利技术属性】
技术研发人员:祝乃国
申请(专利权)人:浪潮通信信息系统有限公司
类型:发明
国别省市:88[中国|济南]

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1