预计算OLAP系统及实现方法技术方案

技术编号:21571096 阅读:64 留言:0更新日期:2019-07-10 15:18
本申请公开了一种预计算OLAP系统及实现方法。该预计算OLAP系统包括:至少三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信。本申请解决了资源率用率较低的技术问题。本申请中的预计算OLAP系统通过解耦隔离部署,可以解决组件耦合带来的灵活性问题,在多租户场景下极大的提高了资源利用率,使本申请能应对更加复杂的使用场景。此外,本申请适用于多租户架构,可以让多个用户在共同的环境下共用相同的OLAP预计算工具,且同时确保各用户间数据的隔离性。

Estimated OLAP System and Its Implementation

【技术实现步骤摘要】
预计算OLAP系统及实现方法
本申请涉及计算机、数据分析领域,具体而言,涉及一种预计算OLAP系统及实现方法。
技术介绍
通过搭建预计算OLAP系统的多维分析平台,可以让多个用户在同一个平台上进行建模开发,从而加速多维分析。专利技术人发现,在有多租户时,启动多个服务实例会占用资源。同时,租户实际使用和启动的服务实例不成比例,还造成了资源浪费。进一步,预计算OLAP系统中的子系统之间相互耦合,从而在开发使用时灵活性较差。针对相关技术中资源率用率较低的问题,目前尚未提出有效的解决方案。
技术实现思路
本申请的主要目的在于提供一种预计算OLAP系统及实现方法,以解决资源率用率较低的问题。为了实现上述目的,根据本申请的一个方面,提供了一种预计算OLAP系统。根据本申请的预计算OLAP系统包括:至少三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信。进一步地,所述子系统包括:建模系统、预计算系统和查询系统,所述建模系统,用于进行模型开发和数据立方体设计;所述预计算系统,用于根据所述模型对数据仓库中的数据进行预聚合并保存预计算数据立方体结果;所述查询系统,用于对预计算数据立方体结果进行查询。进一步地,所述建模系统中包括第一数据接口,用于进行数据文件的导入或导出,所述预计算系统中包括第二数据接口,用于进行所述预计算数据立方体结果的导出。进一步地,每个所述子系统中按照不同角色配置不同的资源组,每个所述资源组中部署至少一个服务实例,所述资源组被配置为开发模式、构建模式或者查询模式的角色模式。进一步地,根据预设用户优先级在所述查询系统中执行不同优先级的查询请求。进一步地,三个所述子系统之间通过解耦隔离时,不共享每个所述子系统中的数据和元数据。进一步地,所述子系统之间还包括调用构建接口的交互方式。进一步地,所述子系统之间还包块模型元数据导入的交互方式。进一步地,所述子系统之间还包括数据同步的交互方式。为了实现上述目的,根据本申请的另一方面,提供了一种预计算OLAP系统实现方法。根据本申请的预计算OLAP系统实现方法包括:根据至少包括一个服务实例的资源组,将建模系统、构建系统和查询系统进行解耦部署;在所述建模系统中用于进行模型开发;在所述构建系统用于进行数据立方体构建;在所述查询系统中用于进行预设优先级查询;其中,在所述子系统之间网络隔离,且在所述子系统中通过文件通道进行通信。在本申请实施例中预计算OLAP系统及实现方法,采用新型的预计算OLAP系统的方式,通过分离出三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信,达到了在超大型企业中跨网络部署的目的,从而实现了子系统间可以网络隔离,同时保留文件上传下载通道,最大化安全隔离性和部署灵活性的技术效果,进而解决了资源率用率较低的技术问题。附图说明构成本申请的一部分的附图用来提供对本申请的进一步理解,使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:图1是根据相关技术的多租户集群拓扑示意图;图2是根据相关技术的服务实例和集群的交互示意图;图3是根据本申请实施例的基于预计算OLAP系统的多租户集群拓扑示意图;图4是根据本申请实施例的服务实例与Hadoop用户解绑示意图;图5是根据本申请实施例的配置资源组中的角色模式示意图;图6是根据本申请实施例的预计算OLAP系统解耦示意图;图7是根据本申请实施例的查询资源组支持不同优先级的使用场景示意图;图8是根据本申请实施例的预计算OLAP系统的实现方法流程示意图。具体实施方式为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。实施例一本申请中的预计算OLAP系统,在现有的OLAP系统多租户架构的基础上,解耦预计算OLAP系统中的三大子系统,分别包括:建模系统、预计算系统、查询系统。而且在每个子系统间不共享任何数据和元数据,只通过文件交换的形式沟通。如图3所示,本申请实施例中的预计算OLAP系统,至少包括:三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信。对于现有的如图1所示的预计算OLAP系统,在本申请实施例中采用解耦的方式将现有模型中的所述子系统进行解耦隔离部署,并且在子系统之间实现网络隔离,仅通过文件通道进行上传下载文件传输。具体地,在本申请的实施例中提供了解耦的预计算OLAP系统,子系统至少包括三个,其具体为:建模系统100、预计算系统200、查询系统300,在所述建模子系统、预计算子系统、查询子系统间相互并不不共享任何数据和元数据,只通过文件交换的形式沟通。从而达到在超大型企业中跨网络部署的目的,即子系统间可以网络隔离,只保留文件上传下载通道,最大化安全隔离性和部署灵活性。从以上的描述中,可以看出,本申请实现了如下技术效果:在本申请实施例中通过三个所述子系统,在所述子系统隔离部署达到在超大型企业中跨网络部署的目的,子系统间支持网络隔离,只保留文件上传下载通道,最大化安全隔离性和部署灵活性。作为本实施例中的优选,所述子系统包括:建模系统100、预计算系统200和查询系统300,所述建模系统100,用于进行模型开发和数据立方体设计;所述预计算系统200,用于根据所述模型对数据仓库中的数据进行预聚合并保存预计算数据立方体结果;所述查询系统300,用于对预计算数据立方体结果进行查询。优选地,三个所述子系统之间通过解耦隔离时,不共享每个所述子系统中的数据和元数据。具体地,所述建模系统100、预计算系统200、查询系统300三个子系统完全解耦,可以跨网络部署,子系统间不共享任何数据和元数据,只通过文件交换的形式沟通。优选地,在所述建模系统100中包括第一数据接口,用于进行数据文件的导入或导出,在所述预计算系统200中包括第二数据接口,用于进行所述预计算数据立方体结果的导出。所述第一数据接口用于进行数据文件的导入或导出。需要注意的是,在本申请中并不进行限定,只要能够满足导入或导出需求即可。所述第二数据接口用于进行所述预计算数据立方体结果的导出。需要注意的是,在本申请中并不进行限定,只要能够满足结果导出需求即可。具体地,所述建模本文档来自技高网
...

【技术保护点】
1.一种预计算OLAP系统,其特征在于,包括:至少三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信。

【技术特征摘要】
1.一种预计算OLAP系统,其特征在于,包括:至少三个子系统,三个所述子系统之间通过解耦隔离部署,且在三个所述子系统中通过文件通道进行通信。2.根据权利要求1所述的预计算OLAP系统,其特征在于,所述子系统包括:建模系统、预计算系统和查询系统,所述建模系统,用于进行模型开发和数据立方体设计;所述预计算系统,用于根据所述模型对数据仓库中的数据进行预聚合并保存预计算数据立方体结果;所述查询系统,用于对预计算数据立方体结果进行查询。3.根据权利要求2所述的预计算OLAP系统,其特征在于,所述建模系统中包括第一数据接口,用于进行数据文件的导入或导出,所述预计算系统中包括第二数据接口,用于进行所述预计算数据立方体结果的导出。4.根据权利要求1所述的预计算OLAP系统,其特征在于,每个所述子系统中按照不同角色配置不同的资源组,每个所述资源组中部署至少一个服务实例,所述资源组被配置为开发模式、构建模式或者查询模式的角色模式。5.根据权利要求1或4所...

【专利技术属性】
技术研发人员:颜磊李扬韩卿
申请(专利权)人:跬云上海信息科技有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1