用于预计算系统中查询引擎的动态路由方法及装置制造方法及图纸

本申请公开了一种用于预计算系统中查询引擎的动态路由方法及装置。该方法包括预先获取预计算系统中预设维度组合下的立方体数据；在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理；以及在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理。本申请解决了预计算查询系统的查询响应速度并不理想的技术问题。通过本申请，可以实现亚秒级高性能的查询响应。同时作为结果可以支撑更高的高并发以满足业务需求，同时保证查询系统的稳定性。

Dynamic Routing Method and Device for Query Engine in Predictive Computing System

【技术实现步骤摘要】
用于预计算系统中查询引擎的动态路由方法及装置
本申请涉及计算机、数据分析领域，具体而言，涉及一种用于预计算系统中查询引擎的动态路由方法及装置。
技术介绍
预计算查询系统，能够利用空余的计算、存储资源提前完成部分的计算，并且将这些计算结果保存在可持久化的存储介质中，当用户查询到来的时候，只需要进行少量的数据再加工便可以回答用户的查询。专利技术人发现，在分布式计算环境中，预计算查询系统的查询响应速度仍然不理想。进一步，对预计算结果的利用也较差。针对相关技术中预计算查询系统的查询响应速度并不理想的问题，目前尚未提出有效的解决方案。
技术实现思路
本申请的主要目的在于提供一种用于预计算系统中查询引擎的动态路由方法及装置，以解决预计算查询系统的查询响应速度并不理想的问题。为了实现上述目的，根据本申请的一个方面，提供了一种用于预计算系统中查询引擎的动态路由方法。根据本申请的用于预计算系统中查询引擎的动态路由方法包括：预先获取预计算系统中预设维度组合下的立方体数据；在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理；以及在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理。进一步地，在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度时还包括：评估执行所述查询请求的代价结果；当按照预期选中的所述预设维度组合下的立方体数据相同和/或重叠时，根据所述代价结果调整选用所述第一分布式查询引擎或所述第二分布式查询引擎。进一步地，在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理包括：在所述预设维度组合下的立方体数据的聚合程度为高时，在Scatter-and-gather第一分布式查询引擎对所述查询请求执行查询处理。进一步地，在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理包括：在所述预设维度组合下的立方体数据的聚合程度为低时，切换至total-exchange第二分布式查询引擎对所述查询请求执行查询处理。进一步地，在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理之后还包括：在再次接收到查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度由低变为高时，切换至第一分布式查询引擎对所述查询请求执行查询处理。为了实现上述目的，根据本申请的另一方面，提供了一种用于预计算系统中查询引擎的动态路由装置。根据本申请的用于预计算系统中查询引擎的动态路由装置包括：预存模块，用于预先获取预计算系统中预设维度组合下的立方体数据；判断模块，用于在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；第一执行模块，用于在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理；以及第二执行模块，用于在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理。进一步地，装置还包括：代价规则模块，所述代价规则模块包括：评估单元，用于评估执行所述查询请求的代价结果；调整单元，用于当按照预期选中的所述预设维度组合下的立方体数据相同和/或重叠时，根据所述代价结果调整选用所述第一分布式查询引擎或所述第二分布式查询引擎。进一步地，所述第一执行模块包括：第一引擎单元，所述第一引擎单元，用于在所述预设维度组合下的立方体数据的聚合程度为高时，在Scatter-and-gather第一分布式查询引擎对所述查询请求执行查询处理。进一步地，所述第二执行模块包括：第二引擎单元，所述第二引擎单元，用于在所述预设维度组合下的立方体数据的聚合程度为低时，切换至total-exchange第二分布式查询引擎对所述查询请求执行查询处理。进一步地，装置还包括：动态调节模块，所述动态调节模块包括：再判断单元，在再次接收到查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；调整执行单元，用于在所述预设维度组合下的立方体数据的聚合程度由低变为高时，切换至第一分布式查询引擎对所述查询请求执行查询处理。在本申请实施例中的用于预计算系统中查询引擎的动态路由方法及装置，采用预先获取预计算系统中预设维度组合下的立方体数据的方式，通过在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度，达到了在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理和在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理的目的，从而实现了稳定利用预计算结果并快速响应客户查询请求的技术效果，进而解决了预计算查询系统的查询响应速度并不理想的技术问题。附图说明构成本申请的一部分的附图用来提供对本申请的进一步理解，使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：图1是根据本申请第一实施例的用于预计算系统中查询引擎的动态路由方法流程示意图；图2是根据本申请第二实施例的用于预计算系统中查询引擎的动态路由方法流程示意图；图3是根据本申请第三实施例的用于预计算系统中查询引擎的动态路由方法流程示意图；图4是根据本申请第四实施例的用于预计算系统中查询引擎的动态路由方法流程示意图；图5是根据本申请第五实施例的用于预计算系统中查询引擎的动态路由方法流程示意图；图6是根据本申请第一实施例的用于预计算系统中查询引擎的动态路由装置结构示意图；图7是根据本申请第二实施例的用于预计算系统中查询引擎的动态路由装置结构示意图；图8是根据本申请第三实施例的用于预计算系统中查询引擎的动态路由装置结构示意图；图9是根据本申请第四实施例的用于预计算系统中查询引擎的动态路由装置结构示意图；图10是根据本申请第五实施例的用于预计算系统中查询引擎的动态路由装置结构示意图；图11是本申请中的实现原理示意图；图12是Scatter-and-gather模型原理示意图；图13是根据total-exchange模型原理示意图。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品本文档来自技高网...

【技术保护点】
1.一种用于预计算系统中查询引擎的动态路由方法，其特征在于，包括：预先获取预计算系统中预设维度组合下的立方体数据；在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理；以及在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理。

【技术特征摘要】
1.一种用于预计算系统中查询引擎的动态路由方法，其特征在于，包括：预先获取预计算系统中预设维度组合下的立方体数据；在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理；以及在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理。2.根据权利要求1所述的动态路由方法，其特征在于，在接收查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度时还包括：评估执行所述查询请求的代价结果；当按照预期选中的所述预设维度组合下的立方体数据相同和/或重叠时，根据所述代价结果调整选用所述第一分布式查询引擎或所述第二分布式查询引擎。3.根据权利要求1所述的动态路由方法，其特征在于，在所述预设维度组合下的立方体数据的聚合程度为高时，在第一分布式查询引擎对所述查询请求执行查询处理包括：在所述预设维度组合下的立方体数据的聚合程度为高时，在Scatter-and-gather第一分布式查询引擎对所述查询请求执行查询处理。4.根据权利要求1所述的动态路由方法，其特征在于，在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理包括：在所述预设维度组合下的立方体数据的聚合程度为低时，切换至total-exchange第二分布式查询引擎对所述查询请求执行查询处理。5.根据权利要求1所述的动态路由方法，其特征在于，在所述预设维度组合下的立方体数据的聚合程度为低时，切换至第二分布式查询引擎对所述查询请求执行查询处理之后还包括：在再次接收到查询请求后，判断按照预期选中的所述预设维度组合下的立方体数据的聚合程度；在所述预设维度组合下的立方体数据的聚合程度由低变为高时，切换至第一分...

【专利技术属性】
技术研发人员：马洪宾，李扬，韩卿，
申请(专利权)人：跬云上海信息科技有限公司，
类型：发明
国别省市：上海,31