一种数据处理的方法和装置制造方法及图纸

技术编号:27741957 阅读:17 留言:0更新日期:2021-03-19 13:35
本发明专利技术实施例提供了一种数据处理的方法和装置,所述方法包括:预置双层星形模型;其中,双层星形模型包括第一层星形模型和第二层星形模型,第一层星形模型为第二层星形模型提供数据支持,第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;在接收到基于一个或多个目标标签数据的用户分群请求时,根据一个多个目标标签数据,生成数据查询指令;按照数据查询指令,从第二层星形模型的一个或多个第二用户实体数据中,确定与一个或多个目标标签数据对应的一个或多个目标第二用户实体数据。通过本发明专利技术实施例,实现了基于双层星形模型的客户分群工具应用,降低了技术使用门槛,提高了数据需求的处理效率。

【技术实现步骤摘要】
一种数据处理的方法和装置
本专利技术涉及数据处理领域,特别是涉及一种数据处理的方法和装置。
技术介绍
在获取特定用户的用户信息时,通常需要从各个割裂的系统中进行查找,进而补充完整的用户信息,如从销售系统、售后系统等,耗费大量的成本处理数据,且各个系统的数据难以整合。在现有技术中,可以将各个系统的数据打通并集成到数据仓库中,减少了数据处理的成本,但对于从数仓中获取用户数据,需要采用人工开发脚本以在数仓执行的方式,但这种方式存在一定的技术门槛,对非技术背景的业务人员很不友好,且业务需求的新增和变化非常快,新的数据统计需求不断提出,使得客户群相关统计任务量堆积,影响需求反馈效率,造成了数仓系统运行成本增大。
技术实现思路
鉴于上述问题,提出了以便提供克服上述问题或者至少部分地解决上述问题的一种数据处理的方法和装置,包括:一种数据处理的方法,所述方法包括:预置双层星形模型;其中,所述双层星形模型包括第一层星形模型和第二层星形模型,所述第一层星形模型为所述第二层星形模型提供数据支持,所述第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;在接收到基于一个或多个目标标签数据的用户分群请求时,根据所述一个多个目标标签数据,生成数据查询指令;按照所述数据查询指令,从所述第二层星形模型的一个或多个第二用户实体数据中,确定与所述一个或多个目标标签数据对应的一个或多个目标第二用户实体数据。可选地,所述第一层星形模型与所述第二层星形模型之间设置有映射关系,所述第一层星形模型中数据通过所述映射关系同步映射为所述第二层星形模型中数据。可选地,所述第一层星形模型包括一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据,所述预置双层星形模型,包括:根据获取的一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据,构建所述第一层星形模型;按照所述映射关系,对所述第一层星形模型中一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据进行映射,得到一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;根据所述一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据,构建第二层星形模型。可选地,所述根据所述一个多个目标标签数据,生成数据查询指令,包括:按照所述映射关系,确定所述一个或多个目标标签数据映射的一个或多个目标业务数据的标识;根据所述一个或多个目标业务数据的标识和所述一个或多个目标标签数据,生成数据查询指令。可选地,还包括:获取标签配置数据;按照所述标签配置数据,对所述第一层星形模型的一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据进行标签加工处理,得到所述第二层星形模型的一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据。可选地,所述获取标签配置数据,包括:获取标签需求信息;根据所述标签需求信息,生成标签配置数据。可选地,每个第一用户实体数据对应所述第一层星形模型中一主表,每个维度的业务数据对应所述第一层星形模型中与主表关联的维度表;每个第二用户实体数据对应所述第二层星形模型中一主表,每个标签数据对应所述第二层星形模型中与主表关联的维度表。一种数据处理的装置,所述装置包括:双层星形模型预置模块,用于预置双层星形模型;其中,所述双层星形模型包括第一层星形模型和第二层星形模型,所述第一层星形模型为所述第二层星形模型提供数据支持,所述第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;数据查询指令生成模块,用于在接收到基于一个或多个目标标签数据的用户分群请求时,根据所述一个多个目标标签数据,生成数据查询指令;目标第二用户实体数据确定模块,用于按照所述数据查询指令,从所述第二层星形模型的一个或多个第二用户实体数据中,确定与所述一个或多个目标标签数据对应的一个或多个目标第二用户实体数据。一种电子设备,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的数据处理的方法。一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的数据处理的方法。本专利技术实施例具有以下优点:在本专利技术实施例中,通过预置双层星形模型,双层星形模型包括第一层星形模型和第二层星形模型,第一层星形模型为第二层星形模型提供数据支持,第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据,然后在接收到基于一个或多个目标标签数据的用户分群请求时,根据一个多个目标标签数据,生成数据查询指令,进而按照数据查询指令,从第二层星形模型的一个或多个第二用户实体数据中,确定与一个或多个目标标签数据对应的一个或多个目标第二用户实体数据,实现了基于双层星形模型的自定义客户分群工具应用,能够针对用户分群请求生成数据查询指令,进行确定标签数据对应的用户实体数据,降低了技术使用门槛,提高了数据需求的处理效率,具备灵活性、可扩展性、易用性。附图说明为了更清楚地说明本专利技术的技术方案,下面将对本专利技术的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。图1是本专利技术一实施例提供的一种星形模型示例的示意图;图2是本专利技术一实施例提供的一种自定义客户群架构示例的示意图;图3是本专利技术一实施例提供的一种数据处理的方法的步骤流程图;图4是本专利技术一实施例提供的另一种数据处理的方法的步骤流程图;图5是本专利技术一实施例提供的一种数据处理的装置的结构示意图。具体实施方式为使本专利技术的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本专利技术作进一步详细的说明。显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。在数据仓库中,数据模型可以围绕着星形模型和雪花模型来设计,由于星形模型在多维数据查询或分析中,可以通过最大限度地减少数据存储量以及联合较小的维表来改善查询性能,即在有限数据冗余情况下能够实现更高的效率,且支持动态扩展维表,则本专利技术采用了星形模型进行设计。星形模型是一种多维的数据关系,如图1,它可以由一个事实表和多个维表组成,多个维表可以与事实表直接连接,每个维表可以将一个维度作为主键,如维度可以为文字、时间等类型的数据,由全部维表的主键可以组合成事实表的主键。而事实表的非主键属性本文档来自技高网...

【技术保护点】
1.一种数据处理的方法,其特征在于,所述方法包括:/n预置双层星形模型;其中,所述双层星形模型包括第一层星形模型和第二层星形模型,所述第一层星形模型为所述第二层星形模型提供数据支持,所述第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;/n在接收到基于一个或多个目标标签数据的用户分群请求时,根据所述一个多个目标标签数据,生成数据查询指令;/n按照所述数据查询指令,从所述第二层星形模型的一个或多个第二用户实体数据中,确定与所述一个或多个目标标签数据对应的一个或多个目标第二用户实体数据。/n

【技术特征摘要】
1.一种数据处理的方法,其特征在于,所述方法包括:
预置双层星形模型;其中,所述双层星形模型包括第一层星形模型和第二层星形模型,所述第一层星形模型为所述第二层星形模型提供数据支持,所述第二层星形模型包括一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;
在接收到基于一个或多个目标标签数据的用户分群请求时,根据所述一个多个目标标签数据,生成数据查询指令;
按照所述数据查询指令,从所述第二层星形模型的一个或多个第二用户实体数据中,确定与所述一个或多个目标标签数据对应的一个或多个目标第二用户实体数据。


2.根据权利要求1所述的方法,其特征在于,所述第一层星形模型与所述第二层星形模型之间设置有映射关系,所述第一层星形模型中数据通过所述映射关系同步映射为所述第二层星形模型中数据。


3.根据权利要求2所述的方法,其特征在于,所述第一层星形模型包括一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据,所述预置双层星形模型,包括:
根据获取的一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据,构建所述第一层星形模型;
按照所述映射关系,对所述第一层星形模型中一个或多个第一用户实体数据及每个第一用户实体数据对应的一个或多个维度的业务数据进行映射,得到一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据;
根据所述一个或多个第二用户实体数据及每个第二用户实体数据对应的一个或多个标签数据,构建第二层星形模型。


4.根据权利要求3所述的方法,其特征在于,所述根据所述一个多个目标标签数据,生成数据查询指令,包括:
按照所述映射关系,确定所述一个或多个目标标签数据映射的一个或多个目标业务数据的标识;
根据所述一个或多个目标业务数据的标识和所述一个或多个目标标签数据,生成数据查询指令。


5.根据权利要求1或2或3或4所述的方法,其特征在于,还包括:<...

【专利技术属性】
技术研发人员:乌晓红
申请(专利权)人:广州橙行智动汽车科技有限公司广州小鹏汽车科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1