一种数据迁移方法及相关装置制造方法及图纸

本申请公开了一种数据迁移方法，包括：通过控制系统接收到输入的目标数据的数据源信息；根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务；执行所述数据迁移任务，以便将所述目标数据迁移至目标数据仓库。通过接收到目标数据的数据源信息，并采用任务模板构建出对应的数据迁移任务并执行，实现了针对不同的数据源信息进行数据迁移，而不是采用固定的插件进行迁移，提高了数据迁移的灵活性。本申请还公开了一种数据迁移装置、服务器以及计算机可读存储介质，具有以上有益效果。上有益效果。上有益效果。

【技术实现步骤摘要】
一种数据迁移方法及相关装置


[0001]本申请涉及数据存储
，特别涉及一种数据迁移方法、数据迁移装置、服务器以及计算机可读存储介质。

技术介绍

[0002]随着信息技术的不断发展，出现了大数据技术。在大数据应用领域中，企业过往经营的业务数据对企业可以起到重要的指导作用。基于大量历史数据的模拟训练，可以较为精准地预测企业未来的运营状态，这带给企业的利益无疑是巨大的。在为客户提供类似数据分析服务时，首先需要做的便是有效将客户数据迁移至数据仓库。
[0003]相关技术中，通常是基于ERP(Enterprise Resource Planning，企业资源计划系统)内置的计划任务调度完成的，即在ERP内部通过插件实现多种取数逻辑，并将插件交由计划任务调度起来，以取得业务环境中的目标数据，然后由计划任务启动发送器，将这些目标数据通过网络传输至数据仓库。ERP客户端的数据则在数据产生时直接通过网络发送至数据仓库。这样便完成了客户环境下数据往数据仓库的迁移。但是，相关技术中由于采用ERP系统内部的插件迁移方法，导致迁移过程灵活性较低，在迁移过程中出现了效率低下，可靠性较低，性能低下等问题。
[0004]因此，如何提高数据在不同的数据仓库之间进行迁移的灵活性是本领域技术人员关注的重点问题。

技术实现思路

[0005]本申请的目的是提供一种数据迁移方法、数据迁移装置、服务器以及计算机可读存储介质，通过接收到目标数据的数据源信息，并采用任务模板构建出对应的数据迁移任务并执行，实现了针对不同的数据源信息进行数据迁移，而不是采用固定的插件进行迁移，提高了数据迁移的灵活性。
[0006]为解决上述技术问题，本申请提供一种数据迁移方法，包括：
[0007]通过控制系统接收到输入的目标数据的数据源信息；
[0008]根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务；
[0009]执行所述数据迁移任务，以便将所述目标数据迁移至目标数据仓库。
[0010]可选的，通过控制系统接收到输入的目标数据的数据源信息，包括：
[0011]通过所述控制系统的用户界面接收到输入的所述目标数据的所述数据源信息。
[0012]可选的，还包括：
[0013]根据所述数据源信息构建对应的任务模板。
[0014]可选的，根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务，包括：
[0015]根据所述数据源信息确定对应的目标数据；
[0016]对所述目标数据进行扫描得到对应的关键值；
[0017]采用所述任务模板对所述数据源信息和所述关键值进行任务构建处理，得到所述数据迁移任务。
[0018]可选的，采用所述任务模板对所述数据源信息和所述关键值进行任务构建处理，得到所述数据迁移任务，包括：
[0019]将所述数据源信息和所述关键值进行分割，得到多个数据块对应的数据源信息和关键值信息；
[0020]采用所述任务模板分别对所述多个数据块对应的数据源信息和关键值信息进行任务构建处理，得到多个所述数据迁移任务。
[0021]可选的，还包括：
[0022]当所述目标数据迁移至所述目标数据仓库之后，将记录的日志数据保存至所述目标数据仓库中；
[0023]对所述日志数据进行分析得到对应的配置信息，以便将所述配置信息作为所述任务构建处理的配置参数。
[0024]可选的，还包括：
[0025]当执行所述数据迁移任务出现数据倾斜情况时，从未执行的数据迁移任务中筛选出数据量大于预设值的大数据迁移任务；
[0026]将所述大数据迁移任务拆分为多个子任务，并执行所述多个子任务。
[0027]本申请还提供一种数据迁移装置，包括：
[0028]数据源信息接收模块，用于通过控制系统接收到输入的目标数据的数据源信息；
[0029]任务构建模块，用于根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务；
[0030]任务执行模块，用于执行所述数据迁移任务，以便将所述目标数据迁移至目标数据仓库。
[0031]本申请还提供一种服务器，包括：
[0032]存储器，用于存储计算机程序；
[0033]处理器，用于执行所述计算机程序时实现如上所述的数据迁移方法的步骤。
[0034]本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的数据迁移方法的步骤。
[0035]本申请所提供的一种数据迁移方法，包括：通过控制系统接收到输入的目标数据的数据源信息；根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务；执行所述数据迁移任务，以便将所述目标数据迁移至目标数据仓库。
[0036]通过控制系统接收到输入的目标数据的数据源信息，然后根据预设的任务模板对该数据源信息进行任务构建处理，得到数据迁移任务，最后执行该数据迁移任务，实现将目标数据迁移至目标数据仓库，可见，该数据迁移任务是随着不同的数据源信息发生不同的改变，而不是如现有技术中采用的固化的插件进行迁移，提高了数据迁移的灵活性，可以根据不同的情况以低门槛生成不同的数据迁移任务，应对了多种不同的迁移情况。
[0037]本申请还提供一种数据迁移装置、服务器以及计算机可读存储介质，具有以上有益效果，在此不做赘述。
附图说明
[0038]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
[0039]图1为本申请实施例所提供的一种数据迁移方法的流程图；
[0040]图2为本申请实施例所提供的一种数据迁移装置的结构示意图；
[0041]图3为本申请实施例所提供的另一种数据迁移装置的结构示意图；
[0042]图4为本申请实施例所提供的一种服务器的结构示意图。
具体实施方式
[0043]本申请的核心是提供一种数据迁移方法、数据迁移装置、服务器以及计算机可读存储介质，通过接收到目标数据的数据源信息，并采用任务模板构建出对应的数据迁移任务并执行，实现了针对不同的数据源信息进行数据迁移，而不是采用固定的插件进行迁移，提高了数据迁移的灵活性。
[0044]为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0045]相关技术中，通常是基于ERP内置的计划任务调度完成的，即在ERP内本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据迁移方法，其特征在于，包括：通过控制系统接收到输入的目标数据的数据源信息；根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务；执行所述数据迁移任务，以便将所述目标数据迁移至目标数据仓库。2.根据权利要求1所述的数据迁移方法，其特征在于，通过控制系统接收到输入的目标数据的数据源信息，包括：通过所述控制系统的用户界面接收到输入的所述目标数据的所述数据源信息。3.根据权利要求1所述的数据迁移方法，其特征在于，还包括：根据所述数据源信息构建对应的任务模板。4.根据权利要求1所述的数据迁移方法，其特征在于，根据预设的任务模板对所述数据源信息进行任务构建处理，得到数据迁移任务，包括：根据所述数据源信息确定对应的目标数据；对所述目标数据进行扫描得到对应的关键值；采用所述任务模板对所述数据源信息和所述关键值进行任务构建处理，得到所述数据迁移任务。5.根据权利要求2所述的数据迁移方法，其特征在于，采用所述任务模板对所述数据源信息和所述关键值进行任务构建处理，得到所述数据迁移任务，包括：将所述数据源信息和所述关键值进行分割，得到多个数据块对应的数据源信息和关键值信息；采用所述任务模板分别对所述多个数据块对应的数据源信息和关键值信息进行任务构建处理，得到多个所述数据...

【专利技术属性】
技术研发人员：黄超铭，
申请(专利权)人：金蝶云科技有限公司，
类型：发明
国别省市：