本发明专利技术提供了一种数据导入装置,包括:指导文件生成单元,用于在不同的业务要求下,生成相应的指导文件;数据读取单元,用于将待导入数据文件读取,形成数据对象;数据校验单元,用于以指导文件为依据,对形成的数据对象进行数据校验;合并处理单元,用于以字段标识为依据,对数据校验后数据对象进行合并和修改,得到Map对象;数据存储单元,用于通过和数据库的通信,将合并得到的Map对象转化成数据库中相应数据,并进行存储。本发明专利技术还提供了一种数据导入方法。通过本发明专利技术的技术方案,可以在现有的数据导入方式基础上,充分利用单对象类型完成多对象类型的数据导入,建立多对象类型参与的面向复杂对象类型数据导入的通用、统一导入思路。
【技术实现步骤摘要】
本专利技术涉及数据处理
,具体地,涉及一种数据导入装置和一种数据导入 方法。
技术介绍
企业资源计划系统(EnterpriseResourcePlanning,ERP)是指建立在信息技术 基础上,以系统化的管理思想,为企业决策层及员工提供决策运行手段的管理平台。 在ERP系统中存在多种类型单据,如销售订单、采购订单、出库单、入库单等,这些 单据信息存储在数据库中,并通过ERP系统展示给用户,由用户进行查看、编辑等操作。 企业在使用ERP系统之前,一般是已经存在这些单据信息,可能是以纸质文件形 式存储,或者是以计算机文件形式存储。计算机文件存储的情况下,以windows office软件 中的excel文件格式进行存储又是一种比较常见的方式。 数据导入就是把存储在文件系统中的外在数据,例如Excel中的业务数据,导入 到ERP系统中,从而提高单据录入效率及数据正确性。数据导入功能是ERP系统中必备的 功能,其具有较高的重要性和使用频率。 以导入Excel文件为例,现在普遍的导入方案是按照以下几个步骤进行: 1)由ERP系统提供一个数据模板,该数据模板包括了需要导入的格式信息,包括 字段名称、字段标识、字段类型描述等等,该模板一般也是Excel文件。 2)用户根据该模板,将需要导入的数据填写到对应的列中。 3)通过ERP系统的导入装置执行该文件的导入操作,将文件里面的数据存储到数 据库中。 这种做法的好处有以下几点: 1)由于ERP系统提供的数据模板与ERP系统中的数据格式具有一致性,以字段标 识为依据很容易构建起来数据文件(Excel文件)中的每一列与数据库中表结构的映射关 系,从而提_ 了导入的效率。 2)字段类型信息用于提示用户如何向数据文件中录入合法数据,可以减少导入失 败(导入时,ERP系统会对导入的数据进行合法性校验,不满足ERP系统要求的数据就会报 出导入失败)情况的发生,提高了导入的正确性。 3)只需要用户编辑Excel文件,然后在ERP系统中进行导入操作,即可完成Excel 文件到数据库的数据导入,原理简单,操作方便。 以上为专利《一种数据导入方法及系统》所阐述的方案及其主体流程,通过实施该 方案,可以方便的进行Excel文件的导入。 但是,该方案还有以下几点不足: 1)数据模板只能是数据文件到ERP系统的一对一映射,不够灵活。用户已有的数 据文件很可能与ERP系统提供的数据模板是不匹配的,这时候需要用户按照数据模板的格 式要求向里面填充数据。当用户已有数据文件到ERP系统的字段映射是多对一的情况,就 需要用户手动将每一条数据进行合并、修改,并将其填写到数据模板要求的字段中,这就增 加了用户的工作量,增加了出现错误的几率,也降低了数据模板的灵活程度。 如图4所示,此种情况下,用户需要将客户要求、送货地址及备注手工合并,并填 充到Excel表格中,才能正确导入到ERP系统中。 2)数据录入要求不够详细和全面。系统提供的指导文档中仅仅包含录入要求,这 远远不能描述清楚待导入的字段,如该字段的含义、数据类型、数据要求、数据范围、数据示 例等等。 3)只有一个固定的数据模板,灵活度较低。当用户希望改变数据模板时(如需要 增加或者减少导入的列时),很难通过简单的修改数据模板而实现。 因此,需要一种新的数据导入技术,可以在现有的数据导入方式基础上,充分利用 单对象类型完成多对象类型的数据导入,建立多对象类型参与的面向复杂对象类型数据导 入的通用、统一导入思路。
技术实现思路
本专利技术正是基于上述问题,提出了一种新的数据导入技术,可以在现有的数据导 入方式基础上,充分利用单对象类型完成多对象类型的数据导入,建立多对象类型参与的 面向复杂对象类型数据导入的通用、统一导入思路。 有鉴于此,本专利技术提出了一种数据导入装置,包括:指导文件生成单元,用于在不 同的业务要求下,生成相应的指导文件;数据读取单元,用于将待导入数据文件读取,形成 数据对象;数据校验单元,用于以指导文件为依据,对形成的数据对象进行数据校验;合并 处理单元,用于以字段标识为依据,对数据校验后数据对象进行合并和修改,得到Map对 象;数据存储单元,用于通过和数据库的通信,将合并得到的Map对象转化成数据库中相应 数据,并进行存储。在该技术方案中,数据字典和完全模板配合使用,增强了导入模板的灵 活性,用户可以自己组织所需的待导入数据;可以自动进行数据合并,减少用户的手动工 作,提高用户的导入效率及正确率。 在上述技术方案中,优选地,所述数据校验单元,具体包括:列必输性校验模块,用 于对数据对象进行列必输性校验,即:待导入数据中会有部分值是必输项,即如果没有导入 该值,则导入失败;列唯一性校验模块,用于对数据对象进行列唯一性校验,即:当同一字 段标识的列在待导入数据文件中出现了多次时,需要判断该数据所在列是否是唯一列,如 果是唯一列,则不能够出现多次,需要将错误信息提示用户;数据正确性校验模块,用于对 数据对象进行数据正确性校验,即:以实际业务及数据库要求为准,对数据类型、数值范围 进行校验。在该技术方案中,通过数据字典的使用,待导入数据的信息更加透明,方便用户 组织正确的待导入数据文件,减少出错的可能。 在上述技术方案中,优选地,所述指导文件生成单元生成的指导文件,是指导用户 进行导入的手册型文件,包括两个页签即数据字典和安全模板。 在上述技术方案中,优选地,所述数据读取单元将待导入的文件读取,形成数据对 象的操作,具体包括:将待导入数据文件中每一个单元格的数据读取,将单元格所在行号、 列号、值,以及该单元格所在列的字段标识、字段名称信息,建立数据对象;所述待导入数据 文件的数据页签,包括字段名称、字段标识和待导入数据行。 在上述技术方案中,优选地,所述合并处理单元数据校验后数据对象进行合并的 操作,具体包括:对数据校验后数据对象中相同字段标识的数据、以及不是唯一列且字段标 识相同的列进行合并;和/或,所述合并处理单元数据校验后数据对象进行修改的操作,具 体包括:用户在完全模板基础上,参考数据字典自行修改,删除不需要导入的列,增加需要 合并的列。 根据本专利技术的又一个方面,还提出了一种数据导入方法,包括:步骤202:在不同 的业务要求下,生成相应的指导文件;步骤204 :将待导入数据文件读取,形成数据对象;步 骤206 :以指导文件为依据,对形成的数据对象进行数据校验;步骤208 :以字段标识为依 据,对数据校验后数据对象进行合并和修改,得到Map对象;步骤210 :通过和数据库的通 信,将合并得到的Map对象转化成数据库中相应数据,并进行存储。在该技术方案中,数据 字典和完全模板配合使用,增强了导入模板的灵活性,用户可以自己组织所需的待导入数 据;可以自动进行数据合并,减少用户的手动工作,提高用户的导入效率及正确率。 在上述技术方案中,优选地,所述步骤206,具体包括:步骤302 :对数据对象进行 列必输性校验,即:待导入数据中会有部分值是必输项,即如果没有导入该值,则导入失败; 步骤30本文档来自技高网...
【技术保护点】
一种数据导入装置,其特征在于,包括:指导文件生成单元,用于在不同的业务要求下,生成相应的指导文件;数据读取单元,用于将待导入数据文件读取,形成数据对象;数据校验单元,用于以指导文件为依据,对形成的数据对象进行数据校验;合并处理单元,用于以字段标识为依据,对数据校验后的数据对象进行合并和修改,得到Map对象;数据存储单元,用于通过和数据库的通信,将合并得到的Map对象转化成数据库中相应数据,并进行存储。
【技术特征摘要】
1. 一种数据导入装置,其特征在于,包括: 指导文件生成单元,用于在不同的业务要求下,生成相应的指导文件; 数据读取单元,用于将待导入数据文件读取,形成数据对象; 数据校验单元,用于以指导文件为依据,对形成的数据对象进行数据校验; 合并处理单元,用于以字段标识为依据,对数据校验后的数据对象进行合并和修改,得 到Map对象; 数据存储单元,用于通过和数据库的通信,将合并得到的Map对象转化成数据库中相 应数据,并进行存储。2. 根据权利要求1所述的数据导入装置,其特征在于,所述数据校验单元,具体包括: 列必输性校验模块,用于对数据对象进行列必输性校验,即:待导入数据中会有部分值 是必输项,即如果没有导入该值,则导入失败; 列唯一性校验模块,用于对数据对象进行列唯一性校验,即:当同一字段标识的列在待 导入数据文件中出现了多次时,需要判断该数据所在列是否是唯一列,如果是唯一列,则不 能够出现多次,需要将错误信息提示用户; 数据正确性校验模块,用于对数据对象进行数据正确性校验,即:以实际业务及数据库 要求为准,对数据类型、数值范围进行校验。3. 根据权利要求1或2所述的数据导入装置,其特征在于,所述指导文件生成单元生成 的指导文件,是指导用户进行导入的手册型文件,包括两个页签即数据字典和安全模板。4. 根据权利要求1或2所述的数据导入装置,其特征在于,所述数据读取单元将待导入 的文件读取,形成数据对象的操作,具体包括: 将待导入数据文件中每一个单元格的数据读取,将单元格所在行号、列号、值,以及该 单元格所在列的字段标识、字段名称信息,建立数据对象;所述待导入数据文件的数据页 签,包括字段名称、字段标识和待导入数据行。5. 根据权利要求1或2所述的数据导入装置,其特征在于,所述合并处理单元对数据校 验后的数据对象进行合并的操作,具体包括: 对数据校验后数据对象中相同字段标识的数据、以及不是唯一列且字段标识相同的列 进行合并; 和/或, 所述合并处理单元对数据校验后的数据对象进行修改的操作,具体包括: 用户在完全模板基础上,参考数据字典自行修改,删除不需要导...
【专利技术属性】
技术研发人员:纪录,
申请(专利权)人:用友软件股份有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。