System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 基于大数据分析的数据处理方法、装置、设备及存储介质制造方法及图纸_技高网

基于大数据分析的数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:43910283 阅读:14 留言:0更新日期:2025-01-03 13:18
本申请属于数据处理领域与金融科技领域,涉及一种基于大数据分析的数据处理方法,包括:基于数据抓取策略获取初始商机数据;基于录入标准策略对初始商机数据进行数据筛选处理得到第一商机数据;对第一商机数据进行数据预处理得到第二商机数据;获取指定密钥;基于算法筛选规则从预存储的多种加密算法中筛选出指定加密算法;基于指定密钥与指定加密算法对第二商机数据进行加密处理得到目标商机数据;将目标商机数据上传至预设的指定存储介质。本申请还提供一种基于大数据分析的数据处理装置、计算机设备及存储介质。此外,本申请还涉及区块链技术,目标商机数据可存储于区块链中。本申请解决了商机数据的泄露风险,保证了商机数据的传输安全性。

【技术实现步骤摘要】

本申请涉及数据处理与金融科技领域,尤其涉及基于大数据分析的数据处理方法、装置、计算机设备及存储介质。


技术介绍

1、在快速发展的金融行业中,金融业务系统作为支撑金融机构日常运营与业务拓展的核心平台,其高效性与安全性日益成为行业关注的焦点。其中,商机管理与跟踪作为金融业务系统不可或缺的一部分,对于金融机构识别潜在市场机会、精准营销、提升客户满意度及实现业务增长具有至关重要的作用。

2、传统上,商机管理与跟踪依赖于人工记录、分析以及后续跟进,这种方式不仅效率低下,且难以全面捕捉市场动态和客户需求变化。随着信息技术的飞速发展,特别是大数据、云计算、人工智能等技术的广泛应用,金融业务系统开始引入先进的商机管理解决方案,通过自动化、智能化的手段,实现对商机的精准识别、高效分配、动态跟踪及效果评估,极大提升了业务团队的工作效率和业务产出。

3、然而,商机管理解决方案在处理过程中会涉及大量敏感客户数据,现有技术中,对于商机数据的处理普遍采用直接上传至服务器或云存储介质的方式,使得商机数据在传输和存储过程中极易遭受未授权访问、篡改或泄露的风险,无法保证商机数据的传输安全性。


技术实现思路

1、本申请实施例的目的在于提出一种基于大数据分析的数据处理方法、装置、计算机设备及存储介质,以解决现有的对于商机数据的处理普遍采用直接上传至服务器或云存储介质的方式,使得商机数据在传输和存储过程中极易遭受未授权访问、篡改或泄露的风险,无法保证商机数据的传输安全性的技术问题。

2、为了解决上述技术问题,本申请实施例提供一种基于大数据分析的数据处理方法,采用了如下所述的技术方案:

3、基于预设的数据抓取策略获取初始商机数据;其中,所述初始商机数据至少包括客户数据、销售数据以及市场数据;

4、基于预设的录入标准策略对初始商机数据进行数据筛选处理,得到对应的第一商机数据;

5、对所述第一商机数据进行数据预处理,得到对应的第二商机数据;

6、获取预设的指定密钥;其中,所述指定密钥的长度大于预设的长度阈值;

7、基于预设的算法筛选规则从预存储的多种加密算法中筛选出指定加密算法;

8、基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据;

9、将所述目标商机数据上传至预设的指定存储介质。

10、进一步的,所述基于预设的算法筛选规则从预存储的多种加密算法中筛选出指定加密算法的步骤,具体包括:

11、调用预设的多种加密算法;

12、从所有所述加密算法中筛选出发表年份大于预设年份阈值的第一加密算法;

13、获取所有所述第一加密算法的安全效果值;

14、从所有所述第一加密算法中筛选出安全效果值大于预设的效果阈值的第二加密算法;

15、判断所述第二加密算法的数量是否为多个;

16、若是,基于预设的算法测试数据对所有所述第二加密算法进行测试处理,得到各所述第二加密算法的处理效率;

17、从所有所述第二加密算法中筛选出处理效率最高的第三加密算法;

18、将所述第三加密算法作为所述指定加密算法。

19、进一步的,所述对所述第一商机数据进行数据预处理,得到对应的第二商机数据的步骤,具体包括:

20、对所述第一商机数据进行重复数据去除处理,得到对应的第一数据;

21、对所述第一数据进行缺失值处理,得到对应的第二数据;

22、对所述第二数据进行异常值处理,得到对应的第三数据;

23、对所述第三数据进行格式化处理,得到对应的第四数据;

24、将所述第四数据作为所述第二商机数据。

25、进一步的,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之后,还包括:

26、调用预先训练好的商机评估模型;

27、将所述目标商机数据转化为与所述商机评估模型匹配的目标数据格式,得到对应的指定商机数据;

28、基于所述商机评估模型对所述指定商机数据进行评估处理,得到对应的商机评估结果;

29、将所述商机评估结果发送给相应的业务人员。

30、进一步的,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之后,还包括:

31、从所述目标商机数据中获取与用户相关的用户特征数据;

32、基于所述用户特征数据生成用户在预设特征维度下的画像标签;

33、将所有所述画像标签整合至预设的数据结构中,得到与所述用户对应的用户画像;

34、对所述用户画像进行存储处理。

35、进一步的,所述对所述用户画像进行存储处理的步骤,具体包括:

36、确定与所述用户画像对应的目标存储策略;

37、调用预设的区块链网络;

38、在所述区块链网络中确定与画像类型对应的目标存储区块;

39、基于所述目标存储策略,将所述用户画像存储至所述目标存储区块内。

40、进一步的,在所述将所述目标商机数据上传至预设的指定存储介质的步骤之后,还包括:

41、判断是否接收到指定用户触发的数据访问请求;其中,所述数据访问请求携带所述指定用户的用户信息与查询信息;

42、若是,从所述数据访问请求中提取出所述用户信息与所述查询信息;

43、基于预设的权限管理模型获取与所述用户信息对应的指定权限等级;

44、从预设的业务操作权限表中查询出与商机访问操作对应的指定权限等级区间;

45、判断所述指定权限等级是否处于所述指定权限等级区间内;

46、若是,从所述指定存储介质中获取与所述查询信息对应的第三商机数据;

47、将所述第三商机数据返回给所述指定用户。

48、为了解决上述技术问题,本申请实施例还提供一种基于大数据分析的数据处理装置,采用了如下所述的技术方案:

49、第一获取模块,用于基于预设的数据抓取策略获取初始商机数据;其中,所述初始商机数据至少包括客户数据、销售数据以及市场数据;

50、第一筛选模块,用于基于预设的录入标准策略对初始商机数据进行数据筛选处理,得到对应的第一商机数据;

51、预处理模块,用于对所述第一商机数据进行数据预处理,得到对应的第二商机数据;

52、第二获取模块,用于获取预设的指定密钥;其中,所述指定密钥的长度大于预设的长度阈值;

53、第二筛选模块,用于基于预设的算法筛选规则从预存储的多种加密算法中筛选出指定加密算法;

54、加密模块,用于基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据;

5本文档来自技高网...

【技术保护点】

1.一种基于大数据分析的数据处理方法,其特征在于,包括下述步骤:

2.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,所述基于预设的算法筛选规则从预存储的多种加密算法中筛选出指定加密算法的步骤,具体包括:

3.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,所述对所述第一商机数据进行数据预处理,得到对应的第二商机数据的步骤,具体包括:

4.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之后,还包括:

5.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之后,还包括:

6.根据权利要求5所述的基于大数据分析的数据处理方法,其特征在于,所述对所述用户画像进行存储处理的步骤,具体包括:

7.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,在所述将所述目标商机数据上传至预设的指定存储介质的步骤之后,还包括:

8.一种基于大数据分析的数据处理装置,其特征在于,包括:

9.一种计算机设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机可读指令,所述处理器执行所述计算机可读指令时实现如权利要求1至7中任一项所述的基于大数据分析的数据处理方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机可读指令,所述计算机可读指令被处理器执行时实现如权利要求1至7中任一项所述的基于大数据分析的数据处理方法的步骤。

...

【技术特征摘要】

1.一种基于大数据分析的数据处理方法,其特征在于,包括下述步骤:

2.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,所述基于预设的算法筛选规则从预存储的多种加密算法中筛选出指定加密算法的步骤,具体包括:

3.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,所述对所述第一商机数据进行数据预处理,得到对应的第二商机数据的步骤,具体包括:

4.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之后,还包括:

5.根据权利要求1所述的基于大数据分析的数据处理方法,其特征在于,在所述基于所述指定密钥与所述指定加密算法对所述第二商机数据进行加密处理,得到加密后的目标商机数据的步骤之...

【专利技术属性】
技术研发人员:黄章力
申请(专利权)人:平安银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1