本申请提供一种用户行为预测方法、装置、计算机设备及可读存储介质，获取用户的面部信息，根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息；获取用户的语音信息，根据所述语音信息对所述用户的未来行为进行预测得到第二预测信息；根据所述第一预测信息和所述第二预测信息对所述用户的未来行为进行预测得到第三预测信息。本申请在保证对用户未来行为预测的准确度的同时，还无需工作人员介入，因此避免了工作人员因过度注意用户的心理活动及分析，而降低了业务办理效率和准确度的情况发生。度的情况发生。度的情况发生。
【技术实现步骤摘要】
用户行为预测方法、装置、计算机设备及可读存储介质
[0001]本申请涉及人工智能
，尤其涉及一种用户行为预测方法、装置、计算机设备及可读存储介质。
技术介绍
[0002]业内的信贷审核和金融反欺诈手段，主要通过客户的征信、流水、资产、负债、工作状况、上网数据和购物行为等来识别欺诈客户。但是在很多情况下，银行坏账的出现是由于借款人的主观因素引起的，比如道德水平和情感状态等。
[0003]然而，专利技术人发现，当前的业内的信贷审核和金融反欺诈手段，通常依赖于工作人员的工作经验，对用户的未来行为进行预测，不仅识别准确度低下，还会因工作人员过度注意用户的心理活动及分析而降低了业务办理效率和准确度。
技术实现思路
[0004]本申请提供一种用户行为预测方法、装置、计算机设备及可读存储介质，用以解决现有技术存在的识别准确度低下，以及因工作人员过度注意用户的心理活动及分析而降低了业务办理效率和准确度的问题。
[0005]第一方面，本申请提供一种用户行为预测方法，包括：
[0006]获取用户的面部信息，根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息；其中，所述第一预测信息基于用户面部活动表征了用户未来的行为活动和行为概率；
[0007]获取用户的语音信息，根据所述语音信息对所述用户的未来行为进行预测得到第二预测信息；其中，所述第二预测信息基于用户语音表征了用户未来的行为活动和行为概率；
[0008]根据所述第一预测信息和所述第二预测信息对所述用户的未来行为进行预测得到第三预测信息；其中，所述第三预测信息基于用户面部活动及语音表征了用户未来的行为活动和行为概率。
[0009]上述方案中，所述获取用户的面部信息之前，所述方法还包括：
[0010]接收对用户进行拍摄得到的拍摄录像；
[0011]提取所述拍摄录像中的视频得到视频文件，提取所述视频文件中每个视频帧中的用户面部，并对所述用户面部进行对齐处理得到至少一个具有用户面部的面部图像，汇总所述视频文件中所有视频帧的面部图像得到用户的面部信息；
[0012]提取所述拍摄录像中的音频得到所述用户的语音信息。
[0013]上述方案中，所述根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息，包括：
[0014]从所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征；其中，所述面部动作单元特征描述了用户面部肌肉的表观动作；所述面部纹理特征表征了所述用
户面部的纹理形态；所述面部几何特征反映了所述用户面部器官的位置和形状；
[0015]对所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征进行拼接处理得到面部特征；
[0016]通过预置的第一模型根据所述面部特征对用户的心理活动进行预测得到第一心理信息，及根据所述第一心理信息对所述用户的未来行为进行预测得到所述第一预测信息。
[0017]上述方案中，所述从所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征，包括：
[0018]对所述面部信息中的一个面部图像进行灰度处理得到灰度图像，识别所述灰度图像中用户面部肌肉的运动产生的表观动作，对所述表观动作进行向量化处理得到图像动作单元特征，拼接所述面部信息中所有面部图像的图像动作单元特征得到所述面部动作单元特征；
[0019]提取所述面部信息中的一个面部图像，识别所述面部图像中属于用户面部上的纹理的图像纹理特征，拼接所述面部信息中所有面部图像的图像纹理特征得到所述面部纹理特征；
[0020]提取所述面部信息中的一个面部图像，识别所述面部图像中的至少一个面部关键点，根据所述面部关键点识别所述用户面部器官的位置和形状，并得到表征所述位置和形状的图像几何特征，拼接所述面部信息中所有面部图像的图像几何特征得到所述面部几何特征。
[0021]上述方案中，所述根据所述语音信息对所述用户的未来行为进行预测得到第二预测信息，包括：
[0022]识别所述语音信息中属于所述用户的声纹得到用户语音信息，根据所述用户语音信息生成用户语音特征；其中，所述用户语音特征反映了所述用户语音信息的声音属性；
[0023]通过预置的第二模型根据所述用户语音特征对用户的心理活动进行预测得到第二心理信息，及根据所述第二心理信息对所述用户的未来行为进行预测得到所述第二预测信息。
[0024]上述方案中，所述识别所述语音信息中属于所述用户的声纹得到用户语音信息，根据所述用户语音信息生成用户语音特征，包括：
[0025]识别所述语音信息中无声的音频帧和/或仅具有背景音的音频帧，并将识别到的音频帧，以及所述语音信息中位于首位和末位的音频帧作为变更点；
[0026]将所述语音信息中处于相邻的两个变更点之间的音频帧作为语音帧；
[0027]对所述语音帧进行聚类运算得到聚类结果，将所述聚类结果中类别为所述用户的语音帧设为用户帧，拼接所述用户帧得到所述用户语音信息；
[0028]识别所述用户语音信息中每个用户帧的帧声纹特征，拼接所有用户帧的帧声纹特征得到用户声纹特征；
[0029]通过预置的全局函数计算所述用户声纹特征得到用户语音特征；其中，所述用户语音特征记载了所述用户声纹特征中所有特征值的最大值、最小值、均值和标准差，用以表征所述用户语音信息的声音属性。
[0030]上述方案中，所述根据所述第一预测信息和所述第二预测信息对所述用户的未来
行为进行预测得到第三预测信息，包括：
[0031]调用预置的第三模型根据所述第一预测信息和所述第二预测信息对所述用户进行分类得到分类结果，及根据所述分类结果预测所述用户的未来行为并得到所述第三预测信息。
[0032]第二方面，本申请提供一种用户行为预测装置，包括：
[0033]第一预测模块，用于获取用户的面部信息，根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息；其中，所述第一预测信息基于用户面部活动表征了用户未来的行为活动和行为概率；
[0034]第二预测模块，用于获取用户的语音信息，根据所述语音信息对所述用户的未来行为进行预测得到第二预测信息；其中，所述第二预测信息基于用户语音表征了用户未来的行为活动和行为概率；
[0035]第三预测模块，用于根据所述第一预测信息和所述第二预测信息对所述用户的未来行为进行预测得到第三预测信息；其中，所述第三预测信息基于用户面部活动及语音表征了用户未来的行为活动和行为概率。
[0036]第三方面，本申请提供一种计算机设备，包括：处理器以及与所述处理器通信连接的存储器；
[0037]所述存储器存储计算机执行指令；
[0038]所述处理器执行所述存储器存储的计算机执行指令，以实现如权利要求上述的用户行为预测方法。
[0039]第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种用户行为预测方法，其特征在于，包括：获取用户的面部信息，根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息；其中，所述第一预测信息基于用户面部活动表征了用户未来的行为活动和行为概率；获取用户的语音信息，根据所述语音信息对所述用户的未来行为进行预测得到第二预测信息；其中，所述第二预测信息基于用户语音表征了用户未来的行为活动和行为概率；根据所述第一预测信息和所述第二预测信息对所述用户的未来行为进行预测得到第三预测信息；其中，所述第三预测信息基于用户面部活动及语音表征了用户未来的行为活动和行为概率。2.根据权利要求1所述的用户行为预测方法，其特征在于，所述获取用户的面部信息之前，所述方法还包括：接收对用户进行拍摄得到的拍摄录像；提取所述拍摄录像中的视频得到视频文件，提取所述视频文件中每个视频帧中的用户面部，并对所述用户面部进行对齐处理得到至少一个具有用户面部的面部图像，汇总所述视频文件中所有视频帧的面部图像得到用户的面部信息；提取所述拍摄录像中的音频得到所述用户的语音信息。3.根据权利要求1所述的用户行为预测方法，其特征在于，所述根据所述面部信息对所述用户的未来行为进行预测得到第一预测信息，包括：从所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征；其中，所述面部动作单元特征描述了用户面部肌肉的表观动作；所述面部纹理特征表征了所述用户面部的纹理形态；所述面部几何特征反映了所述用户面部器官的位置和形状；对所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征进行拼接处理得到面部特征；通过预置的第一模型根据所述面部特征对用户的心理活动进行预测得到第一心理信息，及根据所述第一心理信息对所述用户的未来行为进行预测得到所述第一预测信息。4.根据权利要求3所述的用户行为预测方法，其特征在于，所述从所述面部信息中提取面部动作单元特征、面部纹理特征和面部几何特征，包括：对所述面部信息中的一个面部图像进行灰度处理得到灰度图像，识别所述灰度图像中用户面部肌肉的运动产生的表观动作，对所述表观动作进行向量化处理得到图像动作单元特征，拼接所述面部信息中所有面部图像的图像动作单元特征得到所述面部动作单元特征；提取所述面部信息中的一个面部图像，识别所述面部图像中属于用户面部上的纹理的图像纹理特征，拼接所述面部信息中所有面部图像的图像纹理特征得到所述面部纹理特征；提取所述面部信息中的一个面部图像，识别所述面部图像中的至少一个面部关键点，根据所述面部关键点识别所述用户面部器官的位置和形状，并得到表征所述位置和形状的图像几何特征，拼接所述面部信息中所有面部图像的图像几何特征得到所述面部几何特征。5.根据权利要求1所述的用户行为预测方法，其特征在于，所述根据所述语音信息对所
述用户的未来行为进行预...
【专利技术属性】
技术研发人员：邓艺凡，
申请(专利权)人：中国农业银行股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。