情感标注方法、装置、电子设备及计算机可读存储介质制造方法及图纸

本申请实施例涉及情感计算与标注技术领域，公开了一种情感标注方法、装置、电子设备及计算机可读存储介质，其中，情感标注方法包括：本申请实施例的方法，获取I个用户针对目标多媒体内容分别输入的多个情感信息，虚拟摇杆是预加载于播放目标多媒体内容的播放界面的，情感信息包括情绪唤醒度值与情绪效价值，I为大于1的整数；接着，通过预定融合算法，在J个预设采样时间点分别对I个用户的情绪唤醒度值进行融合，以及在J个预设采样时间点分别对I个用户的情绪效价值进行融合，J为大于1的整数；接着，基于融合后的情绪唤醒度值与融合后的情绪效价值，对目标多媒体内容进行情感标注。

Emotional annotation method, device, electronic equipment and computer readable storage medium

【技术实现步骤摘要】
情感标注方法、装置、电子设备及计算机可读存储介质
本申请实施例涉及情感计算与标注
，具体而言，本申请涉及一种情感标注方法、装置、电子设备及计算机可读存储介质。
技术介绍
情感识别技术是一种给予机器识别人类情感、情绪能力的人工智能技术，目前越来越成为人工智能领域的研究重点与难点。情感标注是情感识别领域的关键技术之一，是开发情感识别算法的基础。随着人工智能技术的发展，通过人工神经网络等机器学习方式对情感进行识别已成为趋势。由于人类的情感具有主观性、动态性等特点，容易随着时间的变化而变化，很难进行准确的捕捉。虽然，国内外在情感标注领域有较多的研究，但大多方法无法准确获取用户浏览多媒体内容时的情感，因此，有必要提供一种可使用户标注自身情感的方法。
技术实现思路
本申请实施例的目的旨在至少能解决上述的技术缺陷之一，特提出以下技术方案：一方面，提供了一种情感标注方法，包括：获取I个用户针对目标多媒体内容分别输入的多个情感信息，其中，情感信息包括情绪唤醒度值与情绪效价值，I为大于1的整数；通过预定融合算法，在J个预设采样时间点分别对I个用户的情绪唤醒度值进行融合，以及在J个预设采样时间点分别对I个用户的情绪效价值进行融合，J为大于1的整数；基于融合后的情绪唤醒度值与融合后的情绪效价值，对目标多媒体内容进行情感标注。在一种可能的实现方式中，多个情感信息为I个用户分别通过各自的虚拟摇杆输入的，虚拟摇杆是预加载于播放目标多媒体内容的播放界面的。在一种可能的实现方式中，虚拟摇杆的横坐标表示情绪效价值，虚拟摇杆的纵坐标表示情绪唤醒度值；或者，虚拟摇杆的横坐标表示情绪唤醒度值，虚拟摇杆的纵坐标表示情绪效价值；虚拟摇杆的横坐标与纵坐标形成的四个象限分别代表四种情绪类型的情感信息。在一种可能的实现方式中，针对每一用户，在获取到每一用户针对目标多媒体内容，通过虚拟摇杆输入的每一情感信息之后，还包括：生成并发送显示指令，显示指令用于指示在每一用户对应的目标多媒体内容的播放界面的预定位置，同步显示与每一情感信息相对应的情绪类型。在一种可能的实现方式中，在获取I个用户针对目标多媒体内容分别输入的多个情感信息之前，还包括：确定开始播放目标多媒体内容的播放时间；在播放时间之前的预定时长内，控制播放界面显示虚拟摇杆并输出预定提示信息，以使得用户根据预定提示信息将操作虚拟摇杆的手指放在虚拟摇杆上。在一种可能的实现方式中，通过预定融合算法，在J个预设采样时间点分别对I个用户的情绪唤醒度值进行融合，包括：针对第j个预设采样时间点，基于I个用户在第j个预设采样时间点的各个情绪唤醒度值，确定I个用户在第j个预设采样时间点的唤醒度置信测度矩阵，j∈J；将唤醒度置信测度矩阵中的各个元素依据对应维度相加，得到I个用户在第j个预设采样时间点的各个唤醒度置信测度；基于第一融合计算公式，根据I个用户在第j个预设采样时间点的唤醒度置信测度矩阵与I个用户在第j个预设采样时间点的各个唤醒度置信测度，对I个用户在第j个预设采样时间点的各个情绪唤醒度值进行融合。在一种可能的实现方式中，基于I个用户在第j个预设采样时间点的各个情绪唤醒度值，确定I个用户在第j个预设采样时间点的唤醒度置信测度矩阵，包括：基于预定计算公式，通过根据第m个用户在第j个预设采样时间点的情绪唤醒度值、第l个用户在第j个预设采样时间点的情绪唤醒度值、第m个用户在各个预设采样时间点的情绪唤醒度值的方差，确定第m个用户相对于第l个用户在第j个预设采样时间点的初始置信测度，来得到I个用户在第j个预设采样时间点的唤醒度置信测度矩阵，m∈I,l∈I。在一种可能的实现方式中，在基于第一融合计算公式，根据I个用户在第j个预设采样时间点的唤醒度置信测度矩阵与I个用户在第j个预设采样时间点的各个唤醒度置信测度，对I个用户在第j个预设采样时间点的各个情绪唤醒度值进行融合之前，还包括：从I个用户在第j个预设采样时间点的各个情绪唤醒度值中，滤除唤醒度置信测度大于预定阈值的用户的情绪唤醒度值，得到K个用户在第j个预设采样时间点的情绪唤醒度值度，K≤I；其中，基于第一融合计算公式，根据I个用户在第j个预设采样时间点的唤醒度置信测度矩阵与I个用户在第j个预设采样时间点的各个唤醒度置信测度，对I个用户在第j个预设采样时间点的各个情绪唤醒度值进行融合，包括：基于第一融合计算公式，根据K个用户在第j个预设采样时间点的唤醒度置信测度矩阵与K个用户在第j个预设采样时间点的各个情绪唤醒度值，对K个用户在第j个预设采样时间点的各个情绪唤醒度值进行融合。在一种可能的实现方式中，通过预定融合算法在J个预设采样时间点，分别对I个用户的情绪效价值进行融合，包括：针对第j个预设采样时间点，基于I个用户在第j个预设采样时间点的各个情绪效价值，确定I个用户在第j个预设采样时间点的效价置信测度矩阵，j∈J；将效价置信测度矩阵中的各个元素依据对应维度相加，得到I个用户在第j个预设采样时间点的各个效价置信测度；基于第二融合计算公式，根据I个用户在第j个预设采样时间点的效价置信测度矩阵与I个用户在第j个预设采样时间点的各个效价置信测度，对I个用户在第j个预设采样时间点的各个情绪效价值进行融合。一方面，提供了一种情感标注装置，包括：获取模块，用于获取I个用户针对目标多媒体内容分别输入的多个情感信息，其中，情感信息包括情绪唤醒度值与情绪效价值，I为大于1的整数；融合模块，用于通过预定融合算法，在J个预设采样时间点分别对I个用户的情绪唤醒度值进行融合，以及在J个预设采样时间点分别对I个用户的情绪效价值进行融合，J为大于1的整数；标注模块，用于基于融合后的情绪唤醒度值与融合后的情绪效价值，对目标多媒体内容进行情感标注。在一种可能的实现方式中，多个情感信息为I个用户分别通过各自的虚拟摇杆输入的，虚拟摇杆是预加载于播放目标多媒体内容的播放界面的。在一种可能的实现方式中，虚拟摇杆的横坐标表示情绪效价值，虚拟摇杆的纵坐标表示情绪唤醒度值；或者，虚拟摇杆的横坐标表示情绪唤醒度值，虚拟摇杆的纵坐标表示情绪效价值；虚拟摇杆的横坐标与纵坐标形成的四个象限分别代表四种情绪类型的情感信息。在一种可能的实现方式中，还包括指令模块；指令模块，用于生成并发送显示指令，显示指令用于指示在每一用户对应的目标多媒体内容的播放界面的预定位置，同步显示与每一情感信息相对应的情绪类型。在一种可能的实现方式中，还包括提示模块；提示模块，用于确定开始播放目标多媒体内容的播放时间；以及用于在播放时间之前的预定时长内，控制播放界面显示虚拟摇杆并输出预定提示信息，以使得用户根据预定提示信息将操作虚拟摇杆的手指放在虚拟摇杆上。在一种可能的实现方式中，融合模块在通过预定融合算法，在J个预设采样时间点分别对I个用户的情绪唤醒度值进行融合时，具体用于本文档来自技高网...

【技术保护点】
1.一种情感标注方法，其特征在于，包括：/n获取I个用户针对目标多媒体内容分别输入的多个情感信息，其中，所述情感信息包括情绪唤醒度值与情绪效价值，所述I为大于1的整数；/n通过预定融合算法，在J个预设采样时间点分别对所述I个用户的情绪唤醒度值进行融合，以及在J个预设采样时间点分别对所述I个用户的情绪效价值进行融合，所述J为大于1的整数；/n基于融合后的情绪唤醒度值与融合后的情绪效价值，对所述目标多媒体内容进行情感标注。/n

【技术特征摘要】
1.一种情感标注方法，其特征在于，包括：
获取I个用户针对目标多媒体内容分别输入的多个情感信息，其中，所述情感信息包括情绪唤醒度值与情绪效价值，所述I为大于1的整数；
通过预定融合算法，在J个预设采样时间点分别对所述I个用户的情绪唤醒度值进行融合，以及在J个预设采样时间点分别对所述I个用户的情绪效价值进行融合，所述J为大于1的整数；
基于融合后的情绪唤醒度值与融合后的情绪效价值，对所述目标多媒体内容进行情感标注。


2.根据权利要求1所述的方法，其特征在于，所述多个情感信息为I个用户分别通过各自的虚拟摇杆输入的，所述虚拟摇杆是预加载于播放所述目标多媒体内容的播放界面的。


3.根据权利要求2所述的方法，其特征在于，所述虚拟摇杆的横坐标表示所述情绪效价值，所述虚拟摇杆的纵坐标表示所述情绪唤醒度值；或者，所述虚拟摇杆的横坐标表示所述情绪唤醒度值，所述虚拟摇杆的纵坐标表示所述情绪效价值；
所述虚拟摇杆的横坐标与纵坐标形成的四个象限分别代表四种情绪类型的情感信息。


4.根据权利要求3所述的方法，其特征在于，针对每一用户，在获取到每一用户针对目标多媒体内容通过虚拟摇杆输入的每一情感信息之后，还包括：
生成并发送显示指令，所述显示指令用于指示在每一用户对应的目标多媒体内容的播放界面的预定位置，同步显示与所述每一情感信息相对应的预设颜色情绪类型。


5.根据权利要求2所述的方法，其特征在于，在获取I个用户针对目标多媒体内容分别输入的多个情感信息之前，还包括：
确定开始播放所述目标多媒体内容的播放时间；
在所述播放时间之前的预定时长内，控制所述播放界面显示所述虚拟摇杆并输出预定提示信息，以使得用户根据所述预定提示信息将操作所述虚拟摇杆的手指放在所述虚拟摇杆上。


6.根据权利要求1所述的方法，其特征在于，通过预定融合算法，在J个预设采样时间点分别对所述I个用户的情绪唤醒度值进行融合，包括：
针对第j个预设采样时间点，基于所述I个用户在第j个预设采样时间点的各个情绪唤醒度值，确定所述I个用户在第j个预设采样时间点的唤醒度置信测度矩阵，j∈J；
将所述唤醒度置信测度矩阵中的各个元素依据对应维度相加，得到所述I个用户在第j个预设采样时间点的各个唤醒度置信测度；
基于第一融合计算公式，根据所述I个用户在第j个预设采样时间点的唤醒度置信测度矩阵与所述I个用户在第j个预设采样时间点的各个唤醒度置信测度，对所述I个用户在第j个预设采样时间点的各个情绪唤醒度值进行融合。


7.根据权利要求6所述的方法，其特征在于，基于所述I个用户在第j个预设采样时间点的各个情绪唤醒度值，确定所述I个用户在第j个预设采样时间点的唤醒度置信测度矩阵，包括：
基于预定计算公式，通过根据第m个用户在第j个预设采样时间点的情绪唤醒度值、第l个用户在第j个预设采样时间点的情绪...

【专利技术属性】
技术研发人员：王晨，张天翼，阿卜杜拉·阿里，巴勃罗·塞萨尔，
申请(专利权)人：新华网股份有限公司，荷兰国家数学与计算机中心，
类型：发明
国别省市：北京;11