参会人员专注度的检测方法和系统、视频会议服务器技术方案

本发明专利技术公开了一种参会人员专注度的检测方法和系统、视频会议服务器、存储介质。其中参会人员专注度的检测方法包括：接收来自第一终端的第一参会视频并根据第一参会视频提取多张参会图像，参会图像包括至少一个参会人；使用人脸识别模型识别参会图像中的参会人员并输出各参会人员的人脸识别信息；根据人脸识别信息使用专注度识别模型识别参会图像并输出各参会人员的专注度信息；将每个参会人员的人脸识别信息和专注度信息实时叠加到第一参会视频中以生成第二参会视频并传输至第二终端以显示该第二参会视频。以显示该第二参会视频。以显示该第二参会视频。

【技术实现步骤摘要】
参会人员专注度的检测方法和系统、视频会议服务器


[0001]本专利技术涉及人工智能
，特别是涉及一种参会人员专注度的检测方法和系统、视频会议服务器。

技术介绍

[0002]视频会议自出现以来，因其方便、高效的方式能够帮助人们提高会议效率，从而获得良好的业务应用。从视频会议与协作办公，到高清视频技术应用，促进业务升级，推动会议质量，提升视频会议市场在逐渐扩大。
[0003]在日常办公学习中，在使用视频会议系统中，无法对参会人在整个会议期间的专注度做好掌控。

技术实现思路

[0004]为了解决上述问题至少之一，本专利技术第一个实施例提供一种参会人员专注度的检测方法，应用于服务器，包括：
[0005]接收来自至少一个第一终端的第一参会视频并从所述第一参会视频提取至少一张参会图像，所述参会图像中包括至少一个参会人员；
[0006]使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息；
[0007]根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息；
[0008]将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频。
[0009]在一些可选的实施例中，所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括：
[0010]所述人脸识别信息包括对应的参会人员的身份信息和在所述参会图像中的人脸位置坐标；
[0011]所述将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频进一步包括：
[0012]根据所述人脸位置坐标将所述对应的参会人员的身份信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频。
[0013]在一些可选的实施例中，
[0014]所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：
[0015]根据所述人脸识别信息使用表情识别模型识别所述参会图像以识别各参会人员的表情状态，并根据所述表情状态对应的预设置的专注度权重值输出各参会人员的表情专注度分值；
[0016]和/或
[0017]根据所述人脸识别信息使用行为识别模型识别所述参会图像以识别各参会人员的行为状态，并根据所述行为状态对应的预设置的专注度权重值输出各参会人员的行为专注度分值；
[0018]根据各参会人员的所述表情专注度分值和/或行为专注度分值输出各参会人员的专注度信息。
[0019]在一些可选的实施例中，
[0020]接收来自第一终端的第一参会视频并根据所述第一参会视频提取至少一张参会图像之前，所述检测方法还包括：采集各参会者的生物特征和参会信息；
[0021]所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括，使用各参会者的生物特征和参会信息核对所述身份信息；
[0022]所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：
[0023]使用各参会者的生物特征核对所述表情状态。
[0024]在一些可选的实施例中，
[0025]所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：
[0026]按照会议时间存储各参会人员的专注度信息；
[0027]根据会议进行中存储的各参会人员的专注度信息绘制每个参会人员的专注度曲线并生成该参会人员的专注度分析报告。
[0028]在一些可选的实施例中，
[0029]所述接收来自第一终端的第一参会视频并根据所述第一参会视频提取多张参会图像进一步包括：
[0030]按照预设时间间隔提取至少一张参会图像。
[0031]本专利技术第二方面提供一种参会人员专注度的检测方法，应用于第一终端，包括：
[0032]采集第一参会视频并传输至服务器，使得服务器使用人脸识别模型和专注度识别模型从第一参会视频获取各参会人员的人脸识别信息和专注度信息，并将人脸识别信息和专注度信息实时叠加到第一参会视频中以生成第二参会视频并传输至第二终端以显示该第二参会视频。
[0033]本申请第三方面提供一种参会人员专注度的检测方法，应用于第二终端，包括：
[0034]接收并播放第二参会视频，所述第二参会视频包括各参会人员的人脸识别信息和专注度信息，所述人脸识别信息和专注度信息为服务器使用人脸识别模型和专注度识别模型从第一终端采集的第一参会视频中获取的。
[0035]在会议进行中实时接收并播放第二参会视频，第二参会视频包括各参会人员的人脸识别信息和专注度信息，人脸识别信息和专注度信息为服务器使用人脸识别模型和专注度识别模型从第一终端采集的第一参会视频中获取的。
[0036]本专利技术第四方面提供一种视频会议服务器，包括：
[0037]视频接收单元，配置为：接收来自第一终端的第一参会视频；
[0038]视频提取单元，配置为：根据所述第一参会视频提取多张参会图像，所述参会图像
包括至少一个参会人；
[0039]人脸识别单元，配置为：使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息；
[0040]专注度识别单元，配置为：根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息；
[0041]视频叠加单元，配置为：将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频；
[0042]视频发送单元，配置为：将所述第二参会视频传输至第二终端以显示该第二参会视频。
[0043]本专利技术第五方面提供一种参会人员专注度检测系统，包括：
[0044]第一终端，配置为采集第一参会视频并传输至服务器；
[0045]服务器，配置为根据所述第一参会视频提取多张参会图像，所述参会图像包括至少一个参会人；使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息；根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息；将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端；
[0046]第二终端，配置为播放第二参会视频。
[0047]本专利技术第六方面提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述第一方面所述的方法；
[0048]或者
[0049]该程序被处理器执行时实现上述第二方面所述的方法；
[0050]或者
[0051]该程序被处理器执行时实现上述第三方面所述的方法。
[0052]本专利技术第七方面提供一种计算机设备，包括存本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种参会人员专注度的检测方法，应用于服务器，其特征在于，包括：接收来自至少一个第一终端的第一参会视频并从所述第一参会视频提取至少一张参会图像，所述参会图像中包括至少一个参会人员；使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息；根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息；将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频。2.根据权利要求1所述的检测方法，其特征在于，所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括：所述人脸识别信息包括对应的参会人员的身份信息和在所述参会图像中的人脸位置坐标；所述将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频进一步包括：根据所述人脸位置坐标将所述对应的参会人员的身份信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频。3.根据权利要求2所述的检测方法，其特征在于，所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：根据所述人脸识别信息使用表情识别模型识别所述参会图像以识别各参会人员的表情状态，并根据所述表情状态对应的预设置的专注度权重值输出各参会人员的表情专注度分值；和/或根据所述人脸识别信息使用行为识别模型识别所述参会图像以识别各参会人员的行为状态，并根据所述行为状态对应的预设置的专注度权重值输出各参会人员的行为专注度分值；根据各参会人员的所述表情专注度分值和/或行为专注度分值输出各参会人员的专注度信息。4.根据权利要求3所述的检测方法，其特征在于，接收来自第一终端的第一参会视频并根据所述第一参会视频提取至少一张参会图像之前，所述检测方法还包括：采集各参会者的生物特征和参会信息；所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括，使用各参会者的生物特征和参会信息核对所述身份信息；所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：使用各参会者的生物特征核对所述表情状态。5.根据权利要求1
‑
4中任一项所述的检测方法，其特征在于，所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括：
按照会议时间存储各参会人员的专注度信息；根据存储的各参会人员的专注度信息绘制每个参会人员的专注度曲线并生成该参会人员的专注度分析报告。6.根据权利要求1所述的检测方法，其特征在于，所述接收来自第一终...

【专利技术属性】
技术研发人员：张长峰，张敬宇，郭小琴，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：