本申请公开了一种视频图像音画映射的方法、系统、装置及视频会议设备，用于在满足应用需求的前提简化标定过程，减小视频图像音画映射过程中的计算量，适合大规模推广应用。本申请方法包括：根据声源角度最大范围和预设精度将声源角度等分为N份，得到N+1条角度线，所述N为大于1的整数；在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上；获取目标图像，所述目标图像为包含所述目标数据点的图像；确定所述目标数据点在所述目标图像中的坐标；根据所述坐标确定所述角度线的目标方程系数；根据所述角度线的角度和所述目标方程系数建立标定表格；根据所述标定表格进行音画映射。表格进行音画映射。表格进行音画映射。
【技术实现步骤摘要】
视频图像音画映射的方法、系统、装置及视频会议设备
[0001]本申请涉及视频图像
，尤其涉及一种视频图像音画映射的方法、系统、装置及视频会议设备。
技术介绍
[0002]当下，视频会议已较为普及。目前市面上已有一些智能会议系统能够在视频会议过程中自动对画面中的发言者给予特写画面，使其他与会者能清晰看到发言者的面部表情和肢体动作，极大地提升了会议效果。
[0003]为了确定画面中发言者的位置，现有技术常常将声源定位技术与图像识别技术相结合予以实现。声源定位是通过麦克风阵列和相应算法实现的，但考虑到经济性和结构紧凑性，市面上相关会议设备采用的麦克风阵列以线性阵列居多，其声源定位结果则对应为水平的声源角度。
[0004]在视频会议设备中，摄像头采集的视频图像存在透视以及畸变，且视频图像所处的像素坐标系与阵列麦克风的坐标系属于不同的坐标系，也就说根据声源角度还不能直接在视频图像中确定目标方位。现有技术中，为了实现音画映射，一般采用结合相机内参、外参并通过数学建模将图像中的坐标与声源角度关联起来，但是采用这种方法需要对相机标定获取内参、外参，相应的操作要求较高，并且建模和计算过程也比较繁琐，不适合推广应用。
技术实现思路
[0005]本申请提供了一种视频图像音画映射的方法、系统、装置及视频会议设备，用于在满足应用需求的前提简化标定过程，减小视频图像音画映射过程中的计算量，适合大规模推广应用。
[0006]本申请第一方面提供了一种视频图像音画映射的方法，包括：根据声源角度最大范围和预设精度将声源角度等分为N份，得到N+1条角度线，所述N为大于1的整数；在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上；获取目标图像，所述目标图像为包含所述目标数据点的图像；确定所述目标数据点在所述目标图像中的坐标；根据所述坐标确定所述角度线的目标方程系数；根据所述角度线的角度和所述目标方程系数建立标定表格；根据所述标定表格进行音画映射。
[0007]可选的，所述在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上包括：在各个角度线上直接选取至少两个目标数据点并将所述目标数据点标记在水平
面上；或，选取至少两条水平线，将所述水平线与各个角度线的交点作为目标数据点并将所述目标数据点标记在水平面上。
[0008]可选的，所述在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上包括：仅在90
°
角度线及其一侧的角度线选取至少两个目标数据点并将所述目标数据点标记在水平面上。
[0009]可选的，所述根据所述标定表格进行音画映射包括：获取所述标定表格，所述标定表格中预存有若干角度线的角度与目标方程系数之间的映射关系；采集目标声源角度；根据所述目标声源角度和预设角度容差确定声源角度范围；根据所述声源角度范围和所述标定表格确定目标角度线方程；根据所述目标角度线方程确定所述声源角度范围在视频画面中的像素区域；或，根据所述目标角度线方程确定目标位置是否位于所述声源角度范围内。
[0010]可选的，所述根据所述声源角度范围和所述标定表格确定目标角度线方程包括：根据所述声源角度范围确定边界角度；在所述标定表格中确定与所述边界角度对应的目标方程系数；根据所述目标方程系数确定与所述边界角度对应的目标角度线方程。
[0011]可选的，若所述标定表格仅标定了90
°
角度线及其一侧的角度线且未标定所述边界角度，所述在所述标定表格中确定与所述边界角度对应的目标方程系数包括：确定所述边界角度基于90
°
角度线的对称角度；在所述标定表格中确定与所述对称角度对应的目标方程系数；根据镜像原理得到与所述边界角度对应的目标方程系数。
[0012]可选的，所述根据所述目标角度线方程确定所述声源角度范围在视频画面中的像素区域包括：根据所述目标角度线方程和预设图像高度确定所述声源角度范围在视频画面中的像素区域。
[0013]可选的，所述根据所述目标角度线方程确定目标位置是否位于所述声源角度范围内包括：确定目标位置；根据所述目标角度线方程确定所述目标位置是否位于目标角度线之间；若是，则确定所述目标位置位于所述声源角度范围内；若否，则确定所述目标位置位于所述声源角度范围外。
[0014]可选的，若所述标定表格仅标定了90
°
角度线及其一侧的角度线且所述目标位置位于未标定的一侧，所述根据所述目标角度线方程确定所述目标位置是否位于目标角度线之间包括：
确定所述目标位置基于90
°
角度线的镜像位置；确定所述目标角度线基于90
°
角度线的镜像角度线；在标定表格中确定所述镜像角度线的方程；根据所述镜像角度线方程确定所述镜像位置是否位于所述镜像角度线之间。
[0015]可选的，所述目标位置为目标检测框的中心点位置。
[0016]可选的，所述根据所述标定表格进行音画映射包括：获取所述标定表格，所述标定表格中预存有若干角度线的角度与目标方程系数之间的映射关系；获取目标检测信息；根据所述目标检测信息确定目标位置；在所述标定表格中确定与所述目标位置相邻的第一角度线和第二角度线；根据所述第一角度线和所述第二角度线确定所述目标位置在视频画面中的角度范围或角度。
[0017]可选的，所述根据所述第一角度线和所述第二角度线确定所述目标位置在视频画面中的角度包括：确定所述目标位置到所述第一角度线和所述第二角度线的第一距离和第二距离；根据所述第一距离和第二距离，通过目标公式确定所述目标位置在视频画面中的角度。
[0018]可选的，所述目标公式为：θx=θ1+Δθ（d2/d1+d2）；其中，θx表示所述目标位置在视频画面中的角度值，θ1表示所述第一角度线对应的角度，d1表示第一距离，d2表示第二距离，Δθ表示预设角度间隔。
[0019]本申请第二方面提供了一种视频图像音画映射的系统，包括：处理单元，用于根据声源角度最大范围和预设精度将声源角度等分为N份，得到N+1条角度线，所述N为大于1的整数；标记单元，用于在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上；获取单元，用于获取目标图像，所述目标图像为包含所述目标数据点的图像；第一确定单元，用于确定所述目标数据点在所述目标图像中的坐标；第二确定单元，用于根据所述坐标确定所述角度线的目标方程系数；建立单元，用于根据所述角度线的角度和所述目标方程系数建立标定表格；映射单元，用于根据所述标定表格进行音画映射。
[0020]可选的，所述标记单元具体用于：在各个角度线上直接选取至少两个目标数据点并将所述目标数据点标记在水平面上；或，选取至少两条水平线，将所述水平线与各个角度线的交点作为目标数据点并将所述目标数据点标记在水平面上。
[0021]可选的，所述标记单元具体还用于：
仅在90
°
角度线及其一侧的角度线选取至少两个目标数据点并将所本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频图像音画映射的方法，其特征在于，所述方法包括：根据声源角度最大范围和预设精度将声源角度等分为N份，得到N+1条角度线，所述N为大于1的整数；在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上；获取目标图像，所述目标图像为包含所述目标数据点的图像；确定所述目标数据点在所述目标图像中的坐标；根据所述坐标确定所述角度线的目标方程系数；根据所述角度线的角度和所述目标方程系数建立标定表格；根据所述标定表格进行音画映射。2.根据权利要求1所述的方法，其特征在于，所述在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上包括：在各个角度线上直接选取至少两个目标数据点并将所述目标数据点标记在水平面上；或，选取至少两条水平线，将所述水平线与各个角度线的交点作为目标数据点并将所述目标数据点标记在水平面上。3.根据权利要求1所述的方法，其特征在于，所述在各个角度线上分别选取至少两个目标数据点并将所述目标数据点标记在水平面上包括：仅在90
°
角度线及其一侧的角度线选取至少两个目标数据点并将所述目标数据点标记在水平面上。4.根据权利要求1所述的方法，其特征在于，所述根据所述标定表格进行音画映射包括：获取所述标定表格，所述标定表格中预存有若干角度线的角度与目标方程系数之间的映射关系；采集目标声源角度；根据所述目标声源角度和预设角度容差确定声源角度范围；根据所述声源角度范围和所述标定表格确定目标角度线方程；根据所述目标角度线方程确定所述声源角度范围在视频画面中的像素区域；或，根据所述目标角度线方程确定目标位置是否位于所述声源角度范围内。5.根据权利要求4所述的方法，其特征在于，所述根据所述声源角度范围和所述标定表格确定目标角度线方程包括：根据所述声源角度范围确定边界角度；在所述标定表格中确定与所述边界角度对应的目标方程系数；根据所述目标方程系数确定与所述边界角度对应的目标角度线方程。6.根据权利要求5所述的方法，其特征在于，若所述标定表格仅标定了90
°
角度线及其一侧的角度线且未标定所述边界角度，所述在所述标定表格中确定与所述边界角度对应的目标方程系数包括：确定所述边界角度基于90
°
角度线的对称角度；在所述标定表格中确定与所述对称角度对应的目标方程系数；
根据镜像原理得到与所述边界角度对应的目标方程系数。7.根据权利要求4所述的方法，其特征在于，所述根据所述目标角度线方程确定所述声源角度范围在视频画面中的像素区域包括：根据所述目标角度线方程和预设图像高度确定所述声源角度范围在视频画面中的像素区域。8.根据权利要求4所述的方法，其特征在于，所述根据所述目标角度线方程确定目标位置是否位于所述声源角度范围内包括：确定目标位置；根据所述目标角度线方程确定所述目标位置是否位于目标角度线之间；若是，则确定...
【专利技术属性】
技术研发人员：肖兵，许汉龙，曾庆林，
申请(专利权)人：珠海视熙科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。