System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 借助于手势检测进行局部强调的视频处理方法及系统技术方案_技高网

借助于手势检测进行局部强调的视频处理方法及系统技术方案

技术编号:40364386 阅读:23 留言:0更新日期:2024-02-20 22:11
本发明专利技术提供用来借助于手势检测进行局部强调的视频处理方法及系统芯片。系统芯片包含人物辨识电路、手势检测电路、声音检测电路及处理电路。人物辨识电路用以自影像捕获设备取得影像数据,并对该影像数据进行人物辨识以产生辨识结果;手势检测电路用以对手势影像数据进行手势检测以产生手势检测结果;声音检测电路用以自多个麦克风接收多个声音信号,且判断出主要声音的声音特征值;以及处理电路用以根据该辨识结果、该手势检测结果以及该主要声音的该声音特征值以判断出该影像数据中的特定区域,并对该影像数据进行处理以强调该特定区域。

【技术实现步骤摘要】

本专利技术是关于实时串流的视频处理方法,尤指一种用来借助于手势检测进行局部强调(partial highlighting)的视频处理方法以及相关的系统芯片。


技术介绍

1、实时串流(live streaming)目前被广泛应用在社会的许多层面,例如可以被应用在远程视频会议中。然而,当远程视频会议中有其中一方在影像(例如显示于屏幕上的画面)中包含多个参加者时,另一方的参加者有时候可能难以分辨上述影像中的发言者。具体来说,假设目前有第一方与第二方正在进行远程视频会议,其中第一方有多个参加者在实体会议室,并通过麦克风与相机来获取实体会议室的影音讯息后通过网络传递至远程第二方的参加者,则由于第一方的多个参加者的姿势与位置问题,可能会让第二方的参加者无法正确辨识发言者,造成第二方的参加者的困扰并影响到会议的效率。


技术实现思路

1、本专利技术的目的之一在于提出一种应用于远程视频的人物追踪技术,其可以在影像(例如显示于屏幕上的画面)中强调目前正在发言的人物,以解决先前技术中所述的问题。

2、在本专利技术的一实施例中,揭露了一种系统芯片,用来借助于手势检测进行局部强调,其中该系统芯片包含一人物辨识电路、一手势检测电路、一声音检测电路以及一处理电路。该人物辨识电路用以自一影像捕获设备取得一影像数据,并对该影像数据进行人物辨识以产生一辨识结果;该手势检测电路用以自该影像捕获设备取得该影像数据,并对该影像数据中的手势影像数据进行手势检测以产生一手势检测结果;该声音检测电路用以自多个麦克风取得多个声音信号,且判断出一主要声音的一声音特征值;以及该处理电路耦接于该人物辨识电路、该手势检测电路与该声音检测电路,且用以根据该辨识结果、该手势检测结果以及该主要声音的该声音特征值以判断出该影像数据中的一特定区域,并对该影像数据进行处理以强调该特定区域。

3、在本专利技术的另一实施例中,揭露了一种视频处理方法,用来借助于手势检测进行局部强调,而该视频处理方法包含以下步骤:自一影像捕获设备取得一影像数据,并对该影像数据进行人物辨识以产生一辨识结果;自该影像捕获设备取得该影像数据,并对该影像数据中的手势影像数据进行手势检测以产生一手势检测结果;自多个麦克风取得多个声音信号,且判断出一主要声音的一声音特征值;根据该辨识结果、该手势检测结果以及该主要声音的该声音特征值以判断出该影像数据中的一特定区域;以及对该影像数据进行处理以强调该特定区域。

4、本专利技术的多个好处的其中之一是,通过检测目前正在发言的人物并在影像数据中强调该人物,本专利技术的视频处理方法及系统芯片可让远程会议室的参加者清楚地知道目前的发言者,由此可有效地增进会议效率。另外,本专利技术的视频处理方法及系统芯片可通过手势检测来确保相关操作的正确性。

5、为使能更进一步了解本专利技术的特征和
技术实现思路
,请参阅以下有关本专利技术的详细说明与附图,然而所提供的附图仅用于提供参考与说明,并非用于对本专利技术加以限制。

本文档来自技高网...

【技术保护点】

1.一种系统芯片,用来借助于手势检测进行局部强调,其特征在于,所述系统芯片包含:

2.如权利要求1所述的系统芯片,其特征在于,所述系统芯片还包含:

3.如权利要求2所述的系统芯片,其特征在于,当所述语音活性检测电路指出所述至少一部分声音信号包含有语音成分时,所述处理电路根据所述辨识结果、所述手势检测结果以及所述主要声音的所述声音特征值以判断出所述影像数据中的所述特定区域,并对所述影像数据进行处理以强调所述特定区域。

4.如权利要求1所述的系统芯片,其特征在于,所述辨识结果包含多个区域,而所述多个区域的每一个区域包含一人物;以及所述处理电路用以根据所述主要声音的所述声音特征值以及所述手势检测结果以自所述多个区域中选择一区域以作为所述特定区域。

5.如权利要求4所述的系统芯片,其特征在于,所述辨识结果还包含分别对应于所述多个区域的多个特征值,且所述处理电路追踪所述特定区域的所述特征值以判断出所述特定区域在后续影像数据中的位置,并对所述后续影像数据进行处理以于所述后续影像数据中强调所述特定区域;所述手势检测结果指出一预定手势被检测到;除了判断出所述影像数据中的所述特定区域并对所述影像数据进行处理以强调所述特定区域,所述处理电路还启用针对所述特定区域的一手势锁定,以供指出继续强调所述特定区域;响应于另一手势检测结果,所述处理电路停用针对所述特定区域的所述手势锁定;以及所述系统芯片还包含:

6.如权利要求4所述的系统芯片,其特征在于,所述辨识结果还包含分别对应于所述多个区域的多个特征值,且所述处理电路追踪所述特定区域的所述特征值以判断出所述特定区域在后续影像数据中的位置,并对所述后续影像数据进行处理以于所述后续影像数据中强调所述特定区域;所述手势检测结果指出一预定手势被检测到;除了判断出所述影像数据中的所述特定区域并对所述影像数据进行处理以强调所述特定区域,所述处理电路还启用针对所述特定区域的一手势锁定,以供指出继续强调所述特定区域;以及

7.如权利要求1所述的系统芯片,其特征在于,所述处理电路对所述影像数据进行处理以对所述特定区域内的人物进行放大。

8.如权利要求1所述的系统芯片,其特征在于,所述主要声音的所述声音特征值为所述主要声音的一方位角或声纹。

9.如权利要求1所述的系统芯片,其中对所述影像数据中的所述手势影像数据进行所述手势检测以产生所述手势检测结果包含:

10.一种视频处理方法,用来借助于手势检测进行局部强调,其特征在于,所述视频处理方法包含:

...

【技术特征摘要】

1.一种系统芯片,用来借助于手势检测进行局部强调,其特征在于,所述系统芯片包含:

2.如权利要求1所述的系统芯片,其特征在于,所述系统芯片还包含:

3.如权利要求2所述的系统芯片,其特征在于,当所述语音活性检测电路指出所述至少一部分声音信号包含有语音成分时,所述处理电路根据所述辨识结果、所述手势检测结果以及所述主要声音的所述声音特征值以判断出所述影像数据中的所述特定区域,并对所述影像数据进行处理以强调所述特定区域。

4.如权利要求1所述的系统芯片,其特征在于,所述辨识结果包含多个区域,而所述多个区域的每一个区域包含一人物;以及所述处理电路用以根据所述主要声音的所述声音特征值以及所述手势检测结果以自所述多个区域中选择一区域以作为所述特定区域。

5.如权利要求4所述的系统芯片,其特征在于,所述辨识结果还包含分别对应于所述多个区域的多个特征值,且所述处理电路追踪所述特定区域的所述特征值以判断出所述特定区域在后续影像数据中的位置,并对所述后续影像数据进行处理以于所述后续影像数据中强调所述特定区域;所述手势检测结果指出一预定手势被检测到;除了判断出所述影像数据中的所述特定区域并对所述影像数据进行处理以强调所述特定区域,所述处理电路还启用针对所...

【专利技术属性】
技术研发人员:郑家钧
申请(专利权)人:瑞昱半导体股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1