System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种音视频与手语合成视频并行完成的处理方法及装置制造方法及图纸_技高网

一种音视频与手语合成视频并行完成的处理方法及装置制造方法及图纸

技术编号:41991337 阅读:4 留言:0更新日期:2024-07-12 12:18
一种音视频与手语合成视频并行完成的处理方法及装置,涉及手语视频合成领域。为解决现有技术中存在的,现有的手语字幕提炼技术存在需要人工重新提炼字幕和无法精准控制播放时长的技术问题,本发明专利技术提供的技术方案为:一种音视频与手语合成视频并行完成的处理方法,方法包括:采集目标视频时长和目标视频对应的字幕文件;根据目标视频时长得到手语视频能展示的字数;将字幕文件中文字进行提炼,至字幕文件中字数接近能展示的字数;根据目标视频的时长,对手语视频进行处理,使手语视频时长与目标视频时长相同;手语视频为:根据提炼后的字幕文件中文字生成的手语视频。可以应用于音视频合成和手语合成工作。

【技术实现步骤摘要】

涉及手语视频合成领域。


技术介绍

1、“手语合成”指把文字转换成手语形式的视频,方便听障言语残疾人获取信息。形成的视频称为“手语视频”。主要应用在重要的电视节目、会议、通知公告等场景,例如:把预先录制好的电视节目视频的字幕合成手语视频,再把手语视频嵌入到电视节目视频的左下方形成画中画的形式播放给观众,帮助听障言语残疾人获取电视节目内容信息。

2、手语合成通常为音频和视频提供同步的手语视频形式。帮助听力言语障碍人士获取信息。视频通常把合成后的手语视频放置在原视频的左下角以画中画为表现形式,音频以在音频周边同步播放合成后的手语视频为表现形式。

3、我们把将要搭配手语视频的视频称为“目标视频”,音频称为“目标音频”,两者统称为“目标音视频”。

4、目前,行业内如果为音视频提供手语合成服务,通常需要在目标音视频字幕的基础上人工另提炼出一份比较简短的字幕文件用于手语合成。因为一般情况下相同时间内目标音视频内口语的速度要远超手语的速度,所以合成的手语视频要比目标音视频长很多,如果采用与目标视频相同的字幕文件合成手语视频将无法同步播放完成。为了解决能够并行播放完成的问题需要提炼手语字幕。

5、然而,现有的手语字幕提炼技术存在以下技术问题:

6、1.需要人工重新提炼字幕。目前的手语合成技术在为音视频进行手语合成时,由于手语要比口语表达的速度慢且长,所以合成出来的手语视频要比目标音视频的时间长,导致手语合成视频无法与目标音视频同步播放完成,只能对目标视频的字幕进行人工提炼,使提炼后的字幕合成的手语视频时间与目标视频相同。进而解决手语合成视频与目标视频时间同步并行结束的问题。

7、2.无法精准控制播放时长。人工提炼的字幕,合成的手语视频通常只能达到与目标音视频播放时长相近,不能达到完全相同。需要后期的处理才能实现完全相同。需要有视频编辑人员参与。


技术实现思路

1、为解决现有技术中存在的,现有的手语字幕提炼技术存在需要人工重新提炼字幕和无法精准控制播放时长的技术问题,本专利技术提供的技术方案为:

2、一种音视频与手语合成视频并行完成的处理方法,所述方法包括:

3、采集目标视频时长和所述目标视频对应的字幕文件的步骤;

4、根据所述目标视频时长得到手语视频能展示的字数的步骤;

5、将所述字幕文件中文字进行提炼,至所述字幕文件中字数接近所述能展示的字数的步骤;

6、根据所述目标视频的时长,对手语视频进行处理,使所述手语视频时长与所述目标视频时长相同的步骤;

7、所述手语视频为:根据提炼后的字幕文件中文字生成的手语视频。

8、进一步,提供一个优选实施方式,根据每分钟120字的比例,得到所述手语视频能展示的字数。

9、进一步,提供一个优选实施方式,所述字幕文件中字数接近所述能展示的字数具体为:每分钟相差不超过八个字。

10、进一步,提供一个优选实施方式,将所述字幕文件中文字进行提炼的步骤具体包括:字幕内容分析、关键字提炼、权重筛选和内容归纳与提炼的步骤。

11、进一步,提供一个优选实施方式,通过倍速操作,使所述手语视频时长与所述目标视频时长相同。

12、基于同一专利技术构思,本专利技术还提供了一种音视频与手语合成视频并行完成的处理装置,所述装置包括:

13、采集目标视频时长和所述目标视频对应的字幕文件的模块;

14、根据所述目标视频时长得到手语视频能展示的字数的模块;

15、将所述字幕文件中文字进行提炼,至所述字幕文件中字数接近所述能展示的字数的模块;

16、根据所述目标视频的时长,对手语视频进行处理,使所述手语视频时长与所述目标视频时长相同的模块;

17、所述手语视频为:根据提炼后的字幕文件中文字生成的手语视频。

18、基于同一专利技术构思,本专利技术还提供了手语视频展示方法,所述方法包括:

19、采集目标视频的步骤;

20、通过所述的处理方法,得到手语视频的步骤;

21、将所述目标视频画面和所述手语视频同步展示的步骤。

22、基于同一专利技术构思,本专利技术还提供了手语视频展示装置,所述装置包括:

23、采集目标视频的模块;

24、通过所述的处理方法,得到手语视频的模块;

25、将所述目标视频画面和所述手语视频同步展示的模块。

26、基于同一专利技术构思,本专利技术还提供了计算机储存介质,用于储存计算机程序,当所述计算机程序被计算机读取时,所述计算机执行所述的处理方法。

27、基于同一专利技术构思,本专利技术还提供了计算机,包括处理器和储存介质,当所述处理器读取所述储存介质中储存的计算机程序时,所述计算机执行所述的处理方法。

28、与现有技术相比,本专利技术提供的技术方案的有益之处在于:

29、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,通过对目标音视频的字幕进行内容分析、关键字提炼、权重筛选等步骤,自动提取与目标视频时长相近且内容表达相同的手语字幕。这样可以避免了人工重新提炼字幕的繁琐过程,大大提高了工作效率。

30、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,通过倍速调节技术,系统可以实现合成出的手语视频与目标音视频总时长完全相等。这样可以确保手语视频与目标音视频的同步播放,提供更好的观看体验。

31、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,相比于目前需要人工提炼字幕的方法,该方案通过人工智能技术实现自动提炼手语字幕,无需人工干预,大大提高了处理效率。

32、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,通过倍速调节技术,该方案可以实现合成出的手语视频与目标音视频总时长完全相等,避免了时长不一致的问题,提供更好的观看体验。

33、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,由于自动化处理和精准控制播放时长的优势,该方案可以大幅缩短手语合成视频的流程,提高工作效率。

34、本专利技术提供的一种音视频与手语合成视频并行完成的处理方法,可以应用于音视频合成和手语合成领域,主要用于为听障言语残疾人提供手语形式的视频,帮助他们获取音视频信息。

本文档来自技高网...

【技术保护点】

1.一种音视频与手语合成视频并行完成的处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,根据每分钟120字的比例,得到所述手语视频能展示的字数。

3.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,所述字幕文件中字数接近所述能展示的字数具体为:每分钟相差不超过八个字。

4.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,将所述字幕文件中文字进行提炼的步骤具体包括:字幕内容分析、关键字提炼、权重筛选和内容归纳与提炼的步骤。

5.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,通过倍速操作,使所述手语视频时长与所述目标视频时长相同。

6.一种音视频与手语合成视频并行完成的处理装置,其特征在于,所述装置包括:

7.手语视频展示方法,其特征在于,所述方法包括:

8.手语视频展示装置,其特征在于,所述装置包括:

9.计算机储存介质,用于储存计算机程序,其特征在于,当所述计算机程序被计算机读取时,所述计算机执行权利要求1所述的处理方法。

10.计算机,包括处理器和储存介质,其特征在于,当所述处理器读取所述储存介质中储存的计算机程序时,所述计算机执行权利要求1所述的处理方法。

...

【技术特征摘要】

1.一种音视频与手语合成视频并行完成的处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,根据每分钟120字的比例,得到所述手语视频能展示的字数。

3.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,所述字幕文件中字数接近所述能展示的字数具体为:每分钟相差不超过八个字。

4.根据权利要求1所述的一种音视频与手语合成视频并行完成的处理方法,其特征在于,将所述字幕文件中文字进行提炼的步骤具体包括:字幕内容分析、关键字提炼、权重筛选和内容归纳与提炼的步骤。

5.根据权利要求1所...

【专利技术属性】
技术研发人员:陈威钢张建宗闫广实
申请(专利权)人:哈尔滨亿时代数码科技开发有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1