视频标记方法、装置及视频监控方法和系统制造方法及图纸

本发明专利技术公开了一种视频标记方法、装置及视频监控方法和系统，采用如下方式对视频文件进行标记：提取视频文件之音频信号的声音特征；然后将提取的声音特征与音频事件库中各音频事件进行匹配；当提取的声音特征与至少一个音频事件匹配成功时，表明该视频文件中有该音频事件发生，在视频文件对应位置对发生的该音频事件进行事件标记。本发明专利技术实施例可以通过预先设置音频事件，然后通过提取视频文件中音频信号的声音特征与各音频事件进行匹配从而判断是否需要进行相应的标记，并不需要人工查看视频内容从而决定是否标记，对视频文件进行标记的效率和准确率都可以得到较大的提升。

Video labeling methods, devices and video monitoring methods and systems

The invention discloses a video marking method and device and video monitoring method and system, using the following method to label the video file: extract the sound characteristics of audio and video files of the signal; then the audio event sound features and audio events in the extraction of Library matching; when the sound feature extraction and at least one audio event matching success, that the events of the audio video files, events on the occurrence of the events marking the corresponding position in the audio video files. The embodiment of the invention can preset audio events, then the sound characteristics of audio signal by extracting the video file and the audio events, in order to determine whether the need for appropriate markers, does not require manual viewing video content in order to decide whether to mark, mark the efficiency and accuracy can be improved greatly on the video file.

【技术实现步骤摘要】
视频标记方法、装置及视频监控方法和系统
本专利技术涉及通信领域，尤其涉及一种视频标记方法、装置及视频监控方法和系统。
技术介绍
目前，在监控等其他领域的视频录制中，对于录制的视频文件，都是采用事后手动进行标记的方式。一般过程为：先进行视频录制得到视频文件，然后在视频编辑器中打开一段已录制好的视频，通过人工查看视频找到需要打时间点标记的时刻，在标记栏时间轴上的相应时刻，添加标记指示器，然后添加文字标签。这种方式存在以下问题：整个对视频文件进行标记的过程需要人工查看，并作出是否需要进行标记，以及具体在视频文件的哪个位置标记。不仅效率低，而且是否需要进行标记的判断结果和具体的标记位置都会受人工影响，可能会同时导致标记的准确性差。
技术实现思路
本专利技术实施例为解决：现有对视频标记时采用人工实现，导致效率低、准确性差的问题，提供一种视频标记方法、装置及视频监控方法和系统。为了解决上述问题，本专利技术一实施例提供了一种视频标记方法，包括：提取视频文件之音频信号的声音特征；将提取的声音特征与音频事件库中各音频事件进行匹配；所述音频事件基于事件发生时产生的音频信号的声音特征而建立；如与至少一个所述音频事件匹配成功，在所述视频文件对应位置对发生的该音频事件进行事件标记。为了解决上述问题，本专利技术另一实施例提供了视频监控方法，包括：进行监控视频录制；在视频录制过程中，通过如上所述的视频标记方法对录制得到的视频文件进行事件标记；对视频文件完成一个事件标记后，将事件标记部分的视频文件进行告警显示。为了解决上述问题，本专利技术另一实施例提供了视频标记装置，包括：特征提取模块，用于提取视频文件之音频信号的声音特征；处理模块，用于将所述声音特征与音频事件库中各音频事件进行匹配；所述音频事件基于事件发生时产生的音频信号的声音特征而建立；标记模块，用于在与至少一个所述音频事件匹配成功，在所述视频文件对应位置对发生的该音频事件进行事件标记。为了解决上述问题，本专利技术另一实施例提供了一种视频监控系统，包括监测处理装置和如上所述的视频标记装置；所述视频标记装置用于对视频监控过程中录制的视频进行事件标记，并在对视频文件完成一个事件标记后，向所述监测处理装置告警；所述监测处理装置用于在收到告警后，将所述事件标记部分的视频文件进行告警显示。本专利技术实施例还提供一种计算机存储介质，所述计算机存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行前述的任一项的视频标记方法或视频监控方法。本专利技术的有益效果是：根据本专利技术实施例提供的视频标记方法、装置、视频监控方法和系统以及计算机存储介质，采用如下方式对视频文件进行标记：提取视频文件之音频信号的声音特征；然后将提取的声音特征与音频事件库中各音频事件进行匹配；本专利技术实施例中的音频事件是预先基于事件发生时产生的音频信号的声音特征而建立的。当提取的声音特征与至少一个音频事件匹配成功时，表明该视频文件中有该音频事件发生，在视频文件对应位置对发生的该音频事件进行事件标记。本专利技术实施例可以通过预先设置音频事件，然后通过提取视频文件中音频信号的声音特征与各音频事件进行匹配从而判断是否需要进行相应的标记，并不需要人工查看视频内容从而决定是否标记，对视频文件进行标记的效率和准确率都可以得到较大的提升。附图说明图1为本专利技术实施例一提供的视频标记方法参流程示意图；图2为本专利技术实施例二提供的视频监控方法参流程示意图；图3为本专利技术实施例三提供的视频标记装置结构程示意图；图4为本专利技术实施例三提供的另一视频标记装置结构程示意图；图5为本专利技术实施例三提供的另一视频标记装置结构程示意图；图6为本专利技术实施例三提供的监控系统结构程示意图；图7为本专利技术实施例四提供的监控系统结构程示意图；图8为本专利技术实施例二提供的视频监控方法参流程示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例只是本专利技术中一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。现通过具体实施方式结合附图的方式对本专利技术做出进一步的诠释说明。实施例一：本实施例通过预先设置音频事件，然后提取待处理的视频文件中音频信号的声音特征与各音频事件进行匹配从而自动判断是否需要进行相应的标记，并不需要人工查看视频内容从而决定是否标记，可以大大提升对视频文件进行标记的效率和准确率。具体的，本实施例提供的视频标记方法参见图1所示，包括：S101：提取视频文件之音频信号的声音特征。本实施例中的视频文件包括音频信号和同步录制的视频信号。本实施例中的S101可以在等视频文件录制结束后进行。也可以在视频文件录制过程中进行，在视频文件录制过程进行时，可以提升对视频文件进行标记的处理的及时性，基本可以实现实时标记，这对于一些领域，尤其是视频监控领域，早一分钟或早一秒看到标记的告警内容，对于后续告警事件态势的影响可能都会很不一样。因此在视频文件录制过程中执行S101对于视频监控领域有着重大意义。S102：将提取的声音特征与音频事件库中各音频事件进行匹配。本实施例中的音频事件基于事件发生时产生的音频信号的声音特征而建立。例如对于烟雾报警事件，则会产生烟雾报警器的声音，提取该声音的声音特征则可得到一个烟雾报警的音频事件。又例如，对于一起抢劫或暴力或侵略性事件，对应的可能会有大喊救命等求救声，提取这些声音的声音特征则可得到一个抢劫或暴力或侵略性事件的音频事件。除了上述示例，对于不同事件发生一般有其对应的一种或多种声音的产生，例如，枪击事件会对应的有枪声。而在其他的一些事件则可能会对应产生例如玻璃破碎音声、哭喊声、汽车喇叭声等等。本实施例不再赘述。本领域技术人员应当理解，本实施例中的音频事件可以根据具体的需求灵活配置。S103：判断提取的声音特征是否与至少一个音频事件匹配成功，如是，转至S104；否则，转至S105；S104：在视频文件对应位置对发生的该音频事件进行事件标记。S105：当前无音频事件发生，可以继续等待下一次检测。本实施例通过图1所示的过程，预先设置音频事件，并自动提取视频文件中声音信号的声音特征完成与各音频事件匹配，如与其中一个匹配成功，则代表视频文件中发生了该音频事件，自动在视频文件的相应位置进行事件标记。该判断以及标记过程完全不需要人工参与，既能提升效率，又能提升标记的准确率。进一步的，本实施例的上述过程还可以在视频录制过程中进行，基本可以实现对录制的视频文件完成实时的标记处理，相对现有需在视频文件录制完成后事后进行标记处理的方式，可以大大提升标记处理的时效，这尤其对于视频监控领域，能及时制止一些恶意事件或甚至可避免一些恶意事件的发生，保证用户的财产和生命安全。本实施例中，提取音频信号的声音特征并与音频事件进行匹配可以采用以下过程进行：将音频信号变换到时频域后，提取该音频信号的背景信号和前景信号，具体可以通过基于人类听力的神经机理的行为建模分离出背景信号和前景信号；这样可以消除背景信号的影响。从前景信号中提取声音特征集合，然后从音频事件库中读取音频事件，计算提取的声音特征集合与各音频事件的相似度，当与某一音频事件的相本文档来自技高网...

【技术保护点】
一种视频标记方法，包括：提取视频文件之音频信号的声音特征；将提取的声音特征与音频事件库中各音频事件进行匹配；所述音频事件基于事件发生时产生的音频信号的声音特征而建立；如与至少一个所述音频事件匹配成功，在所述视频文件对应位置对发生的该音频事件进行事件标记。

【技术特征摘要】
1.一种视频标记方法，包括：提取视频文件之音频信号的声音特征；将提取的声音特征与音频事件库中各音频事件进行匹配；所述音频事件基于事件发生时产生的音频信号的声音特征而建立；如与至少一个所述音频事件匹配成功，在所述视频文件对应位置对发生的该音频事件进行事件标记。2.如权利要求1所述的视频标记方法，其特征在于，所述提取视频文件之音频信号的声音特征在视频录制过程中进行。3.如权利要求1所述的视频标记方法，其特征在于，提取所述音频信号的声音特征并与音频事件进行匹配包括：将所述音频信号变换到时频域提取其前景信号；从所述前景信号中提取声音特征集合，计算该声音特征集合与所述音频事件的相似度，得到的相似度大于设定的相似度阈值时，匹配成功。4.如权利要求1-3任一项所述的视频标记方法，其特征在于，在所述视频文件对应位置对发生的所述音频事件进行事件标记包括进行以下标记中的至少一种：在所述视频文件的关键视频帧位置标记所述音频事件发生的开始时间；获取并标记发生的所述音频事件之声源相对拾音器的方向和/或距离信息；获取并标记发生的所述音频事件对应的严重度级别；获取并标记所述音频事件的名称。5.如权利要求4所述的视频标记方法，其特征在于，获取所述音频事件对应的严重度级别包括：根据录制所述视频文件的位置信息和/或当前音频事件发生后的持续时间，确定所述音频事件当前对应的严重度级别。6.如权利要求5所述的视频标记方法，其特征在于，在所述视频文件对应位置进行事件标记包括对音频事件对应的严重度级别进行标记时，还包括：根据严重度级别与标记格式对应关系表，选择与当前音频事件模型的严重度级别对应的标记格式进行标记。7.如权利要求1-3任一项所述的视频标记方法，其特征在于，提取视频文件之音频信号的声音特征为根据预设的检测周期进行提取；所述方法还包括：在相邻检测周期所提取的音频信号的声音特征都与至少一个音频事件匹配成功时，根据...

【专利技术属性】
技术研发人员：韦薇，王启贵，谢思远，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：广东,44