本发明专利技术公开了一种镜头类型的确定方法及装置。该方法包括:将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;根据前后两帧图像中的有效密集区域,对所述特征点进行提纯;所述有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;使用提纯后的特征点,确定所述前后两帧图片的变换关系;根据所述变换关系,对所述两帧图片中的后一帧图像进行图像变换;根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。本发明专利技术通过对同一个镜头下的相邻两张图片进行匹配的方式,确定所属镜头的类型,实现了镜头类型识别的自动化,并且,利用有效密集区域进行匹配的方式,能在提高特征点的匹配的准确度的同时,保证图片匹配的速度。
【技术实现步骤摘要】
本专利技术涉及互联网
,特别涉及一种镜头类型的确定方法及装置。
技术介绍
随着网络以及多媒体技术的迅速发展,涌现出了大量的数字视频,如新闻、广告、监控视频、家庭视频等。数字视频的大量涌现引发了许多新的技术,包括视频存档、编目、索引以及有效存取等,而这些都需要将非结构化的视频数据转换成为结构化的视频数据。视频数据按层次可划分为帧、镜头、场景、故事单元等,其中镜头是视频结构的基本单位,因此对视频镜头的检测成为视频检索和浏览技术的基础工作。对视频中镜头拍摄方式的自动识别属于电视资料编目的描述范畴,镜头的拍摄方式包括:固定镜头、平移、推进和拉伸、镜头转换。传统的做法,镜头的拍摄方式的确定是通过人工观看视频来判断。但是人工识别的方式,存在效率较低,识别准确性较差的问题。近年来出现使用图片识别技术来确定镜头拍摄方式的技术,具体方法是根据镜头下相邻两帧的匹配度,来确定镜头的类型是否发生了变化以及具体发生了什么样的变化,相邻两帧图片是否匹配度的准确判断,关系到后续镜头的类型判断的准确性,如何提高图片匹配的准确性,成为亟待解决的问题。
技术实现思路
鉴于上述问题,提出了本专利技术以便提供一种克服上述问题或者至少部分地解决上述问题的镜头类型的确定方法及装置。本专利技术实施例提供的一种镜头类型的确定方法,包括:将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;根据前后两帧图像中的有效密集区域,对所述特征点进行提纯;所述有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;使用提纯后的特征点,确定所述前后两帧图片的变换关系;根据所述变换关系,对所述两帧图片中的后一帧图像进行图像变换;根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。进一步地,所述提取特征点的步骤之后,还包括:对提取的特征点进行随机抽样一致RANSAC提纯。进一步地,根据前后两帧图像中的有效密集区域,对所述特征点进行提纯,具体包括:分别对两帧图像中的设定区域进行分块,并根据各块的密集度,确定所述设定区域内的密集区域;分别比较所述两帧图片的密集区域中的各特征点,确定所述两帧图片中的有效密集区域;所述有效密集区域中的区域密集度和区域内特征点的匹配程度均满足设定条件;比较两帧图片的有效密集区域中相同位置的块,若前一帧图片中的块包含的特征点,未存在于后一帧图像相同位置的块中,则删除前后两帧图片中对应的特征点;相应地,所述使用提纯后的特征点,确定所述前后两帧图片的变换关系,具体包括:对所述两帧图片的有效密集区域,使用特征点提纯处理后的特征点进行计算,得到图片之间的变换矩阵。进一步地,所述设定区域为前后两帧图片中,沿图片中心辐射的占整个图片4/5大小的区域。进一步地,分别对两帧图像中的设定区域进行分块,并根据各块的密集度,
确定所述设定区域内的密集区域的步骤之前,还包括:将所述两帧图片中的特征点匹配程度小于设定匹配度阈值的特征点删除。本专利技术实施例提供的一种图片的匹配装置,包括:特征点检测模块,用于将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;提纯模块,用于根据前后两帧图像中的有效密集区域,对所述特征点进行提纯;所述有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;变换关系确定模块,用于使用提纯后的特征点,确定所述前后两帧图片的变换关系;图像变换模块,用于根据所述变换关系,对所述两帧图片中的后一帧图像进行图像变换;镜头类型确定模块,用于根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。进一步地,所述提纯模块,还用于在特征点检测模块提取特征点之后,对提取的特征点进行RANSAC提纯。进一步地,所述提纯模块,具体用于分别对两帧图像中的设定区域进行分块,并根据各块的密集度,确定所述设定区域内的密集区域;分别比较所述两帧图片的密集区域中的各特征点,确定所述两帧图片中的有效密集区域;所述有效密集区域中的区域密集度和区域内特征点的匹配程度均满足设定条件;比较两帧图片的有效密集区域中相同位置的块,若前一帧图片中的块包含的特征点,未存在于后一帧图像相同位置的块中,则删除前后两帧图片中对应的特征点;相应地,所述变换关系确定模块,具体用于对所述两帧图片的有效密集区域,使用特征点提纯处理后的特征点进行计算,得到图片之间的变换矩阵。进一步地,所述设定区域为前后两帧图片中,沿图片中心辐射的占整个图
片4/5大小的区域。进一步地,所述提纯模块,进一步用于分别对两帧图像中的设定区域进行分块,并根据各块的密集度,确定所述设定区域内的密集区域的步骤之前,将所述两帧图片中的特征点匹配程度小于设定匹配度阈值的特征点删除。本专利技术的有益效果包括:本专利技术实施例提供的上述镜头类型的确定方法及装置,将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;然后根据前后两帧图像中的有效密集区域,对特征点进行提纯;使用提纯后的特征点,确定前后两帧图片的变换关系;根据变换关系,对两帧图片中的后一帧图像进行图像变换;最后根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。本专利技术实施例通过对同一个镜头下的相邻两张图片进行匹配的方式,确定所属镜头的类型,实现了镜头类型识别的自动化,并且,利用有效密集区域进行匹配的方式,能在提高特征点的匹配的准确度的同时,保证图片匹配的速度。本专利技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。下面通过附图和实施例,对本专利技术的技术方案做进一步的详细描述。附图说明通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本专利技术的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:图1为本专利技术实施例中镜头类型的确定方法的流程图;图2为本专利技术实施例提供的镜头类型的确定方法中S12步骤的具体实施流
程图;图3为本专利技术实施例中图片的匹配装置的结构示意图。具体实施方式下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。首先对本专利技术实施例提供的镜头类型的确定方法的具体实施方式进行说明。本专利技术实施例提供的镜头类型的确定方法,如图1所示,包括:S11、将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;S12、根据前后两帧图像中的有效密集区域,对提取的特征点进行提纯;其中有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;S13、使用提纯后的特征点,确定前后两帧图片的变换关系;S14、根据变换关系,对两帧图片中的后一帧图像进行图像变换;S15、根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。下面分别对上述各步骤进行详细的说明。上述步骤S11-S15针对的两帧相邻的图片,其图像重叠区域不能太小,一般来说,不能少于图片大小的15%,这样才能保证有足够的特本文档来自技高网...
【技术保护点】
一种镜头类型的确定方法,其特征在于,包括:将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;根据前后两帧图像中的有效密集区域,对所述特征点进行提纯;所述有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;使用提纯后的特征点,确定所述前后两帧图片的变换关系;根据所述变换关系,对所述两帧图片中的后一帧图像进行图像变换;根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。
【技术特征摘要】
1.一种镜头类型的确定方法,其特征在于,包括:将镜头下相邻的前后两帧图片分别进行特征点检测,提取特征点;根据前后两帧图像中的有效密集区域,对所述特征点进行提纯;所述有效密集区域中的区域密集度和区域内特征点的匹配度均满足设定条件;使用提纯后的特征点,确定所述前后两帧图片的变换关系;根据所述变换关系,对所述两帧图片中的后一帧图像进行图像变换;根据前一帧图像与变换后的后一帧图像,确定所属镜头的类型。2.如权利要求1所述的方法,其特征在于,所述提取特征点的步骤之后,还包括:对提取的特征点进行随机抽样一致RANSAC提纯。3.如权利要求1或2所述的方法,其特征在于,根据前后两帧图像中的有效密集区域,对所述特征点进行提纯,具体包括:分别对两帧图像中的设定区域进行分块,并根据各块的密集度,确定所述设定区域内的密集区域;分别比较所述两帧图片的密集区域中的各特征点,确定所述两帧图片中的有效密集区域;所述有效密集区域中的区域密集度和区域内特征点的匹配程度均满足设定条件;比较两帧图片的有效密集区域中相同位置的块,若前一帧图片中的块包含的特征点,未存在于后一帧图像相同位置的块中,则删除前后两帧图片中对应的特征点;所述使用提纯后的特征点,确定所述前后两帧图片的变换关系,具体包括:对所述两帧图片的有效密集区域,使用特征点提纯处理后的特征点进行计算,得到图片之间的变换矩阵。4.如权利要求要求3所述的方法,其特征在于,所述设定区域为前后两帧图片中,沿图片中心辐射的占整个图片4/5大小的区域。5.如权利要求要求3所述的方法,其特征在于,分别对两帧图像中的设定区域进行分块,并根据各块的密集度,确定所述设定区域内的密集区域的步骤之前,还包括:将所述两帧图片中的特征点匹配程度小于设定匹配度阈值的特征点删除。6.一种图片的匹配装置...
【专利技术属性】
技术研发人员:胡东方,
申请(专利权)人:无锡天脉聚源传媒科技有限公司,
类型:发明
国别省市:江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。