一种基于时空感知特征的屏幕内容视频码率控制方法技术

本发明专利技术涉及一种基于时空感知特征的屏幕内容视频码率控制方法，充分考虑人眼视觉对屏幕内容视频的感知特性，利用最新的屏幕图像质量评价方法GFM建立空域感知模型，通过所得到的感知特性进行感知编码。本发明专利技术还充分利用了屏幕内容视频的内容特性以及帧间相关性，对不同的时域相邻块进行分析判断，分为三种不同类型的块，并利用这种特性进行合理的码率分配。本发明专利技术结合时空感知特性对屏幕内容视频进行合理的码率控制，降低误码率，节省码率开销的同时，提高视频的质量，具有重要的意义和价值。

【技术实现步骤摘要】
一种基于时空感知特征的屏幕内容视频码率控制方法
本专利技术涉及视频编解码
，更具体地说，涉及一种基于时空感知特征的屏幕内容视频码率控制方法。
技术介绍
近些年来，随着多媒体和移动互联网技术的快速发展，基于屏幕内容的视频应用越来越加广泛，如3D游戏、视频会议、远程视频教育、移动桌面等。不同于自然视频，屏幕内容视频既包括自然图像部分，又包括由计算机直接生成的文字和图表部分。因此，屏幕内容视频会有锐利的边缘，大面积的平坦区域，较少的颜色种类等特性。为了更高效地对屏幕内容视频编码(ScreenContentCoding，SCC)进行优化，在HEVC(HighEfficiencyVideoCoding)编码标准基础上制定了基于屏幕内容视频的编码标准HEVC-SCC。主要是在HEVC基础上增加了四项新的编码工具，包括为帧内块复制(IntraBlockCopy，IBC)、调色板模式(PaletteMode，PLT)、自适应颜色变换(AdaptiveColorTransform，ACT)和自适应运动矢量分解(AdaptiveMotiveVectorResolution，AMVR)。为了提高编码时的带宽利用率，在保持视频还原清晰度的情况下，对码率进行控制是视频编码中的一项重要技术。但HEVC视频编码标准中扩展的屏幕内容视频编码标准HEVC-SCC中，并没有考虑到人眼视觉系统的感知特性，没有将码率和视觉感知进行结合，造成误码率高，码率开销过大，视频质量有待提高。因此，为了更好地将码率用于屏幕内容视频的感知特性上，本专利技术结合时空感知特性对屏幕内容视频进行合理的码率控制，降低误码率，节省码率开销的同时，提高视频的质量，具有重要的意义和价值。
技术实现思路
本专利技术的目的在于克服现有技术的不足，提供一种基于时空感知特征的屏幕内容视频码率控制方法，结合时空感知特性对屏幕内容视频进行合理的码率控制，更好地将码率用于屏幕内容视频的感知特性上，降低误码率，节省码率开销的同时，提高视频的质量。本专利技术的技术方案如下：一种基于时空感知特征的屏幕内容视频码率控制方法，步骤如下：1)提取视频的空域感知特征GFM；2)提取视频的时域感知特征SSIM，判断时域相邻块的变化情况；3)结合时域空域感知特征进行码率分配。作为优选，步骤1)具体为：提取编码单元像素值，分别在编码树单元层对原始块和失真块进行颜色空间转换；对于亮度分量，提取其Gabor特征进行相似度测量；对于色度分量，直接进行相似度测量，而后将二者进行加权池化，得到空域感知特征GFM。作为优选，步骤2)中，判断时域相邻块的变化情况的方法具体为：计算当前块与其时域相邻块的SSIM值，若SSIM值大于预设阈值T1，则判断为时域不变块；若SSIM值小于预设阈值T2，则为时域突变块；若SSIM值在预设阈值T1和预设阈值T2之间，则判断为时域渐变块。作为优选，步骤3)具体为：将所得到的空域感知特征GFM和时域感知特征SSIM进行加权融合，得到融合感知特征；利用融合感知特征进行码率分配。作为优选，码率分配的规则为：感知质量低的块以及时域突变块，相较于感知质量高的块以及时域不变块，分配较多的码率；对于时域渐变块，按原始标准进行分配。作为优选，所述的感知质量为当前块的感知特征GFM值，当通过当前块的GFM值与当前帧的GFM值的比值大于1，则定义当前块为感知质量高的块，否则，则定义当前块为感知质量低的块。本专利技术的有益效果如下：本专利技术所述的基于时空感知特征的屏幕内容视频码率控制方法，充分考虑人眼视觉对屏幕内容视频的感知特性，利用最新的屏幕图像质量评价方法GFM建立空域感知模型，通过所得到的感知特性进行感知编码。本专利技术还充分利用了屏幕内容视频的内容特性以及帧间相关性，对不同的时域相邻块进行分析判断，分为三种不同类型的块，并利用这种特性进行合理的码率分配。本专利技术结合时空感知特性对屏幕内容视频进行合理的码率控制，降低误码率，节省码率开销的同时，提高视频的质量，具有重要的意义和价值。附图说明图1是本专利技术的流程示意图；图2是获取感知特征GFM的流程示意图。具体实施方式以下结合附图及实施例对本专利技术进行进一步的详细说明。本专利技术为了解决现有屏幕内容视频编码标准未考虑人眼视觉特性以及在码率控制方面精准度低等问题，提供一种基于时空感知特征的屏幕内容视频码率控制方法，用于降低屏幕内容视频编码的误码率，提高率失真优化性能。本专利技术所述的基于时空感知特征的屏幕内容视频码率控制方法，如图1所示，步骤如下：1)输入视频。2)提取视频的空域感知特征GFM(AGaborFeature-BasedQualityAssessmentModel)；具体地，如图2所示，提取编码单元像素值，分别在编码树单元层对原始块和失真块进行颜色空间转换(YUVtoLMN)；对于亮度分量，提取其Gabor特征进行相似度测量；对于色度分量，直接进行相似度测量，而后将二者进行加权池化，得到空域感知特征GFM。3)提取视频的时域感知特征SSIM(StructuralSimilarityIndex)，判断时域相邻块的变化情况；其中，判断时域相邻块的变化情况的方法具体为：计算当前块与其时域相邻块的SSIM值，若SSIM值大于预设阈值T1，则判断为时域不变块；若SSIM值小于预设阈值T2，则为时域突变块；若SSIM值在预设阈值T1和预设阈值T2之间，则判断为时域渐变块。4)结合时域空域感知特征进行码率分配，具体地，将所得到的空域感知特征GFM和时域感知特征SSIM进行加权融合，得到融合感知特征；利用融合感知特征进行码率分配。其中，码率分配的规则为：感知质量低的块以及时域突变块，相较于感知质量高的块以及时域不变块，分配较多的码率；对于时域渐变块，按原始标准进行分配。即，本实施例中，包括三种分配方案：其中，所述的感知质量为当前块的感知特征GFM值，当通过当前块的GFM值与当前帧的GFM值的比值大于1，则定义当前块为感知质量高的块，否则，则定义当前块为感知质量低的块。方案一，对于感知质量低的块以及时域突变块，分配较多的码率；方案二，对于感知质量高的块以及时域不变块，分配较少的码率；方案三，对于时域渐变块，按原始标准(即现有技术的屏幕内容视频编码标准HEVC-SCC)进行分配。上述实施例仅是用来说明本专利技术，而并非用作对本专利技术的限定。只要是依据本专利技术的技术实质，对上述实施例进行变化、变型等都将落在本专利技术的权利要求的范围内。本文档来自技高网...

【技术保护点】
1.一种基于时空感知特征的屏幕内容视频码率控制方法，其特征在于，步骤如下：/n1)提取视频的空域感知特征GFM；/n2)提取视频的时域感知特征SSIM，判断时域相邻块的变化情况；/n3)结合时域空域感知特征进行码率分配。/n

【技术特征摘要】
1.一种基于时空感知特征的屏幕内容视频码率控制方法，其特征在于，步骤如下：
1)提取视频的空域感知特征GFM；
2)提取视频的时域感知特征SSIM，判断时域相邻块的变化情况；
3)结合时域空域感知特征进行码率分配。


2.根据权利要求1所述的基于时空感知特征的屏幕内容视频码率控制方法，其特征在于，步骤1)具体为：提取编码单元像素值，分别在编码树单元层对原始块和失真块进行颜色空间转换；对于亮度分量，提取其Gabor特征进行相似度测量；对于色度分量，直接进行相似度测量，而后将二者进行加权池化，得到空域感知特征GFM。


3.根据权利要求2所述的基于时空感知特征的屏幕内容视频码率控制方法，其特征在于，步骤2)中，判断时域相邻块的变化情况的方法具体为：计算当前块与其时域相邻块的SSIM值，若SSIM值大于预设阈值T1，则判断为时域不变块；若SSIM值小于预设阈值T...

【专利技术属性】
技术研发人员：陈婧，丁佳军，曾焕强，朱建清，蔡灿辉，
申请(专利权)人：华侨大学，
类型：发明
国别省市：福建;35