System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 选择性地增强经压缩的数字内容制造技术_技高网

选择性地增强经压缩的数字内容制造技术

技术编号:43912052 阅读:5 留言:0更新日期:2025-01-03 13:19
本公开涉及选择性地增强数字图像和视频内容的系统、方法和计算机可读介质。例如,本文公开的系统可对原始视频内容进行编码以压缩和解压缩原始视频内容。本文描述的系统可进一步标识感兴趣区域的信息以用于标识经解压缩的视频内容的各部分以分析和移除其中发现的一个或多个压缩伪影。本文描述的系统可以通过增加显示分辨率来进一步增强经解压缩的视频内容。通过标识感兴趣区域和选择性地增强数字视频内容,本文描述的系统可以减少带宽和处理资源的消耗,同时保持数字内容的高视觉质量。

【技术实现步骤摘要】


技术介绍

1、近年来,使用计算设备(例如,移动设备、个人计算机)来接收、存储、编辑、流传输或以其他方式显示数字媒体的使用急剧增加。事实上,现在消费者电子设备显示来自多个不同远程源的实时视频已经很普遍。此外,随着个人计算机、移动设备、游戏控制台和其他消费者电子设备变得更加流行,具有不同计算和显示能力的更多种类的电子设备正被用于各种数字媒体应用中。此外,随着计算设备变得更加复杂,计算设备的显示能力也得到了类似的改进。

2、虽然计算设备在显示数字媒体方面提供了有用的工具,但是用于传送和显示数字媒体的常规系统包括各种问题和缺点。例如,随着数字媒体质量的提高,连接资源(例如带宽)通常不足以使内容提供商能够流传输或以其他方式提供高质量的媒体。此外,即使在连接资源充足且可用于提供高质量媒体内容的情况下,消费者也经常因与下载和处理大量数字内容相关联的各种成本而感到沮丧。此外,用于生成和传送媒体内容的常规加密和解密技术经常导致低质量的内容显示。

3、在传送和显示数字视频内容方面存在这些和其他问题。


技术实现思路

【技术保护点】

1.一种方法,包括:

2.如权利要求1所述的方法,其特征在于,所述去噪模型是基于训练图像对来训练的,所述训练图像对包括第一多个非经压缩的图像和基于压缩后的所述第一多个非经压缩的图像的第二多个经解压缩的数字图像。

3.如权利要求1所述的方法,其特征在于,进一步包括将超分辨率模型应用于所述经去噪的视频帧以生成具有与所述经解码的视频帧相比更高分辨率的输出视频帧,其中所述超分辨率模型包括第二机器学习模型,所述第二机器学习模型被训练成接收具有输入分辨率的输入数字图像以基于输入数字图像来生成具有与所述输入分辨率相比更高分辨率的输出数字图像。

4.如权利要求1所述的方法,其特征在于,所述第一颜色通道包括来自包括亮度通道、第一色度通道和第二色度通道的颜色通道族的亮度通道。

5.如权利要求1所述的方法,其特征在于,所述多个颜色通道包括红绿蓝(RGB)图像的红色通道、绿色通道和蓝色通道。

6.如权利要求1所述的方法,进一步包括:

7.如权利要求1所述的方法,其特征在于,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述第一颜色通道,而不将所述去噪模型应用于共同构成所述经解码的视频帧的一个或多个附加颜色通道。

8.如权利要求1所述的方法,进一步包括:接收所述经解码的视频帧的分段掩码,所述分段掩码包括指示所述经解码的视频帧内的高优先级内容区的经标识的感兴趣区域,其中,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述第一部分的所述经标识的兴趣区域。

9.如权利要求8所述的方法,其特征在于,所述感兴趣区域是基于所述经解码的视频帧内的一个或多个平视显示器(HUD)元素来标识的,所述一个或多个平视显示器(HUD)元素包括作为实况视频流的图形用户界面的一部分显示的信息。

10.如权利要求8所述的方法,其特征在于,结合从服务器设备接收经压缩的数字视频来从所述服务器设备接收所述分段掩码。

11.一种方法,包括:

12.如权利要求11所述的方法,其特征在于,结合从服务器设备接收经压缩的数字视频来从所述服务器设备接收所述可变速率着色缓冲器。

13.如权利要求11所述的方法,其特征在于,所述可变速率着色缓冲器基于所述一个或多个感兴趣区域具有比预定着色精度率阈值高的着色精度率来指示所述一个或多个感兴趣区域。

14.如权利要求11所述的方法,其特征在于,所述去噪模型是基于训练图像对来训练的,所述训练图像对包括第一多个非经压缩的图像和基于压缩后的所述第一多个非经压缩的图像的第二多个经解压缩的数字图像。

15.如权利要求11所述的方法,其特征在于,进一步包括将超分辨率模型应用于所述经去噪的视频帧以生成具有与所述经解码的视频帧相比更高分辨率的输出视频帧,其中所述超分辨率模型包括第二机器学习模型,所述第二机器学习模型被训练成接收具有输入分辨率的输入数字图像以基于输入数字图像来生成具有与所述输入分辨率相比更高分辨率的输出数字图像。

16.如权利要求11所述的方法,其特征在于,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述一个或多个兴趣区域,而不将所述去噪模型应用于所述经解码的视频帧的其他部分。

17.一种系统,包括:

18.如权利要求17所述的系统,其特征在于,所述第一颜色通道包括来自包括亮度通道、第一色度通道和第二色度通道的颜色通道族的亮度通道。

19.如权利要求17所述的系统,其特征在于,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述第一颜色通道,而不将所述去噪模型应用于共同构成所述经解码的视频帧的一个或多个附加颜色通道。

20.如权利要求17所述的系统,进一步包括指令,所述指令可由所述一个或多个处理器执行以:

...

【技术特征摘要】

1.一种方法,包括:

2.如权利要求1所述的方法,其特征在于,所述去噪模型是基于训练图像对来训练的,所述训练图像对包括第一多个非经压缩的图像和基于压缩后的所述第一多个非经压缩的图像的第二多个经解压缩的数字图像。

3.如权利要求1所述的方法,其特征在于,进一步包括将超分辨率模型应用于所述经去噪的视频帧以生成具有与所述经解码的视频帧相比更高分辨率的输出视频帧,其中所述超分辨率模型包括第二机器学习模型,所述第二机器学习模型被训练成接收具有输入分辨率的输入数字图像以基于输入数字图像来生成具有与所述输入分辨率相比更高分辨率的输出数字图像。

4.如权利要求1所述的方法,其特征在于,所述第一颜色通道包括来自包括亮度通道、第一色度通道和第二色度通道的颜色通道族的亮度通道。

5.如权利要求1所述的方法,其特征在于,所述多个颜色通道包括红绿蓝(rgb)图像的红色通道、绿色通道和蓝色通道。

6.如权利要求1所述的方法,进一步包括:

7.如权利要求1所述的方法,其特征在于,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述第一颜色通道,而不将所述去噪模型应用于共同构成所述经解码的视频帧的一个或多个附加颜色通道。

8.如权利要求1所述的方法,进一步包括:接收所述经解码的视频帧的分段掩码,所述分段掩码包括指示所述经解码的视频帧内的高优先级内容区的经标识的感兴趣区域,其中,选择性地应用所述去噪模型包括将所述去噪模型应用于所述经解码的视频帧的所述第一部分的所述经标识的兴趣区域。

9.如权利要求8所述的方法,其特征在于,所述感兴趣区域是基于所述经解码的视频帧内的一个或多个平视显示器(hud)元素来标识的,所述一个或多个平视显示器(hud)元素包括作为实况视频流的图形用户界面的一部分显示的信息。

10.如权利要求8所述的方法,其特征在于,结合从服务器...

【专利技术属性】
技术研发人员:D·G·肯奈特E·C·沃尔斯顿M·高登
申请(专利权)人:微软技术许可有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1