用于促进运动帧的感兴趣区域跟踪的方法和装置制造方法及图纸

技术编号:34504574 阅读:20 留言:0更新日期:2022-08-13 20:46
本公开内容涉及用于显示处理的方法和装置。例如,所公开的技术促进运动帧的兴趣区域跟踪。本公开内容的各方面可以识别与帧相关联的多个层中的感兴趣层。本公开内容的各方面还可以基于与所识别的感兴趣层相关联的特性来确定感兴趣区域的坐标。此外,本公开内容的各方面可以基于感兴趣区域的坐标来对帧的感兴趣区域执行显示处理。趣区域执行显示处理。趣区域执行显示处理。

【技术实现步骤摘要】
【国外来华专利技术】用于促进运动帧的感兴趣区域跟踪的方法和装置


[0001]概括而言,本公开内容涉及处理系统,以及更具体地,本公开内容涉及用于显示或图形处理的一种或多种技术。

技术介绍

[0002]计算设备通常利用图形处理单元(GPU)来加速对用于显示的图形数据的渲染。这样的计算设备可以包括例如计算机工作站、诸如所谓的智能电话的移动电话、嵌入式系统、个人计算机、平板计算机和视频游戏控制台。GPU执行图形处理管道,图形处理管道包括一起操作以执行图形处理命令以及输出帧的一个或多个处理阶段。中央处理单元(CPU)可以通过向GPU发布一个或多个图形处理命令来控制GPU的操作。现代的CPU通常能够并发地执行多个应用,其中的每个应用在执行期间可能需要利用GPU。
[0003]计算设备可以促进一个或多个图形数据生产者生成用于显示的图形数据。例如,计算设备可以包括处理单元,该处理单元被配置为将生成的图形数据转换为帧以便经由显示客户端进行显示。在一些示例中,可以在呈现之前对帧执行图像处理技术,以改进呈现期间帧的各方面。

技术实现思路

[0004]下文给出了一个或多个方面的简要概述,以便提供对这样的方面的基本理解。该概述不是对全部预期方面的广泛概述,以及既不旨在标识全部方面的关键要素,也不旨在描绘任何或全部方面的范围。其唯一目的是以简化形式呈现一个或多个方面的一些概念,作为稍后呈现的更多具体实施方式的序言。
[0005]在本公开内容的一方面中,提供了一种方法、计算机可读介质和装置。该装置可以是显示处理器、显示处理单元(DPU)、图形处理器、GPU、应用处理器、CPU或视频处理器。该装置可以识别与帧相关联的多个层中的感兴趣层。该装置还可以基于与所识别的感兴趣层相关联的特性来确定感兴趣区域的坐标。此外,该装置可以基于感兴趣区域的坐标来对帧的感兴趣区域执行显示处理。
[0006]在附图和下文的描述中阐述了本公开内容的一个或多个示例的细节。根据说明书和附图以及根据权利要求书,本公开内容的其它特征、目的和优势将是显而易见的。
附图说明
[0007]图1是示出根据本公开内容的一种或多种技术的设备的框图。
[0008]图2示出了根据本公开内容的一种或多种技术的包括多个层的示例合成帧。
[0009]图3示出了根据本公开内容的一种或多种技术的在第一时间处显示的示例第一帧和在第二时间处显示的示例第二帧。
[0010]图4到6示出了根据本公开内容的一种或多种技术的示例方法的示例流程图。
[0011]图7是示出根据本公开内容的一种或多种技术的示例内容生成系统的框图。
具体实施方式
[0012]概括而言,本文公开的示例提供了用于改进用于运动帧的感兴趣区域跟踪的技术。如本文所使用的,术语“运动帧”是指显示(或呈现)帧序列并且帧序列中的至少两个帧的图形内容不同的实例。在一些示例中,在设备上执行的一个或多个应用可以生成用于显示的图形数据。例如,在设备上执行的应用可以生成与设备状态指示符相关的图形数据,诸如当前时间、当前日期、音频音量、信号强度指示符等。在设备上执行的另一应用可以生成与背景接口相关的图形数据,诸如墙纸和/或显示器的边缘。在设备上执行的另一应用可以生成与应用程序用户界面相关的图形数据,以用于显示由相应应用生成的图形内容。然后,可以渲染(例如,由图形处理器)由相应应用生成的图形数据并且将其作为单独的层存储在层缓冲器中。例如,可以渲染与设备状态指示符相关的图形数据并且将其作为状态栏层存储在层缓冲器处,可以渲染与背景接口相关的图形数据并且将其作为背景层存储在层缓冲器中,并且可以渲染与应用用户界面相关的图形数据并且将其作为应用接口层存储在层缓冲器处。
[0013]在一些示例中,为了促进所生成的图形数据的呈现,所公开的技术提供了一种示例合成器,该合成器被配置为检索存储在层缓冲器中的层并且合成(或混合)层以生成可以经由显示客户端显示的合成帧。例如,合成器可以确定要显示哪些层,哪些层可能被遮挡(例如,被另一层遮挡)等等,并且基于确定生成合成帧。然后,显示客户端可以访问合成帧(有时称为“混合帧”)进行呈现。
[0014]在一些示例中,所公开的技术可以应用显示处理技术来改进显示帧的各方面。例如,所公开的技术可以包括本地色调映射(LTM)引擎,以促进提高所显示的帧的亮度。在一些示例中,所公开的技术可以包括小波降噪(WNR)引擎和/或时间降噪(TNR)引擎,以降低所显示的帧中的噪声。在一些示例中,所公开的技术可以包括断言显示调整引擎,以促进调整区域中的每个像素的伽马或颜色,以适应可变的照明条件。在一些示例中,所公开的技术可以采用额外或替代的显示处理技术(诸如饱和度调整技术、色调调整技术和/或温度调整技术),以改进所显示的帧的视觉方面。
[0015]在一些示例中,层中的一个或多个层的位置可能在从一个帧到下一帧时改变。例如,可以移除层,可以替换层,可以调整层的大小,等等。为了缓解对帧之间一个或多个层的变化位置的担忧,一些示例可以在整个帧上执行一个或多个显示处理技术。
[0016]然而,应当理解,在帧上应用显示处理技术可能消耗设备的资源(例如,处理资源、存储器资源、通信负载等)。还应当理解,将显示处理技术应用于整个合成帧(和/或对应于相应帧的所有层)可能是低效的。例如,帧的一个或多个部分的重要性可能相对低于帧的其他部分。例如,帧可以包括状态栏层(例如,当前时间、当前日期、当前信号强度指示符等)、背景层(例如,墙纸等)和应用接口层的各方面。应用接口层可以对应于由图像查看应用生成的图形数据。在一些这样的示例中,当显示合成帧时,通过将一种或多种显示处理技术应用于应用接口层,而不对状态栏层和背景层执行一种或多种显示处理技术,来改善应用接口层的视觉方面可能是有益的。
[0017]本文公开的示例技术促进识别帧的感兴趣层,并且对所识别的感兴趣层执行一种或多种显示处理技术,并且避免在整个帧上执行一种或多种显示处理技术。例如,所公开的技术使得帧的多个层能够被生成并且被存储在层缓冲器中。在一些这样的示例中,多个层
中的每个层可以与标识符和位置信息相关联。标识符(例如,字母数字字符串)可以用于识别层和/或生成了与相应层相关联的图形数据的应用。位置信息可以用于识别帧的坐标(诸如x

y位置),以显示相应层。
[0018]本文公开的示例技术能够将与帧相关联的层的层标识符与一个或多个优先级标识符进行比较,以促进识别感兴趣层。例如,数据结构(诸如列表、查找表等)可以包括与优先级层相关联的一个或多个标识符。如本文所使用的,术语“优先级层”是指改进层的图形内容的视觉方面可能有益的一个或多个层。例如,数据结构(本文中有时被称为“感兴趣层列表”或“感兴趣层列表”)可以被填充有一个或多个标识符,这些标识符对应于配置用于生成图像、动画、图像序列、视频等的应用。所公开的技术可以使用层标识符来查询数据结构以获得任何匹配标识符。在一些这样的示例中,所公开的技术可以将与匹配标识符相对应的帧的任何层标记((或标本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图形处理的方法,包括:识别与帧相关联的多个层中的感兴趣层;基于与所识别的感兴趣层相关联的特性来确定感兴趣区域的坐标;以及基于所述感兴趣区域的坐标来对所述帧的所述感兴趣区域执行显示处理。2.根据权利要求1所述的方法,其中,所述识别所述感兴趣层包括:将与所述多个层中的每个层相关联的相应标识符与优先级标识符列表进行比较。3.根据权利要求2所述的方法,其中,所述优先级标识符列表是预生成的标识符列表。4.根据权利要求2所述的方法,还包括:基于所述优先级标识符列表来生成经修改的优先级标识符列表;以及将与所述多个层中的每个层相关联的所述相应标识符与所述优先级标识符列表和所述经修改的优先级标识符列表进行比较。5.根据权利要求1所述的方法,其中,与所识别的感兴趣层相关联的所述特性包括定义所识别的感兴趣层的边界的坐标。6.根据权利要求5所述的方法,其中,所述确定所述感兴趣区域的坐标包括:将所述坐标重用作所述感兴趣区域的坐标。7.根据权利要求5所述的方法,其中,所述确定所述感兴趣区域的坐标包括:修改所述坐标以确定所述感兴趣区域的坐标。8.根据权利要求1所述的方法,还包括:执行与所述帧相关联的所述多个层的合成,并且其中,所述执行所述帧的所述感兴趣区域的所述显示处理是在所述执行所述合成之后执行的。9.根据权利要求1所述的方法,还包括:基于所述执行所述帧的所述感兴趣区域的所述显示处理来接收经处理的层;以及执行与所述帧相关联的所述多个层和所述经处理的层的合成。10.根据权利要求1所述的方法,其中,所述执行所述显示处理包括:执行饱和度调整技术、色调调整技术、温度调整技术和断言显示调整技术中的至少一项。11.根据权利要求1所述的方法,还包括:显示所述帧,其中,所显示的帧包括对其执行所述显示处理的第一部分和不对其执行所述显示处理的第二部分。12.一种用于显示处理的装置,包括:存储器;以及至少一个处理器,其耦合到所述存储器并且被配置为:识别与帧相关联的多个层中的感兴趣层;基于与所识别的感兴趣层相关联的特性来确定感兴趣区域的坐标;以及基于所述感兴趣区域的坐标来对所述帧的所述感兴趣区域执行显示处理。13.根据权利要求12所述的装置,其中,所述至少一个处理器被配置为通过以下操作来识别所述感...

【专利技术属性】
技术研发人员:张楠李萍徐勇军
申请(专利权)人:高通股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1