用于基于瞳孔大小的图像调整的系统和方法技术方案

公开了用于基于瞳孔大小调整图像的系统和方法。具体地说，公开了一种用于调整显示器上正呈现的图像的系统，该系统包括处理器。处理器被配置成识别观看显示器上呈现的图像的用户的瞳孔的大小，至少基于瞳孔的大小确定强度图，以及使用强度图调整图像的至少一部分的强度值。强度图指示对正在显示的图像的至少一部分的强度值的调整量。部分的强度值的调整量。部分的强度值的调整量。

【技术实现步骤摘要】
【国外来华专利技术】用于基于瞳孔大小的图像调整的系统和方法
专利

[0001]本专利技术总体上涉及显示系统。更具体地说，本专利技术涉及在显示系统中用于基于瞳孔大小的图像调整的系统和方法。
[0002]背景
[0003]显示系统用于向用户呈现图像。显示系统可以在增强现实(AR)和/或虚拟现实(VR)系统中实现。呈现在显示器上的彩色图像具有多个像素，其中每个像素包括红光、绿光和蓝光，红光、绿光和蓝光各自根据在相应像素处显示的颜色而具有不同的强度值。观察者可以感知到与预期颜色不同的颜色，这在用户观察到的图像中产生失真或不完美。
[0004]概述
[0005]本文公开了用于基于瞳孔大小调整图像的系统和方法。在一个实现中，一种系统包括耦合到一个或更多个处理器的非暂时性计算机可读存储介质，该计算机可读存储介质具有在其上编码的指令，当指令被一个或更多个处理器执行时，使一个或更多个处理器：识别观看显示器上呈现的图像的用户的瞳孔的大小，至少基于所述瞳孔的大小确定强度图(intensity map)，并使用强度图调整图像的至少一部分的强度值。强度图指示对图像的该至少一部分的强度值的调整量。
[0006]在一些实施例中，该系统包括被配置成检测瞳孔大小的眼睛跟踪系统。在一些实施例中，非暂时性计算机可读存储介质还存储用于使一个或更多个处理器从眼睛跟踪系统接收瞳孔的大小的程序指令。
[0007]在一些实施例中，眼睛跟踪系统还被配置成检测用户的注视角，并且其中确定强度图包括至少基于用户的注视角和瞳孔的大小来确定强度图。在一些实施例中，非暂时性计算机可读存储介质还存储程序指令，以用于使一个或更多个处理器从眼睛跟踪系统接收用户的注视角，并至少基于用户的注视角和瞳孔的大小来确定强度图。
[0008]在一些实施例中，识别瞳孔的大小包括至少基于环境光和显示器上呈现的图像的强度来估计瞳孔的大小。在一些实施例中，非暂时性计算机可读存储介质还存储程序指令，以用于使一个或更多个处理器通过以下操作识别瞳孔的大小：至少基于环境光和显示器上呈现的图像的强度来估计瞳孔的大小。
[0009]在一些实施例中，确定强度图包括从多个强度图中选择强度图，强度图对应于瞳孔的大小，其中多个强度图中的每一个对应于瞳孔的不同大小。在一些实施例中，非暂时性计算机可读存储介质还存储程序指令，以用于使一个或更多个处理器通过以下操作确定强度图：从多个强度图中选择强度图，强度图对应于瞳孔的大小，并且其中多个强度图中的每一个对应于瞳孔的不同大小。
[0010]在一些实施例中，确定强度图包括从多个强度图中选择第一强度图，第一强度图对应于较小的瞳孔大小，以及至少基于瞳孔的大小和第一强度图对强度图进行内插。在一些实施例中，非暂时性计算机可读存储介质还存储程序指令，以用于使一个或更多个处理器通过以下操作确定强度图：从多个强度图中选择第一强度图，第一强度图对应于较小的瞳孔大小；以及至少基于所述瞳孔的大小和第一强度图对强度图进行内插。
[0011]在一些实施例中，确定强度图包括从多个强度图中选择第二强度图，第二强度图对应于较大的瞳孔大小，以及基于瞳孔的大小、第一强度图和第二强度图对强度图进行内插。在一些实施例中，非暂时性计算机可读存储介质还存储程序指令，以用于使一个或更多个处理器通过以下操作确定强度图：从多个强度图中选择第二强度图，第二强度图对应于较大的瞳孔大小；以及基于瞳孔的大小、第一强度图和第二强度图对强度图进行内插。
[0012]在一些实施例中，内插包括线性内插算法或加权内插算法。
[0013]在一些实施例中，强度图指示对图像的红色、绿色和蓝色强度值的预定调整量，以对应于参考图像的红色、绿色和蓝色强度值。
[0014]在一些实施例中，显示器包括波导和投影设备，投影设备被配置成朝向波导投射光束，并且波导被配置成接收光束并在显示器上呈现图像。
[0015]在一些实施例中，调整图像包括向显示器的投影设备发送信号，该信号被配置成使投影设备调整光束的至少一部分，以便调整与显示器上呈现的部分图像相对应的红色、绿色和蓝色强度值。在一些实施例中，非暂时性计算机可读存储介质还存储用于通过向显示器的投影设备发送信号来使一个或更多个处理器调整图像的程序指令，其中该信号被配置成使投影设备调整光束的至少一部分，以便调整与显示器上呈现的部分图像相对应的红色、绿色和蓝色强度值。
[0016]本专利技术的另一实现涉及一种用于调整可穿戴设备的显示器上的图像的方法。在一些实施例中，可穿戴设备是头戴式设备(HMD)。该方法包括：由可穿戴设备的处理器确定观看显示器上呈现的图像的用户的瞳孔的大小；由处理器至少基于瞳孔的大小确定强度图；以及使用强度图调整图像的至少一部分。
[0017]在一些实施例中，确定强度图包括由处理器从存储器选择多个强度图中的强度图，其中多个强度图中的每一个对应于瞳孔的相应大小。
[0018]在一些实施例中，确定强度图包括由处理器从存储器选择多个强度图中的第一强度图，第一强度图对应于较小的瞳孔大小，以及至少基于瞳孔的大小和第一强度图对强度图进行内插。
[0019]在一些实施例中，确定强度图还包括从多个强度图中选择第二强度图，第二强度图对应于较大的瞳孔大小，以及基于瞳孔的大小、第一强度图和第二强度图对强度图进行内插。
[0020]在一些实施例中，确定强度图还包括至少基于瞳孔的大小和用户的注视角来选择强度图。
[0021]在一些实施例中，强度图是指示红色、绿色和蓝色强度值的量的预配置图(preconfigured map)，用于调整部分图像以对应于参考图像的红色、绿色和蓝色强度值。
[0022]在一些实施例中，在显示器上呈现图像包括经由投影设备朝向波导显示器投射光束，以及在波导显示器上呈现对应于光束的图像。
[0023]在一些实施例中，调整图像包括向显示器的投影设备发送信号，其中该信号被配置成使投影设备调整光束的至少一部分，以便调整显示器上呈现的部分图像处的红色、绿色和蓝色强度值。
[0024]本专利技术的另一实现涉及头戴式显示器(HMD，head mounted display)。该HMD包括被配置成附接到用户头部的外壳、设置于外壳内的显示器，该显示器被配置成向用户呈现
图像、设置于外壳内的一个或更多个处理器以及非暂时性计算机可读介质。计算机可读存储介质具有在其上编码的指令，指令当被一个或更多个处理器执行时，使所述一个或更多个处理器至少基于关于用户瞳孔的大小的信息确定强度图，其中强度图指示对图像的至少一部分的红色、绿色和蓝色强度值的调整量，并使用强度图调整图像的至少一部分的红色、绿色和蓝色强度值。
[0025]下面详细讨论这些和其他方面和实现。前述信息和以下详细描述包括各种方面和实现的说明性示例，并且提供了用于理解所要求保护的方面和实现的性质和特征的综述或框架。附图提供了对各种方面和实现的说明和进一步理解，并且被结合在本说明书中并构成本说明书的一部分。
[0026]附图简述
[0027]附图不意在按比例本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种耦合到一个或更多个处理器的非暂时性计算机可读存储介质，所述计算机可读存储介质具有在其上编码的指令，当所述指令由所述一个或更多个处理器执行时，使所述一个或更多个处理器：识别观看显示器上呈现的图像的用户的瞳孔的大小；至少基于所述瞳孔的大小确定强度图，其中，所述强度图指示对所述图像的至少一部分的强度值的调整量；以及使用所述强度图调整所述图像的所述至少一部分的强度值。2.根据权利要求1所述的非暂时性计算机可读存储介质，还存储用于使所述一个或更多个处理器从眼睛跟踪系统接收所述瞳孔的大小的程序指令。3.根据权利要求2所述的非暂时性计算机可读存储介质，还存储程序指令，以用于使所述一个或更多个处理器从所述眼睛跟踪系统接收所述用户的注视角，并至少基于所述用户的注视角和所述瞳孔的大小来确定所述强度图。4.根据任一前述权利要求所述的非暂时性计算机可读存储介质，还存储程序指令，以用于使所述一个或更多个处理器通过以下操作识别所述瞳孔的大小：至少基于环境光和所述显示器上呈现的图像的强度来估计所述瞳孔的大小。5.根据任一前述权利要求所述的非暂时性计算机可读存储介质，还存储程序指令，以用于使所述一个或更多个处理器通过以下操作确定所述强度图：从多个强度图中选择所述强度图，所述强度图对应于所述瞳孔的大小，并且其中，所述多个强度图中的每一个对应于所述瞳孔的不同大小。6.根据任一前述权利要求所述的非暂时性计算机可读存储介质，还存储程序指令，以用于使所述一个或更多个处理器通过以下操作确定所述强度图：从多个强度图中选择第一强度图，所述第一强度图对应于较小的所述瞳孔的大小；以及至少基于所述瞳孔的大小和所述第一强度图对所述强度图进行内插；并且优选地进一步存储程序指令，以用于使所述一个或更多个处理器通过以下操作确定所述强度图：从所述多个强度图中选择第二强度图，所述第二强度图对应于较大的所述瞳孔的大小；以及基于所述瞳孔的大小、所述第一强度图和所述第二强度图对所述强度图进行内插；并且优选地，其中，所述内插包括线性内插算法或加权内插算法。7.根据任一前述权利要求所述的非暂时性计算机可读存储介质，其中，所述强度图指示对所述图像的红色、绿色和蓝色强度值的预定调整量，以对应于参考图像的红色、绿色和蓝色强度值。8.根据任一前述权利要求所述的非暂时性计算机可读存储介质，其中，所述显示器还包括波导和投影设备，所述投影设备被配置成朝向所述波导投射光束，并且所述波导被配置成接收所述光束并在所述显示器上呈现所述图像；并且优选地还存储程序指令，以用于通过向所述显示器的所述投影设备...

【专利技术属性】
技术研发人员：巴里，
申请(专利权)人：脸谱科技有限责任公司，
类型：发明
国别省市：