【技术实现步骤摘要】
本专利技术涉及3d视频通话，具体涉及一种基于裸眼3d光场显示的桌面式视频通话装置及方法。
技术介绍
1、传统的视频通话系统采用摄像头、2d显示屏幕作为载体，显示通话双方的视频画面，缺乏空间真实感。
2、为了营造更沉浸式的通话体验，采用裸眼3d显示等技术，使得通话双方置身于同一空间，大副提升通话体验，但是现有的3d视频通话装置直接使用裸眼3d像源屏作为显示屏，为了实现大屏式沟通，导致3d视频通话装置的装置系统庞大，且尺寸体积偏大，不方便携带式使用。
技术实现思路
1、本专利技术的目的在于提供基于一种基于裸眼3d光场显示的桌面式视频通话装置及方法，以解决现有技术中3d视频通话的装置过于庞大的技术问题。
2、为解决上述技术问题，本专利技术具体提供下述技术方案：
3、一种基于裸眼3d光场显示的桌面式视频通话装置，包括：
4、设置在壳体上的视窗，以及安装在所述视窗上端的双目摄像头，所述双目摄像头用于获取当前通话方的图像画面；
5、视频处理通讯模块，用于对所述图像画面转化为左右双视点3d视频格式，形成3d视频流，并发送到另一通话方；
6、裸眼3d像源屏，用于接收并播放另一通话方的所述3d视频流；
7、虚像放大机构，用于对所述另一通话方的所述3d视频流进行反射放大，形成左右视觉感知的虚像视频；
8、视频显示调整模块，用于通过所述双目摄像头中的其中一个摄像头测量当前通话方的瞳孔位置和瞳距信息，基于当前通
9、作为本专利技术的一种优选方案，所述虚像放大机构包括所述裸眼3d像源屏上的凸透镜、设置在所述壳体内部且与所述凸透镜对立分布的凹面反射镜，以及设置在所述凸透镜下方的凹面镜，所述裸眼3d像源屏内的显示图像经过所述凸透镜、凹面反射镜和凹面镜的反射方法后，形成左右视觉感知的虚像视频。
10、作为本专利技术的一种优选方案，所述凹面反射镜和凹面镜均为活动安装方式，所述凹面反射镜和凹面镜通过活动驱动机构安装在所述壳体内壁上，所述凹面反射镜和凹面镜能够调整其仰俯角度和相对水平面的摆动角度，通过调整所述凹面反射镜和凹面镜的仰俯角度和摆动角度来对所述3d视频流进行多角度显示。
11、作为本专利技术的一种优选方案，所述视频显示调整模块包括控制系统以及与所述控制系统连接的瞳孔中心点识别模块，所述瞳孔中心点识别模块根据瞳孔轮廓确定当前通话者的瞳孔位置；
12、所述控制系统通过人眼追踪算法计算获取的通话者的双眼位置给到所述裸眼3d像源屏的排图软件，所述排图软件根据该双眼位置按照左右双视点的方式进行排图输出，使得通话者的左右眼的位置分别刚好处于左视点和右视点区域；
13、且所述凹面反射镜和凹面镜的活动驱动机构与所述控制系统连接，所述控制系统基于当前通话方的瞳孔位置和瞳距信息调控所述活动驱动机构工作，以调整所述凹面反射镜和凹面镜的仰俯角度，从而调整最终形成的虚像视频的显示角度。
14、作为本专利技术的一种优选方案，所述裸眼3d像源屏上的所述凸透镜通过平移调整机构带动移位，所述控制系统与所述平移调整机构连接，所述平移调整机构用于调整所述凸透镜本身与所述裸眼3d像源屏之间的距离，以调整对所述裸眼3d像源屏内的图像画面的放大倍数；
15、所述控制系统基于所述当前通话者的瞳孔位置，实时调整所述凸透镜的位置以输出显示适合所述当前通话者观看的3d虚拟画面大小。
16、作为本专利技术的一种优选方案，所述双目摄像头拍摄当前通话者的面部图像以及眼球图像；
17、所述视窗上安装有用于测量所述当前通话者的瞳距信息的测距传感器，所述控制系统基于所述测距传感器的位置确定当前通话者的瞳孔位置和瞳距信息，所述控制系统建立所述视窗和所述当前通话者之间的三维空间坐标轴；
18、其中，所述控制系统根据所述当前通话者相对于所述视窗所在平面的二维坐标调整所述凹面反射镜和凹面镜的活动驱动机构，以使得所述凹面镜形成的虚拟3d视频的中心位置与所述当前通话者的瞳孔垂直；
19、且所述控制系统根据所述当前通话者相对于所述视窗的垂直距离，调整所述凸透镜的平移调整机构，以使得所述凹面镜形成的虚拟3d视频的放大图像画面与所述当前通话者的瞳孔位置匹配。
20、另外，本专利技术还提供了一种基于裸眼3d光场显示的桌面式视频通话方法，包括以下步骤：
21、步骤100、建立两个桌面式视频通话装置对应的通话方的通讯连接关系；
22、步骤200、利用双目摄像机拍摄当前通话方的图像画面，通过对图像画面进行处理形成左右双视点3d视频格式的3d视频流，将所述当前通话方的3d视频流通过通讯方式发送至另一通话方；
23、步骤300、另一通话方利用所述双目摄像机确定该通话方的双眼瞳孔位置及瞳距信息，基于所述双眼瞳孔位置及瞳距信息调整3d视频流的显示方式，以使得两个通话方看到的对方的图像画面为带景深的3d虚拟画面。
24、作为本专利技术的一种优选方案，在所述步骤200中，将左摄像头拍摄的左图像与右摄像头拍摄的右图像进行立体匹配，从而将双目摄像机拍摄的图像画面转化为左右双视点3d视频格式的3d视频流，具体的实现方式为：
25、步骤201、利用ad代价计算所述左摄像头拍摄的左图像与右摄像头拍摄的右图像中的每个匹配两像素点之间的相似度；
26、其中，ad代价的计算公式为cad＝abs(gl-gr)；
27、式中，cad为ad代价值，gl为左图像上像素点的灰度值，gr为右图像上像素点的灰度值，符号abs表示取绝对值；
28、步骤202、对左摄像头拍摄的左图像与右摄像头拍摄的右图像中的所有像素点的相似度进行聚合计算，聚合计算的公式为：
29、
30、式中，符号l(p,d)代表聚合后的代价，c(p,d)代表当前像素视差为d时的代价值，lr(p-r,d)代表该像素路径上一个像素视差为d时的代价，lr(p-r,d-1)代表该像素路径上一个像素视差为d-1时的代价，lr(p-r,d+1)代表该像素路径上一个像素视差为d+1时的代价，undersetimin lr(p-r,i)代表该像素路径上一个像素所有视差下的最小代价值，p1代表对视差较小(＝1)的情况作惩罚的惩罚项，p2代表对视差较大(>1)的情况作惩罚的惩罚项；
31、步骤203、在左图像上逐像素查询该像素点与之对应的右图像像素点，然后以下式计算视差，从而形成视差图；
32、d＝xl-xr；
33、式中xl是左图像像素点的横轴像素坐标，xr是右图像像素点的横轴像素坐标，d为左图像像素点的视差值；
34、步骤204、通过亚像素拟合进一步提高视差图精度，通过左右一致性检验去除误匹配点，通过去除本文档来自技高网...
【技术保护点】
1.一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，包括：
2.根据权利要求1所述的一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，
3.根据权利要求2所述的一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，
4.根据权利要求3所述的一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，
5.根据权利要求4所述的一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，
6.根据权利要求5所述的一种基于裸眼3D光场显示的桌面式视频通话装置，其特征在于，
7.一种基于裸眼3D光场显示的桌面式视频通话方法，应用权利要求1-6任一项所述的裸眼3D光场显示的桌面式视频通话装置，其特征在于，包括以下步骤：
8.根据权利要求7所述的一种基于裸眼3D光场显示的桌面式视频通话方法，其特征在于，
9.根据权利要求7所述的一种基于裸眼3D光场显示的桌面式视频通话方法，其特征在于，
10.根据权利要求9所述的一种基于裸眼3D光场显示的桌面式视频通话方法，其特征在于
...【技术特征摘要】
1.一种基于裸眼3d光场显示的桌面式视频通话装置，其特征在于，包括：
2.根据权利要求1所述的一种基于裸眼3d光场显示的桌面式视频通话装置，其特征在于，
3.根据权利要求2所述的一种基于裸眼3d光场显示的桌面式视频通话装置，其特征在于，
4.根据权利要求3所述的一种基于裸眼3d光场显示的桌面式视频通话装置，其特征在于，
5.根据权利要求4所述的一种基于裸眼3d光场显示的桌面式视频通话装置，其特征在于，
6.根据权利要求5所述的一种基于...
【专利技术属性】
技术研发人员：翁海燕，陆艳，张毅军，
申请(专利权)人：上海云视科技股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。