全景立体图像的合成方法、装置及其移动终端制造方法及图纸

技术编号:14334353 阅读:97 留言:0更新日期:2017-01-04 08:22
本发明专利技术公开了一种全景立体图像合成的方法、装置及其移动终端,其中,全景立体图像合成的方法包括:获取图像信息,所述图像信息为一组多帧连续图像;从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像,并分别将所抽取的两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像。通过本发明专利技术实现了全景立体图像合成,满足了用户对全景立体图像的观看需求。

【技术实现步骤摘要】

本专利技术涉及图像处理
,尤其涉及一种全景立体图像的合成方法、装置及其移动终端
技术介绍
图像是由照相机、摄像机等成像设备捕捉实际的画面而产生的图形或影像。随着人们对于图像的要求越来越高,通常希望看到全景图像或者立体图像,全景图像是指图像可以达到符合双眼正常有效视角(大约水平90度,垂直70度)或包括双眼余视角(大约水平180度,垂直90度)以上,乃至360度完整视角范围所拍摄出的图像,立体图像是指具有两个带有位置差的画面代表左右双眼观看的内容,利用左右眼视差让观察人产生带有深度感觉效果的图像。而尽管随着成像设备的发展,具有大视角的镜头,例如广角镜头、鱼眼镜头等得到广泛应用,可以实现超大视角的拍摄,但是仍不能拍摄出全景图像,需要采用图像合成的方式来形成。由于现有三维显示设备的局限,用户不能很方便体验到通过二维摄像所见即所得的效果,导致二维图像合成立体图像的技术并没有得到广泛的应用。但随着虚拟现实、增强现实以及裸眼三维技术的成熟及普及,人们对二维图像合成立体图像的需求会大大增加。专利技术人在研究中发现,现有技术中并没有一种有效的图像合成技术,能够形成全景且立体的图像,以满足用户的需求。
技术实现思路
本专利技术提供一种全景立体图像合成方法,可以合成不同视角的立体图像,以实现全景立体图像,满足用户需求。在第一方面,本专利技术提供一种全景立体图像的合成方法,包括:获取图像信息,所述图像信息为一组多帧连续图像;从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像;分别将抽取的所述两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像。在第二方面,本专利技术还提供一种全景立体图像合成装置,其特征在于,包括:获取单元,用于获取图像信息,所述图像信息为一组多帧连续图像;抽取单元,用于从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像;合成单元,用于分别将抽取的所述两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像。在第三方面,本专利技术又提供一种移动终端,包括:中央处理器,用于获取图像信息,所述图像信息为一组多帧连续图像;从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像,以及分别将抽取的所述两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像;显示屏幕,用于显示所述多帧立体图像。在本专利技术实施例中,通过获取一组多帧连续图像;并从所述多帧连续图像中分别抽取满足预定帧间隔的两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像,解决了现有技术中没有一种有效的图像合成技术,填补了现有技术的空白。实现了全景立体图像合成,满足了用户对全景立体图像的观看需求。附图说明图1为本专利技术实施例一种全景立体图像的合成方法流程示意图;图2为本专利技术实施例沿水平方向的移动拍摄俯视示意图;图3为本专利技术实施例以拍摄对象为圆心的圆周移动拍摄俯视示意图;图4为本专利技术实施例根据人眼位置信息显示多帧立体图像流程示意图;图5为本专利技术实施例根据旋转角度信息显示多帧立体图像流程示意图;图6为本专利技术实施例一种全景立体图像合成装置示意图;图7为本专利技术实施例一种移动终端示意图。具体实施方式下面结合附图和实施例对本专利技术进行详细说明。需要说明的是,如果不冲突,本专利技术实施例以及实施例中的各个特征可以相互结合,均在本专利技术的保护范围之内。另外,虽然在装置示意图中进行了功能模块划分,在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于装置中的模块划分,或流程图中的顺序执行所示出或描述的步骤。下面对本专利技术实施例的全景立体图像的合成方法进行简要描述。在本专利技术实施例中,通过高速连拍或视频拍摄获得一组多帧连续图像,从多帧连续图像中分别抽取满足预定帧间隔的两帧图像。其中,多帧连续图像中存在多组满足预定帧间隔的两帧图像,比如,如果预定帧间隔为3,则第1帧与第4帧图像为一组,第2帧与第5帧图像为一组,依此类推。将多帧连续图像中满足预定帧间隔的两帧图像分别进行立体图像合成,从而获得一组不同视角的多帧立体图像。在本专利技术实施例中,为了确定帧间隔,比如,可以把拍照或录制视频时的旋转角度和移动速度保存到每一张照片或每一帧视频的文件头信息里,然后通过每一张照片或每一帧视频文件头信息里记录的旋转角度及速度来确定帧间隔。在本专利技术实施例中,速度越大应取的帧间隔越小;角度越大应取的帧间隔越小;速度越大而且角度越大应取的帧间隔也越小。同时,为了方便用户观看全景立体图像,在观看合成的立体图像时,根据观看者观看屏幕的视角、或根据屏幕的旋转角度呈现立体图像,从而实现全景立体图像显示。下面结合附图对本专利技术实施例作进一步阐述。图1为本专利技术实施例一种全景立体图像的合成方法流程示意图,如图1所示,本专利技术实施例的方法,包括以下步骤:S11,获取图像信息,所述图像信息为一组多帧连续图像;在本专利技术实施例中,为了准确记录多帧图像信息中每一帧的移动情况,可以记录每一帧图像的移动角度和速度,因此,图像信息可以包含每一帧的移动角度和速度,所述角度和速度记录在每一帧图像的文件头信息中。在本专利技术实施例中,图像信息中包括的移动角度和速度可以均为匀速移动,也可以是变速移动,如图2,图3所示为俯视拍摄过程示意图,其中,图2为沿水平方向的移动拍摄俯视示意图,在图2中照相系统正对拍摄场景从左到右(水平方向)做匀速或变速平移运动,图3为以拍摄对象为圆心的圆周移动拍摄俯视示意图,在图3中照相系统围绕拍摄物体作匀速或变速圆周运动。在移动过程中,照相系统快速连拍或视频录像,从而获得一组连续多帧图像,比如,Img_1,Img_2,….Img_N1,Img_N1+1…。获得一组多帧连续图像,可以采用以下两种方式:第一种方式:如果用户开始获取图像帧后手持设备,比如手机,一直保持匀速匀角度的操作,可以采用延迟拍摄的方式,等用户操作一定时间(1-2秒)后,取得手持设备的移动角度和加速度,并通过加速度可以得到速度,用这些参数决定单位时间内拍摄照片的数量或视频图像帧的数量:当手持设备角度和速度越大时,拍摄越多的图像帧,以获得更好的立体图像;当手持设备角度和速度越小时,获取较少的图像帧,以减少重复数据处理量。在本专利技术实施例中,通过以下两种实现情况判断手持设备是否为匀速运动:第一种是利用加速度传感器,并结合重力传感器来判断,如果加速度传感器显示没有加速度,但是重力传感器显示有移动,说明就是匀速运动;第二种就是利用间隔一定时间获得的图像数据,比较相邻两个图像数据的区别,然后根据区别的大小来判断手机是否在做匀速运动。匀角度可以通过间隔一定时间得到陀螺仪的角度,如果大部分角度一样,就说明手机是匀角度的。第二种方式:在自动连拍或录制视频之前,除通过设置模块可以设置单位时间内连拍图像的数量参数外,还可以同时设定手机角度和手机加速度等参数,从而实现单位场景角度内拍摄的图像的数量或图像帧的数量是相等的,保障后续合成立体照片后,查看立体照片时,立体照片画面效果的一致性。此外,由于单位角度内的图像数量或图像帧的数量是相等的,可以避免在某一角度时,由于拍摄或录制视频时间过长,导致数据量较大,从而导致立体图像合成处理时间过长的问题。S13,从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像,并分别将所抽取的两帧图像进行本文档来自技高网...
全景立体图像的合成方法、装置及其移动终端

【技术保护点】
一种全景立体图像的合成方法,其特征在于,包括:获取图像信息,所述图像信息为一组多帧连续图像;从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像;分别将抽取的所述两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像。

【技术特征摘要】
1.一种全景立体图像的合成方法,其特征在于,包括:获取图像信息,所述图像信息为一组多帧连续图像;从所述多帧连续图像中,分别抽取满足预定帧间隔的两帧图像;分别将抽取的所述两帧图像进行立体图像合成,以获得一组不同视角的多帧立体图像。2.根据权利要求1所述的方法,其特征在于,所述图像信息包含每一帧图像的移动角度和速度,所述角度和速度记录在每一帧图像的文件头信息中。3.根据权利要求2所述的方法,其特征在于,所述图像信息中包含的移动角度和速度均为匀速移动,则所述预定帧间隔与所述角度和速度均成反比。4.根据权利要求3所述的方法,其特征在于,所述预定帧间隔=(总帧数/(角度*速度))/Ω,其中,所述总帧数为所述图像信息中多帧连续图像的数量,所述Ω为测试所得的帧间隔经验值。5.根据权利要求2所述的方法,其特征在于,所述图像信息中包含的移动角度和速度为变速移动;所述预定帧间隔为所述多帧连续图像中第一图像帧分别与所述多帧连续图像中除所述第一图像帧之外的其他图像帧合成立体图像后,选择出质量最优的立体图像对应的图像帧与所述第一图像帧之间的帧间隔。6.根据权利要求3-5中任一项所述的方法,其特征在于,所述匀速移动或变速移动为沿水平方向的移动或以拍摄对象为圆心的圆周移动。7.根据权利要求6所述的方法,其特征在于,所述移动角度和速度越大,获取的图像信息中的连续图像数量越多,所述移动角度和速度越小,获取的图像信息中的连续图像数量越少。8.根据权利要求1-7任一项所述的方法,其特征在于,还包括:对所述立体图像在垂直方向上作运动补偿,以消除呈现所述立体图像时的图像抖动。9.根据权利要求8任一项所述的方法,其特征在于,还包括:显示所述多帧立体图像。10.根据权利要求9所述的方法,其特征在于,所述显示所述多帧立体图像,具体包括:获取人眼相对于显示所述多帧立体图像的显示屏幕的位置信息;根据所述人眼位置信息,确定所述多帧立体图像中显示的特定立体图像。11.根据权利要求9所述的方法,其特征在于,所述显示所述多帧立体图像,具体包括:获取显示所述多帧立体图像的显示屏幕的旋转角度信息;根据所述旋转角度信息,确定所述多帧立体图像中显示的特定立体图像。12.一种全景立体图像合成装置,其特征在于...

【专利技术属性】
技术研发人员:李玉峰陈宏伟付琴琴
申请(专利权)人:深圳创锐思科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1