结构光三维内窥镜装置制造方法及图纸

本发明专利技术公开了一种结构光三维内窥镜装置，包括：内窥镜插入管包含传输结构光的光纤束，投影镜头，以及摄像模组。三个LED光源位于内窥镜插入管的外部，并通过透镜耦合照明光纤束的三个进口。光纤束三进一出，末端规则排列成光纤束矩形阵列，每三列为一个周期，其中，每个周期中不同列对应不同光源的光。摄像模组包含摄像物镜、用于采集图像的CMOS传感器和CMOS驱动电路。三个LED光源分时工作，其照明光通过规则排列的光纤束阵列后，产生亮暗间隔的不同相位结构光条纹，再由投影镜头放大照明在体内组织上，摄像模组采集结构光照明图像，并通过驱动电路，传输至相机接口并进一步传输至相机控制单元CCU后，进行解码处理，得到体内组织的深度图并实现三维重建。

Structured light three-dimensional endoscope device

The invention discloses a structured light three-dimensional endoscope device, comprising an endoscope insertion tube, an optical fiber bundle including a transmission structure light, a projection lens, and an image pickup module. The three LED light sources are located outside the endoscope insert tube and coupled to the three inlet of the optical fiber bundle by a lens coupling. A three fiber bundle, fiber bundle end rules are arranged in a rectangular array, each of the three columns for a cycle, which correspond to different columns in each period of different light sources. The camera module comprises an imaging objective lens, an CMOS sensor for collecting images and a CMOS driving circuit. Three LED light can work the illumination light through the optical fiber array with regular arrangement, different phase structure light dark interval stripes, a projection lens magnification lighting in tissue, camera module structured light image acquisition, and through the drive circuit, the transmission to the camera interface and further transfer to the camera control unit CCU, decoding process, depth map can be obtained in vivo and realize 3D reconstruction.

【技术实现步骤摘要】
结构光三维内窥镜装置
本专利技术涉及一种内窥镜，尤其是一种结构光三维内窥镜装置。
技术介绍
基于内窥镜的微创手术在达到相同手术目的的前提下减少了患者的损伤和应激，得到了越来越广泛的应用。然而一般内窥镜只提供平面图像,缺乏深度信息，给医生的操作带来极大的困难。传统的立体视觉的方法可以应用于内窥镜系统当中从而得到深度信息，然而这种方法依赖于两个相机寻找并匹配图像点，在均匀的组织中可能匹配失效。结构光照明的方法可以有效的避免这个问题，它将传统的立体视觉系统中的一个相机替换为可以投影特殊图案的投影仪，并根据投影仪和相机的几何关系进行三维重建。其中投影的图案是经过特殊编码且唯一识别的结构光，这可以应用于需要实时显示图像的医学手术当中去。
技术实现思路
本专利技术的目的在于针对传统内窥镜缺乏深度信息的缺陷，提供一种基于结构光扫描的三维内窥镜系统，从而实现体内组织三维形貌的准确测量。本专利技术的目的是通过以下技术方案来实现的：一种结构光三维内窥镜装置，包括：内窥镜插入管、三个LED冷光光源、微处理器、相机控制单元CCU以及光源接口、相机接口；微处理器通过信号线与相机接口、光源接口和相机控制单元CCU分别连接，内窥镜插入管包含用于传输结构光的光纤束、投影镜头、以及摄像模组，摄像模组包括CMOS图像传感器、CMOS驱动电路和成像镜头，投影镜头和成像镜头位于内窥镜插入管尾部的镜头座上，，所述的光纤束为三进一出，输入端的三个进口各通过一个耦合透镜被三个LED冷光光源耦合照明，光纤束末端端面位于投影镜头的物面，CMOS图像传感器位于成像镜头的像面，CMOS驱动电路通过信号线与相机接口相连，为CMOS图像传感器提供必要的工作时序，相机控制单元CCU通过信号线与相机接口连接，用于对得到的结构光图像进行预处理并进一步三维重建。所述的光纤束三进一出，其输入端被三个LED冷光光源分别耦合照明，末端规则排列成光纤束矩形阵列，该阵列中每三列为一个周期，每个周期中不同列对应三个不同光源的光。微处理器通过光源接口控制三个LED冷光源分时工作，且分别发射三个不同相位的结构光。三个LED冷光源出射的结构光条纹光强值相等，相位差为120°，亮暗间隔。当三个LED冷光源同时工作，光纤束末端出射无相位差的白光，此时三维内窥镜可以当做常规内窥镜进行使用。本专利技术中，LED光源可以为三个分时照明且出射光相位间隔120°的LED冷光源，光纤束为三进一出的光纤束，三个LED光源分别照明光纤束的三个进口，而光纤束的出口则规则排列为每三列为一个周期，每个周期中不同列对应不同光源光的矩形阵列。通过分时照明，每一时刻只有一个相位的光条纹照射到物体表面，通过采集三个时刻不同相位的结构光图像，可以对物体进行三维重建。三个LED光源分时工作，其照明光通过规则排列的光纤束阵列后，产生亮暗间隔的不同相位结构光条纹，再由投影镜头放大照明在体内组织上，每一时刻只有一个相位的光条纹照射到物体表面，摄像模组采集结构光照明图像，并通过驱动电路，传输至相机接口并进一步传输至相机控制单元CCU后，进行解码处理，得到体内组织的深度图并实现三维重建。附图说明图1为本专利技术结构光三维内窥镜的结构示意图。图2为光纤束排列示意图。图3位结构光条纹示意图。具体实施方式图1所示为本专利技术内窥镜系统的装置示意图。内窥镜插入管10包含传输结构光的光纤束16，投影镜头14，以及摄像模组32。摄像模组32包括一个CMOS图像传感器12，CMOS驱动电路11和成像镜头13。CMOS传感器12将接受的结构光强度信号转化为电信号。CMOS驱动电路11产生必要的CMOS图像传感器12的工作时序，并将产生的图像数字信号通过信号线17传输至相机接口18。相机接口18通过信号线17为CMOS传感器12和CMOS驱动电路11供电，同时为CMOS传感器12提供时钟信号。CMOS驱动电路11通过信号线17将图像信号传输至相机接口18中进行后续处理。投影镜头14和成像镜头13均为大视场大景深镜头，它们位于镜头座15上。通过镜头座15，投影镜头14和成像镜头13可以进行调焦。其中，光纤束末端端面位于投影镜头14的物面，CMOS图像传感器12位于成像镜头13的像面。相机控制单元CCU27通过信号线34与微处理器20连接，并接收来自微处理器20的控制信号。相机接口18通过信号线33将图像信号传输至相机控制单元CCU27。相机控制单元CCU27对结构光图像进行去噪，图像增强，去镜面高光反射等预处理后，对结构光的相位信息进行解码，得到体内组织的深度图并进一步进行三维重建。得到重建图像后，相机控制单元CCU27可以与显示屏28相连并将重建图像投影在液晶显示屏上或者计算机显示屏上去。也可以通过USB29或者有线无线30将图像数据传输至外部。微处理器20是整个系统的控制核心，通过信号线与相机接口，光源接口和相机控制单元分别进行连接。它控制LED冷光源21、22、23的分时开关、CMOS图像传感器12的同步采集图像、CMOS驱动电路11对图像信号的编解码和传输、以及相机控制单元CCU27对结构光图像进行三维重建等等。结构光的投影系统主要包括LED光源21、22、23，光纤束16，投影镜头14和光源接口19。其中LED光源21、22、23为三个独立的LED，通过信号线31与光源接口19相连。光源接口19为LED光源21、22、23提供时钟信号，并控制三个LED灯的分时开关。通过光源接口19的控制，三个LED灯出射光的光强值近似保持相等，而每个LED灯发出光的相位差约在120°左右。光源接口19通过信号线31为三个LED灯供电，同时为LED灯提供控制信号。光纤束16为三进一出的光纤束，输入端的三个进口分别通过耦合透镜24、25、26被三个LED灯耦合照明，其三个进口输入的光有120°的相位差。输出端将光纤规则排列为矩形阵列，每三列为一个周期，其中，每个周期中不同列对应不同光源的光。LED灯分时照明，同一时刻只有一个相位的LED灯照明，即在某一时刻可以得到0°相位差的条纹图像，下一时刻可以得到120°相位差的条纹图像，下一时刻得到240°相位差的条纹图像，由此可以得到物体表面在三个时刻的三个不同相位的结构光图像。本内窥镜还可以进行常规的白光照明。当系统处于白光照明状态时，光源接口19控制三个LED灯21、22、23同时开启，此时光纤束全部被照亮，光纤束末端出射无相位差的白光，此时三维内窥镜可以当做常规内窥镜进行使用，拥有很好的兼容性。通过以上介绍，本专利技术的三维内窥镜可以将平行的亮暗间隔的相位条纹投影在组织表面，并通过摄像模组得到体内组织的结构光图像，然后利用三维重建算法，计算出体内组织的深度图和三维轮廓。本专利技术的三维内窥镜还可以进行白光照明，此时可以当作常规内窥镜使用。图2所示为光纤束的排列示意图。LED灯1#21，LED灯2#22，LED灯3#23，分别通过耦合透镜24、25、26，照明光纤束16的三个进口35、36、37。光纤束的末端规则排列为矩形阵列，其中LED灯1#21照射的光纤排列在第一列，LED灯2#22照射的光纤排在第二列，LED灯3#23照射的光纤排在第三列，LED灯1#21照射的光纤排在第四列……以此类推，光纤束末端端面上每列光纤均占1/3周期结构本文档来自技高网...

【技术保护点】
一种结构光三维内窥镜装置，其特征在于,包括：内窥镜插入管、三个LED冷光光源、微处理器、相机控制单元CCU以及光源接口、相机接口；微处理器通过信号线与相机接口、光源接口和相机控制单元CCU分别连接，内窥镜插入管包含用于传输结构光的光纤束、投影镜头、以及摄像模组，摄像模组包括CMOS图像传感器、CMOS驱动电路和成像镜头，投影镜头和成像镜头位于内窥镜插入管尾部的镜头座上，所述的光纤束为三进一出，输入端的三个进口各通过一个耦合透镜被三个LED冷光光源耦合照明，光纤束末端端面位于投影镜头的物面，CMOS图像传感器位于成像镜头的像面，CMOS驱动电路通过信号线与相机接口相连，为CMOS图像传感器提供必要的工作时序，相机控制单元CCU通过信号线与相机接口连接，用于对得到的结构光图像进行预处理并进一步三维重建。

【技术特征摘要】
1.一种结构光三维内窥镜装置，其特征在于,包括：内窥镜插入管、三个LED冷光光源、微处理器、相机控制单元CCU以及光源接口、相机接口；微处理器通过信号线与相机接口、光源接口和相机控制单元CCU分别连接，内窥镜插入管包含用于传输结构光的光纤束、投影镜头、以及摄像模组，摄像模组包括CMOS图像传感器、CMOS驱动电路和成像镜头，投影镜头和成像镜头位于内窥镜插入管尾部的镜头座上，所述的光纤束为三进一出，输入端的三个进口各通过一个耦合透镜被三个LED冷光光源耦合照明，光纤束末端端面位于投影镜头的物面，CMOS图像传感器位于成像镜头的像面，CMOS驱动电路通过信号线与相机接口相连，为CMOS图像传感器提供必要的工作时序，相机控制单元CCU通过信号线与相机接口连接，用于对得到的结构光图像进行...

【专利技术属性】
技术研发人员：王立强，袁波，朱高杰，
申请(专利权)人：浙江大学，
类型：发明
国别省市：浙江,33