一种基于透明液晶显示屏的虚拟偶像演播方法和装置制造方法及图纸

技术编号:21248731 阅读:28 留言:0更新日期:2019-06-01 08:17
本发明专利技术涉及一种基于透明液晶显示屏的虚拟偶像演播方法和装置,包括:用于实时生成一个或多个虚拟角色的动作动画的虚拟角色动作系统;设置在舞台上的横置的透明显示屏,用于全息显示一个或多个虚拟角色;与透明显示屏关联的演播场景控制系统;与所述透明显示屏连接的一个或多个交互设备;以及用于控制所述透明显示屏的显示屏控制模块,其中,所述显示屏控制模块设置在舞台下方,所述显示屏控制模块模块化地集成基于透明液晶显示屏的底层驱动接口工具和扩展功能接口工具。本发明专利技术以科技化的硬件提供新潮的影音体验。

A Virtual Idol Broadcasting Method and Device Based on Transparent LCD

The invention relates to a virtual idol broadcasting method and device based on a transparent LCD screen, including: a virtual role action system for real-time animation of one or more virtual roles; a transverse transparent display screen set on the stage for holographic display of one or more virtual roles; a broadcasting scene control system associated with a transparent display screen; and the transmission. One or more interactive devices clearly connected to the display screen, and a display control module for controlling the transparent display screen, in which the display control module is set below the stage, and the display control module modularizes the integration of the bottom drive interface tool and the extended function interface tool based on the transparent liquid crystal display screen. The invention provides a trendy audio-visual experience with scientific and technological hardware.

【技术实现步骤摘要】
一种基于透明液晶显示屏的虚拟偶像演播方法和装置
本专利技术涉及一种基于透明液晶显示屏的虚拟偶像演播方法和装置。
技术介绍
虚拟偶像技术是近年来新兴的一种娱乐载体,简单讲就是设计一名虚拟的角色,通过3D技术让其进行活灵活现的表演,可以是唱歌跳舞,也可以是讲实事新闻等等,在直播界,游戏界等等,非常受广大观众的喜爱。OLED显示技术,是近年来专利技术出的另外一种新技术,他通过有机发光二极管技术的微型化,可以将屏幕做的非常的轻薄,而且可以做出透明的效果。本文提供基于OLED的透明液晶显示屏技术的虚拟偶像实时动捕演播方法和装置就是结合了上述的两种最前沿的技术,将虚拟偶像和新型OLED透明显示全息设备和动作捕捉这三个专利技术有机的结合起来。创造出一种新的演播的表现形式。
技术实现思路
本专利技术提供一种基于透明液晶显示屏的虚拟偶像演播方法和装置,以科技化的硬件提供新潮的影音体验。本专利技术的技术方案第一方面为一种基于透明液晶显示屏的虚拟偶像演播方法,包括:S1、基于三维动画中的角色创建每一个三维角色模型,加入贴图文件,设置肢体动作参数;S2、为三维模型建立和绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;S3、提取每个真实的动捕演员的骨骼数据,然后配置对应的三维角色模型;S4、在动捕室内通过动捕设备实时采集动捕演员的动作信息,将动捕设备的数据传输到图形引擎中,然后实时渲染和驱动相应的角色模型,生成实时视频,并进行直播。进一步,所述步骤S1包括:制作基于三维动画中的三维角色模型,配置制作三维角色的法线光滑组,并调整三维角色模型的UV;根据模型UV制作贴图,根据贴图制作相对应的材质,最后检查角色模型并在图形引擎关联的数据库中归档保存。进一步,所述步骤S2包括:基于三维动画中的三维角色模型,制作动画骨骼,并将骨骼绑定到各自的模型中;并制作相对应的动画,并调整模型的权重和控制器,然后导入到图形引擎关联的数据库中进行归档。进一步,所述步骤S3包括:多名动捕演员进入动捕房间,穿戴标记点动捕服,佩戴头盔式面部表情捕捉系统,然后各自演员对应各自的三维角色模型;通过动捕软件根据骨骼大小比例进行区分,各自演员绑定各自的三维动画模型,然后调试,完成准备工作。进一步,所述步骤S4包括:在进行多人动捕期间,通过红外动捕摄像头实时记录演员的动作并传输到动捕软件;将处理后的动作数据传输到图形引擎工作站中,完成实时渲染;将渲染的画面采集并传输到直播服务器,推送上直播平台进行实时直播。进一步,上述的方法还包括:捕捉演员的肢体动作和/或面部表情,转换为与角色的人设特性关联的肢体动作数据、面部动作数据和角色混音数据,然后关联至图形引擎中的相应的三维角色模型,并且配置演员的肢体动作和/或面部表情与三维角色模型动画的肢体动作和/或面部表情能够实时同步。进一步,上述的方法还包括:根据该面部骨骼来实时捕捉和转换演员的面部动作数据,将实时捕捉的面部动作数据生成面部表情控制指令,通过所述图形引擎生成相应的角色模型的面部表情形状;在角色模型相应面部位置的面部表情形状之间运算生成面部表情动画过渡。本专利技术的技术方案第二方面为一种计算机装置,包括存储器、处理器及储存在存储器上并能够在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述的方法。本专利技术的有益效果为:提出改进的基于透明液晶显示屏的虚拟偶像演播方法和装置;解决了以往的综艺节目或者舞台现场表演中,全息的虚拟偶像多是采用录制好的节目,无法和观众和主持人互动的弊端;解决了以前的虚拟偶像全息显示,多为固定的玻璃幕布投影,且只能在正面观看的弊端,且不能移动的弊端。附图说明图1是本专利技术的方法的实施系统的总体示意图。图2是根据本专利技术实施例中的透明显示屏驱动接口部署的示意图。图3是根据本专利技术实施例中的演员动作捕捉示意图。图4是根据本专利技术的应用情形实施例的示意图。具体实施方式以下将结合实施例和附图对本专利技术的构思、具体结构及产生的技术效果进行清楚、完整的描述,以充分地理解本专利技术的目的、方案和效果。需要说明的是,如无特殊说明,当某一特征被称为“固定”、“连接”在另一个特征,它可以直接固定、连接在另一个特征上,也可以间接地固定、连接在另一个特征上。此外,本公开中所使用的上、下、左、右等描述仅仅是相对于附图中本公开各组成部分的相互位置关系来说的。在本公开中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。此外,除非另有定义,本文所使用的所有的技术和科学术语与本
的技术人员通常理解的含义相同。本文说明书中所使用的术语只是为了描述具体的实施例,而不是为了限制本专利技术。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的组合。应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种元件,但这些元件不应限于这些术语。这些术语仅用来将同一类型的元件彼此区分开。例如,在不脱离本公开范围的情况下,第一元件也可以被称为第二元件,类似地,第二元件也可以被称为第一元件。本文所提供的任何以及所有实例或示例性语言(“例如”、“如”等)的使用仅意图更好地说明本专利技术的实施例,并且除非另外要求,否则不会对本专利技术的范围施加限制。图1是本专利技术方法的应用硬件总体示意图。根据本专利技术的虚拟偶像演播方法和装置,包括:用于实时生成一个或多个虚拟角色的动作动画的虚拟角色动作系统30;设置在舞台上的横置的透明显示屏10,用于全息显示一个或多个虚拟角色;与透明显示屏10关联的演播场景控制系统40;与所述透明显示屏10连接的一个或多个交互设备;以及用于控制所述透明显示屏10的显示屏控制模块20。所述透明显示屏10包括OLED显示器件。这里的透明OLED显示器件要求构成OLED的衬底,电极的材料均为透明材料,器件关闭时透光率达到85%以上,而开启时,从两侧均能观察到发光,其关键之处在于采用高透光率的透明电极和透明TFT。优选地,采用磁控溅射法制备的ZAO薄膜作为透明电极,使得OLED显示器件具有较低的电阻率和较高的透光率,其可见光透过率已超过85%。此外,透明显示屏10还模块化地连接有显示屏控制模块20,所述显示屏控制模块20不是透明的,需要设置在舞台下方。此外,虚拟角色动作系统30包括:用于储存虚拟角色的模型数据的模型数据库31、用于捕捉演员51实时肢体动作的动作捕捉模块32和用于计算动作数据的模型动作运算模块33。所述动作捕捉模块32包括动捕服和头盔式面部表情捕捉设备。演播场景控制系统40包括设置在表演场地的灯光设备41和录播设备42,该录播设备42被配置为将渲染的画面采集并传输到直播服务器,推送上直播平台进行实时直播。图2是根据本专利技术实施例中的透明显示屏10驱动接口部署的示意图。所述显示屏控制模块20的中断处理优先级可以高于其它用户硬件的驱动程序的优先级,并且由虚拟偶像演播方法和装置的GPU优先运行优化加速。所述显示屏控制模块20模块化地集成基于透明液晶显示屏的底层驱动接口工具和扩展功能接口工具。其中所述底层驱动接口工具包括:屏幕分辨率控制单元、屏幕亮度控制单元、屏幕对比度控制单元、屏幕透光率控制单元、屏幕显示饱和度控制单元、屏幕反向显示控制单元、屏幕光感监测单元、屏幕触感或变形监测单元。其中所述扩展功能接口工具是本文档来自技高网
...

【技术保护点】
1.一种用于透明液晶显示屏的虚拟偶像演播系统的演播方法,该系统包括用于实时生成一个或多个虚拟角色的动作动画的虚拟角色动作系统(30);设置在舞台上的横置的透明显示屏(10),用于全息显示一个或多个虚拟角色;与透明显示屏(10)关联的演播场景控制系统(40);与所述透明显示屏(10)连接的一个或多个交互设备;以及用于控制所述透明显示屏(10)的显示屏控制模块(20),其中,所述显示屏控制模块(20)设置在舞台下方,所述显示屏控制模块(20)模块化地集成基于透明液晶显示屏的底层驱动接口工具和扩展功能接口工具,其特征在于,所述方法包括以下步骤:S1、基于三维动画中的角色创建每一个三维角色模型,加入贴图文件,设置肢体动作参数;S2、为三维模型建立和绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;S3、提取每个真实的动捕演员的骨骼数据,然后配置对应的三维角色模型;S4、在动捕室内通过动捕设备实时采集动捕演员的动作信息,将动捕设备的数据传输到图形引擎中,然后实时渲染和驱动相应的角色模型,生成实时视频,并进行直播。

【技术特征摘要】
1.一种用于透明液晶显示屏的虚拟偶像演播系统的演播方法,该系统包括用于实时生成一个或多个虚拟角色的动作动画的虚拟角色动作系统(30);设置在舞台上的横置的透明显示屏(10),用于全息显示一个或多个虚拟角色;与透明显示屏(10)关联的演播场景控制系统(40);与所述透明显示屏(10)连接的一个或多个交互设备;以及用于控制所述透明显示屏(10)的显示屏控制模块(20),其中,所述显示屏控制模块(20)设置在舞台下方,所述显示屏控制模块(20)模块化地集成基于透明液晶显示屏的底层驱动接口工具和扩展功能接口工具,其特征在于,所述方法包括以下步骤:S1、基于三维动画中的角色创建每一个三维角色模型,加入贴图文件,设置肢体动作参数;S2、为三维模型建立和绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;S3、提取每个真实的动捕演员的骨骼数据,然后配置对应的三维角色模型;S4、在动捕室内通过动捕设备实时采集动捕演员的动作信息,将动捕设备的数据传输到图形引擎中,然后实时渲染和驱动相应的角色模型,生成实时视频,并进行直播。2.根据权利要求1所述的方法,其特征在于,所述步骤S1包括:制作基于三维动画中的三维角色模型,配置制作三维角色的法线光滑组,并调整三维角色模型的UV;根据模型UV制作贴图,根据贴图制作相对应的材质,最后检查角色模型并在图形引擎关联的数据库中归档保存。3.根据权利要求1所述的方法,其特征在于,所述步骤S2包括:基于三维动画中的三维角色模型,制作动画骨骼,并将骨骼绑定到各自的模型中;并制作...

【专利技术属性】
技术研发人员:芦振华强项杜庆焜张李京
申请(专利权)人:武汉西山艺创文化有限公司
类型:发明
国别省市:湖北,42

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1