一种虚拟数字人应用方法技术

本发明专利技术提供了一种虚拟数字人应用方法，包括：将虚拟数字人展示设备布置在预定展柜上；虚拟数字人基于深度算法来判断观看预定展柜中的展品的观展用户是否将要执行拍照动作；在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获取观展用户的面部信息，并且实时地监测观展用户拍照时是否启动了闪光灯；在判断观展用户拍照时启动了闪光灯的情况下，基于获取的面部信息在大数据库中搜寻对应的用户身份信息；将观展用户对展品进行闪光灯拍照的信息记录至大数据库中的用户身份信息所对应的用户账号信息中

【技术实现步骤摘要】
一种虚拟数字人应用方法


[0001]本专利技术涉及人工智能领域，具体涉及虚拟数字人，尤其是一种虚拟数字人应用方法
。

技术介绍

[0002]根据中国人工智能产业发展联盟总体组和中关村数智人工智能产业联盟数字人工作委员会发布的
《2020
年虚拟数字人发展白皮书
》
，虚拟数字人被定义为是指“具有数字化外形的虚拟人物
。
与具备实体的机器人不同，虚拟数字人依赖显示设备存在”。
其中指出，虚拟数字人宜具备以下三方面特征：一是拥有人的外观，具有特定的相貌
、
性别和性格等人物特征；二是拥有人的行为，具有用语言
、
面部表情和肢体动作表达的能力；三是拥有人的思想，具有识别外界环境
、
并能与人交流互动的能力
。
[0003]“元宇宙”概念的流行极大地推动虚拟数字人产业的升级
。
虚拟数字人在文化
、
娱乐和服务等行业已经得到了广发的应用
。
例如，虚拟数字人的一个应用场景就是博物馆领域
。
已经开发出针对
24
小时博物馆无人讲解问题而开发的作为数字讲解员的虚拟数字人
。
还有多个博物馆已经应用了能够与用户互动的虚拟数字人讲解员
。
[0004]但是，目前虚拟数字人在博物馆里的应用还仅仅停留在导览的功能上，功能比较单一
。
希望能够将虚拟数字人在博物馆应用场景的功能进一步扩大，例如应用至展品保护
。

技术实现思路

[0005]本专利技术所要解决的技术问题是针对现有技术中存在上述缺陷，提供一种具有博物馆应用场景中的展品保护功能的虚拟数字人应用方法
。
[0006]根据本专利技术，提供了一种虚拟数字人应用方法，包括：将虚拟数字人展示设备布置在预定展柜上；虚拟数字人基于深度算法来判断观看预定展柜中的展品的观展用户是否将要执行拍照动作，包括：获取图像；对包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第一神经网络模型；对不包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第二神经网络模型；将第一神经网络模型中的池化层（加入时保持参数不变）加入第二神经网络模型以得到第三神经网络模型；对第三神经网络模型再次进行训练；其中，第一神经网络模型
、
第二神经网络模型和第三神经网络模型采用相同的图像数据进行训练；虚拟数字人利用获取的图像，基于再次进行训练后的第三神经网络模型，判断观看预定展柜中的展品的观展用户是否将要执行拍照动作；
在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获取观展用户的面部信息，并且实时地监测观展用户拍照时是否启动了闪光灯；在判断观展用户拍照时启动了闪光灯的情况下，基于获取的面部信息在大数据库中搜寻对应的用户身份信息；将观展用户对展品进行闪光灯拍照的信息记录至大数据库中的用户身份信息所对应的用户账号信息中
。
[0007]优选地，将虚拟数字人展示设备布置在不能采用闪光灯进行拍照的展柜上的观展用户能够看到的位置
。
[0008]优选地，将虚拟数字人展示设备布置在古书籍和古字画的展柜上的观展用户能够看到的位置
。
[0009]优选地，大数据库包含当前博物馆的用户预约信息的历史记录，其中用户预约信息包括用户面部信息
、
用户证件信息以及用户电话号码等个人信息
。
[0010]优选地，大数据库包含共享用户信息的多个博物馆的用户预约信息的历史记录，其中用户预约信息包括用户面部信息
、
用户证件信息以及用户电话号码等个人信息
。
[0011]优选地，虚拟数字人应用方法还包括：在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获取观展用户的面部信息之后，基于获取的面部信息在大数据库中搜寻对应的用户身份信息；查看搜寻出来的用户身份信息所对应用户账号信息中是否记载有观展用户对展品进行闪光灯拍照的信息；在记载有观展用户对展品进行闪光灯拍照的信息的情况下，虚拟数字人启动与观展用户的交互展示，以提醒用户不要使用闪光灯
。
[0012]优选地，虚拟数字人展示视频以语音方式提醒用户不要使用闪光灯，其中语音信息中包含用户的姓名
。
[0013]优选地，在用户通过联网的博物馆导览设备或者手机中的博物馆应用软件进行导览的情况下，虚拟数字人基于用户在博物馆导览设备或者手机中的登陆信息，将发出的语音信息通过博物馆导览设备或者手机进行播放
。
[0014]根据本专利技术，还提供了一种虚拟数字人应用方法，包括：将虚拟数字人展示设备布置在预定展柜上；虚拟数字人基于深度算法来判断观看预定展柜中的展品的观展用户是否将要执行拍照动作，包括：获取图像；对包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第一神经网络模型；对不包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第二神经网络模型；将第一神经网络模型中的池化层（加入时保持参数不变）加入第二神经网络模型以得到第三神经网络模型；对第三神经网络模型再次进行训练；其中，第一神经网络模型
、
第二神经网络模型
和第三神经网络模型采用相同的图像数据进行训练；虚拟数字人利用获取的图像，基于再次进行训练后的第三神经网络模型，判断观看预定展柜中的展品的观展用户是否将要执行拍照动作；在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获取观展用户的面部信息；基于获取的面部信息在大数据库中搜寻对应的用户身份信息；查看搜寻出来的用户身份信息所对应用户账号信息中是否记载有观展用户对展品进行闪光灯拍照的信息；在记载有观展用户对展品进行闪光灯拍照的信息的情况下，虚拟数字人启动与观展用户的交互展示，以提醒用户不要使用闪光灯
。
[0015]优选地，虚拟数字人展示视频以语音方式提醒用户不要使用闪光灯，其中语音信息中包含用户的姓名
。
[0016]本专利技术将虚拟数字人应用于博物馆文物保护，通过将虚拟数字人和大数据相结合，使得虚拟数字人能够在在进行常规的展品导览的同时，还能防止观展人员的不恰当行为对文物造成损害
。
附图说明
[0017]结合附图，并通过参考下面的详细描述，将会更容易地对本专利技术有更完整的理解并且更容易地理解其伴随的优点和特征，其中：图1示意性地示出了根据本专利技术优选实施例的虚拟数字人应用方法的总体流程图
。
[0018]图2示意性地示出了根据本专利技术第二优选实施例的虚拟数字人应用方法的总体流程图
。
[0019]需要说明的是，附图用于说明本专利技术，而非限制本专利技术
。
注意，表示结构的附图可能并非按比例绘制
。
并且，附图中，相同或者类似的元件标有相同或者类似的标号本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种虚拟数字人应用方法，其特征在于包括：将虚拟数字人展示设备布置在预定展柜上；虚拟数字人基于深度算法来判断观看预定展柜中的展品的观展用户是否将要执行拍照动作，包括：获取图像；对包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第一神经网络模型；对不包含池化层的第一卷积神经网络进行训练以得到对拍照预期进行判断的第二神经网络模型；将第一神经网络模型中的池化层加入第二神经网络模型以得到第三神经网络模型；对第三神经网络模型再次进行训练；其中，第一神经网络模型
、
第二神经网络模型和第三神经网络模型采用相同的图像数据进行训练；虚拟数字人利用获取的图像，基于再次进行训练后的第三神经网络模型，判断观看预定展柜中的展品的观展用户是否将要执行拍照动作；在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获取观展用户的面部信息，并且实时地监测观展用户拍照时是否启动了闪光灯；在判断观展用户拍照时启动了闪光灯的情况下，基于获取的面部信息在大数据库中搜寻对应的用户身份信息；将观展用户对展品进行闪光灯拍照的信息记录至大数据库中的用户身份信息所对应的用户账号信息中
。2.
根据权利要求1所述的虚拟数字人应用方法，其特征在于，将虚拟数字人展示设备布置在不能采用闪光灯进行拍照的展柜上的观展用户能够看到的位置
。3.
根据权利要求1所述的虚拟数字人应用方法，其特征在于，将虚拟数字人展示设备布置在古书籍和古字画的展柜上的观展用户能够看到的位置
。4.
根据权利要求1至3之一所述的虚拟数字人应用方法，其特征在于，大数据库包含当前博物馆的用户预约信息的历史记录，其中用户预约信息包括用户面部信息
、
用户证件信息以及用户电话号码
。5.
根据权利要求1至3之一所述的虚拟数字人应用方法，其特征在于，大数据库包含共享用户信息的多个博物馆的用户预约信息的历史记录，其中用户预约信息包括用户面部信息
、
用户证件信息以及用户电话号码
。6.
根据权利要求1或2所述的虚拟数字人应用方法，其特征在于还包括：在判断观看预定展柜中的展品的观展用户将要执行拍照动作的情况下，虚拟数字人获...

【专利技术属性】
技术研发人员：吴建斌，周孝歌，林骞，张壹，陈延峰，李亮，邱政杰，蒋楷昕，
申请(专利权)人：杭州空介视觉科技有限公司，
类型：发明
国别省市：