System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种用于提词器的自适应反馈调控系统及方法技术方案_技高网

一种用于提词器的自适应反馈调控系统及方法技术方案

技术编号:44968110 阅读:7 留言:0更新日期:2025-04-12 01:40
本发明专利技术公开了一种用于提词器的自适应反馈调控系统及方法,涉及大数据分析技术领域,本发明专利技术通过精准识别用户对提词器的有效注视,结合视线偏差角度和注视时间等数据,确保仅在用户集中注意时评估相关内容的重要性,提高信息显示资源的分配,避免了熟练信息的过度显示,提升提词器的交互性与智能化水平。同时,计算显示内容的重要程度,并结合内容相似度动态筛选,优先高亮显示用户关注的内容,确保实时展示关键信息,提升了提词器的效率与实用性。结合语音识别技术对显示进度动态监测,精确调节显示节奏,确保在合适的时刻显示用户最关注的内容,优化了展示过程,提升了提词器的应用价值和用户体验。

【技术实现步骤摘要】

本专利技术涉及大数据分析,具体是一种用于提词器的自适应反馈调控系统及方法


技术介绍

1、提词器在各类表演和演讲场合中具有重要意义,能够有效提高表演者的表现力和自信心。它通过实时显示文本,帮助演讲者、歌手或主持人避免忘词或遗漏关键信息,从而确保演讲或演出内容的流畅与准确。提词器还可以根据表演的节奏和内容需求,动态调整显示的文本,提高信息传递的效率和效果。尤其在需要快速反应和高效演绎的场合,提词器的使用能够大幅度减轻表演者的负担,提升整体表演质量,确保现场观众的观感体验。

2、现有提词器仅依据用户的演绎进度调整显示内容的滚动速度和停留时间,未能有效分析用户需求并提前提示可能遗忘的内容,导致演绎过程中出现断点或不流畅。现有技术缺乏提前显示用户容易忘记的关键内容的功能,同时也没有通过智能分析用户的表现进行动态调整,从而无法实现高效的显示资源分配,致使用户在需要提示时未能获得足够的准备时间。这一缺乏智能适配的功能限制了提词器在演绎中的辅助效果,影响了用户演绎的连贯性与自然性。


技术实现思路

1、本专利技术的目的在于提供一种用于提词器的自适应反馈调控系统及方法,以解决现有技术中提出的问题。

2、为实现上述目的,本专利技术提供如下技术方案:一种用于提词器的自适应反馈调控方法,自适应反馈调控方法包括以下步骤:

3、步骤s1、采集用户的面部特征数据,并根据面部特征数据分析出用户的面部朝向,对用户满足面部朝向条件的时刻进行重点标记,记为重点标记时刻;

4、通过图像传感器采集用户的面部特征数据,所述面部特征数据包括用户的眼睛位置、鼻子位置和嘴巴位置,并将面部特征数据输入面部识别算法中,对用户的面部朝向进行分析,根据用户的面部朝向分析结果,判断用户是否朝向提词器显示屏,当用户面部朝向提词器显示屏时满足面部朝向条件,并将满足面部朝向条件的时刻进行重点标记,记为重点标记时刻。

5、识别面部朝向的技术主要通过面部关键点检测和头部姿态估计实现。通过检测面部关键点的位置,结合算法如epnp或pnp,可以推测头部的俯仰、偏航和滚转角度。深度学习模型和三维传感器如深度摄像头也能直接分析面部朝向。

6、通过图像传感器采集用户面部特征数据,分析用户的面部朝向,确保提词器内容在用户关注时段精准显示。

7、步骤s2、采集重点标记时刻的用户眼睛数据,所述用户眼睛数据包括用户的瞳孔位置数据和角膜反射位置数据,结合用户眼睛数据计算出用户的视线偏差角度;

8、步骤s2-1、以地面为基准,构建以提词器显示屏几何中心为原点的三维空间坐标系,定义方向如下:x轴平行于地面,沿显示屏水平边方向延伸,正向为从中心向右,负向为向左;y轴垂直于地面,沿显示屏竖直边方向延伸,正向为向上,负向为向下;z轴垂直于显示屏平面,正向为从中心向用户所在方向延伸,负向为指向显示屏背面,利用红外传感器采集重点标记时刻的用户眼睛数据,所述用户眼睛数据包括用户瞳孔位置数据和角膜反射位置数据;用户在重点标记时刻时,面部朝向提词器显示屏,利用红外传感器能够完整地获取到用户眼睛数据;在任意一个重点标记时刻中,空间坐标系的原点位置为p0(x0,y0,z0),瞳孔位置在空间坐标系中的位置为ppupil(xk,yk,zk),角膜反射位置在空间坐标系中的位置为pcornea(xc,yc,zc);

9、步骤s2-2、根据重点标记时刻中用户眼睛数据计算出用户的视线偏差角度,瞳孔位置包括左眼瞳孔位置和右眼瞳孔位置,所述左眼瞳孔位置在空间坐标系中的位置为ppupil,left(xk,l,yk,l,zk,l),所述右眼瞳孔位置在空间坐标系中的位置为ppupil,right(xk,r,yk,r,zk,r);角膜反射位置包括左眼角膜反射位置和右眼角膜反射位置,所述左眼角膜反射位置在空间坐标系中的位置为pcornea,left(xc,l,yc,l,zc,l),所述右眼角膜反射位置在空间坐标系中的位置为pcornea,right(xc,r,yc,r,zc,r),将左眼的瞳孔位置和角膜反射位置带入视线偏差角度计算公式,获得左眼的视线偏差角度,将右眼的瞳孔位置和角膜反射位置带入视线偏差角度计算公式,获得右眼的视线偏差角度,所述视线偏差角度计算公式如下:

10、

11、式中,wt表示为用户在重点标记时刻t时的视线偏差角度。

12、角膜反射位置表示为眼睛表面反射光源的位置,通常由眼睛的角膜表面反射出的光点位置确定。

13、视线偏差角度表示为用户视线与眼球中心线(或垂直眼睛连线)之间的夹角。

14、步骤s3、通过用户眼睛数据计算出用户在重点标记时刻的视线焦点位置,根据视线焦点位置判断用户在重点标记时刻对提词器显示屏的注视是否为有效注视,将用户在有效注视时的视线偏差角度和注视时间进行存储并构建用户关注数据集合;

15、步骤s3-1、根据用户眼睛数据计算出用户在重点标记时刻的视线焦点位置,所述视线焦点位置计算过程如下:

16、步骤s3-1-1、将左眼的瞳孔位置和角膜反射位置带入视线方向向量计算公式,获得左眼的视线方向向量,将右眼的瞳孔位置和角膜反射位置带入视线方向向量计算公式,获得右眼的视线方向向量,所述视线方向向量计算公式如下:

17、v=(xc-xk,yc-yk,zc-zk);

18、式中,v表示为用户的视线方向向量,具体为表示从眼睛的瞳孔位置出发,经过角膜反射点位置指向物体的方向;

19、步骤s3-2-2、根据用户眼睛数据和视线方向向量v计算视线焦点位置,所述视线焦点位置表示为左眼视线方向向量和右眼视线方向向量的交点,计算过程如下:

20、在左眼的视线方向上,任意点rl(tl)表示为:

21、rl(tl)=ppupil,left+tl*vl;

22、式中,rl(tl)表示为在左眼的视线方向上的一个点;tl表示为一个标量参数,具体为点rl距离左眼瞳孔位置的距离;vl表示为左眼的视线方向向量;

23、在右眼的视线方向上,任意点rr(tr)表示为:

24、rr(tr)=ppupil,right+tr*vr;

25、式中,rr(tr)表示为在左眼的视线方向上的一个点;tr表示为一个标量参数,具体为点rr距离右眼瞳孔位置的距离;vr表示为右眼的视线方向向量;

26、根据交点坐标相等公式计算出视线焦点位置,计算公式如下:

27、rl(tl)=rr(tr);

28、根据交点位置相等条件,分别带入x轴、y轴和z轴得到三个方程式,对方程式进行求解得到标量参数tl和tr,带入tl和tr的值求得交点坐标,即为用户在重点标记时刻的视线焦点位置,坐标表示为(xt,yt,zt);

29、步骤s3-3、根据计算出来的用户的视线焦点位置判断用户在重点标记时刻对提词器显示屏的注视是否为有效注视,判断过程如下:

30、获取提词器本文档来自技高网...

【技术保护点】

1.一种用于提词器的自适应反馈调控方法,其特征在于:所述自适应反馈调控方法包括以下步骤:

2.根据权利要求1所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤S1中,通过图像传感器采集用户的面部特征数据,所述面部特征数据包括用户的眼睛位置、鼻子位置和嘴巴位置,并将面部特征数据输入面部识别算法中,对用户的面部朝向进行分析,根据用户的面部朝向分析结果,判断用户是否朝向提词器显示屏,当用户面部朝向提词器显示屏时满足面部朝向条件,并将满足面部朝向条件的时刻进行重点标记,记为重点标记时刻。

3.根据权利要求2所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤S2的具体步骤如下:

4.根据权利要求3所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤S3的具体步骤如下:

5.根据权利要求4所述的一种用于提词器的自适应反馈调控方法,其特征在于:在步骤S3中,还包括:

6.根据权利要求5所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤S4的具体步骤如下:

7.根据权利要求6所述的一种用于提词器的自适应反馈调控方法,其特征在于:在步骤S5中,设置内容进度阈值Lmax,通过语音识别技术实时监测提词器显示屏的内容显示进度Lcurrent,并对提词器下一步需要显示的内容进行识别,判断是否为已高亮标识的内容,当下一步需要进行显示的内容为高亮标识的内容时,对当前显示的内容进度进行判断,判断过程如下:

8.一种用于提词器的自适应反馈调控系统,其应用于权利要求1-7任意一项所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述自适应反馈调控系统包括面部分析模块、视线计算模块、焦点判断模块、内容分析模块和显示调控模块;

9.根据权利要求8所述的一种用于提词器的自适应反馈调控系统,其特征在于:

10.根据权利要求8所述的一种用于提词器的自适应反馈调控系统,其特征在于:

...

【技术特征摘要】

1.一种用于提词器的自适应反馈调控方法,其特征在于:所述自适应反馈调控方法包括以下步骤:

2.根据权利要求1所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤s1中,通过图像传感器采集用户的面部特征数据,所述面部特征数据包括用户的眼睛位置、鼻子位置和嘴巴位置,并将面部特征数据输入面部识别算法中,对用户的面部朝向进行分析,根据用户的面部朝向分析结果,判断用户是否朝向提词器显示屏,当用户面部朝向提词器显示屏时满足面部朝向条件,并将满足面部朝向条件的时刻进行重点标记,记为重点标记时刻。

3.根据权利要求2所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤s2的具体步骤如下:

4.根据权利要求3所述的一种用于提词器的自适应反馈调控方法,其特征在于:所述步骤s3的具体步骤如下:

5.根据权利要求4所述的一种用于提词器的自适应反馈调控方法,其特征在于:在步骤s3中,还包括:

6...

【专利技术属性】
技术研发人员:杨春婷刘香溪姚丹
申请(专利权)人:长春电子科技学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1