System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 车辆智能控制方法、装置、车辆及存储介质制造方法及图纸_技高网

车辆智能控制方法、装置、车辆及存储介质制造方法及图纸

技术编号:44504003 阅读:5 留言:0更新日期:2025-03-07 13:03
本申请公开了一种车辆智能控制方法、装置、车辆及存储介质,涉及车辆控制技术领域,方法包括:通过语音采集模块确定车内的语音信息,并根据所述语音信息确定声源位置和语音指令;在所述语音指令为目标指令时,基于所述声源位置获取图像采集模块采集的车内图像数据;基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果;在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制,本方案无需新增额外的深度信息,通过复用图像采集模块进行车内用户的手势识别,降低车辆内识别的硬件成本,提高识别的效果。

【技术实现步骤摘要】

本申请涉及车辆控制,尤其涉及车辆智能控制方法、装置、车辆及存储介质


技术介绍

1、目前的车内座舱交互主要是以语音控制、按键控制和触屏控制为主,这样的设计与真实社交有差异,而这个差异点导致了人机交互过程中,用户感觉交互缺乏灵动感。因此,为了提升用户的交互体验,目前车辆控制时使用tof(time of fly,飞行时间)摄像头进行3d手势识别,并将识别到的信息和语音结合,从而对车辆进行智能控制。但这种控制方式需要新增tof摄像头,增加了硬件成本。


技术实现思路

1、本申请的主要目的在于提供一种车辆智能控制方法、装置、车辆及存储介质,旨在解决现有车辆控制需要结合tof摄像头导致成本较高的技术问题。

2、为实现上述目的,本申请提出一种车辆智能控制方法,所述车辆智能控制方法应用于车辆,所述车辆上设有语音采集模块和图像采集模块,所述方法包括:

3、通过所述语音采集模块确定车内的语音信息,并根据所述语音信息确定声源位置和语音指令;

4、在所述语音指令为目标指令时,基于所述声源位置获取所述图像采集模块采集的车内图像数据;

5、基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果;

6、在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制。

7、在一实施例中,所述在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制的步骤包括:p>

8、在所述识别结果为识别到目标手势时,根据所述目标手势确定手势方向;

9、根据所述手势方向和所述声源位置确定目标部件;

10、根据所述语音指令对所述目标部件进行控制。

11、在一实施例中,所述根据所述语音指令对所述目标部件进行控制的步骤包括:

12、根据所述语音指令确定关键指令词;

13、获取车辆部件状态;

14、根据所述关键指令词和所述车辆部件状态确定对所述目标部件的目标动作;

15、根据所述目标动作对车辆进行控制。

16、在一实施例中,所述基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果的步骤之前,还包括:

17、获取历史人手数据,并通过所述历史人手数据进行图像学习,构建二维人手模型,将所述二维人手模型转化为第一函数;

18、根据所述第一函数和所述历史人手数据得到历史手势姿态数据,并根据所述历史手势姿态数据进行手指指向手势学习,构建二维手势识别模型,将所述二维手势识别模型转化为第二函数;

19、根据所述第二函数和所述历史手势姿态数据得到历史手指指向手势数据,并根据所述历史手指指向手势数据进行指向方向学习,构建二维指向模型,将所述二维指向模型转化为第三函数;

20、通过所述第三函数得到预设识别函数。

21、在一实施例中,所述在所述语音指令为目标指令时,基于所述声源位置获取所述图像采集模块采集的车内图像数据的步骤之前,还包括:

22、对所述语音指令进行解析,确定所述语音指令是否为车控指令;

23、在所述语音指令为所述车控指令时,确定所述车控指令中是否存在车辆部件信息;

24、在所述车控指令中不存在车辆部件信息时,确定所述车控指令是否存在预设指代词;

25、在所述车控指令中存在所述预设指代词时,确定所述语音指令为目标指令。

26、在一实施例中,所述根据所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果的步骤之后,还包括:

27、在所述识别结果为未识别到目标手势时,生成语音提示信息;

28、通过所述语音采集模块对所述语音提示信息进行提示,并返回所述通过所述语音采集模块响应于车内的语音信息,并根据所述语音信息确定声源位置和语音指令的步骤。

29、在一实施例中,所述语音采集模块包括麦克风阵列,所述麦克风阵列包括多个麦克风;

30、根据所述语音信息确定声源位置的步骤包括:

31、根据声源定位策略和所述语音信息得到所述麦克风阵列中各麦克风之间的时间差;

32、根据所述时间差计算声源距离所述麦克风阵列的角度和距离;

33、通过所述角度和所述距离确定声源位置。

34、此外,为实现上述目的,本申请还提出一种车辆智能控制装置,所述车辆智能控制装置包括:

35、确定模块,用于通过语音采集模块确定车内的语音信息,并根据所述语音信息确定声源位置和语音指令;

36、采集模块,用于在所述语音指令为目标指令时,基于所述声源位置通过图像采集模块采集车内图像数据;

37、识别模块,用于基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果;

38、控制模块,用于在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制。

39、此外,为实现上述目的,本申请还提出一种车辆,所述车辆包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序配置为实现如上文所述的车辆智能控制方法的步骤。

40、此外,为实现上述目的,本申请还提出一种存储介质,所述存储介质为计算机可读存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上文所述的车辆智能控制方法的步骤。

41、此外,为实现上述目的,本申请还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时实现如上文所述的车辆智能控制方法的步骤。

42、本申请提出的一个或多个技术方案,车辆智能控制方法应用于车辆,所述车辆上设有语音采集模块和图像采集模块,方法包括:通过所述语音采集模块确定车内的语音信息,并根据所述语音信息确定声源位置和语音指令;在所述语音指令为目标指令时,基于所述声源位置获取所述图像采集模块采集的车内图像数据;基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果;在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制,本方案无需新增额外的深度信息,通过复用图像采集模块进行车内用户的手势识别,降低车辆内识别的硬件成本,提高识别的效果。

本文档来自技高网...

【技术保护点】

1.一种车辆智能控制方法,其特征在于,所述车辆智能控制方法应用于车辆,所述车辆上设有语音采集模块和图像采集模块,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制的步骤包括:

3.如权利要求2所述的方法,其特征在于,所述根据所述语音指令对所述目标部件进行控制的步骤包括:

4.如权利要求1所述的方法,其特征在于,所述基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果的步骤之前,还包括:

5.如权利要求1所述的方法,其特征在于,所述在所述语音指令为目标指令时,基于所述声源位置获取所述图像采集模块采集的车内图像数据的步骤之前,还包括:

6.如权利要求1所述的方法,其特征在于,所述根据所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果的步骤之后,还包括:

7.如权利要求1至6中任一项所述的方法,其特征在于,所述语音采集模块包括麦克风阵列,所述麦克风阵列包括多个麦克风;

8.一种车辆智能控制装置,其特征在于,所述装置包括:

9.一种车辆,其特征在于,所述车辆包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序配置为实现如权利要求1至7中任一项所述的车辆智能控制方法的步骤。

10.一种存储介质,其特征在于,所述存储介质为计算机可读存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的车辆智能控制方法的步骤。

...

【技术特征摘要】

1.一种车辆智能控制方法,其特征在于,所述车辆智能控制方法应用于车辆,所述车辆上设有语音采集模块和图像采集模块,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述在所述识别结果为识别到目标手势时,根据所述目标手势、所述语音指令以及所述声源位置对车辆进行控制的步骤包括:

3.如权利要求2所述的方法,其特征在于,所述根据所述语音指令对所述目标部件进行控制的步骤包括:

4.如权利要求1所述的方法,其特征在于,所述基于所述车内图像数据使用预设识别函数进行目标手势识别,得到识别结果的步骤之前,还包括:

5.如权利要求1所述的方法,其特征在于,所述在所述语音指令为目标指令时,基于所述声源位置获取所述图像采集模块采集的车内图像数据的步骤之前,还包括:

6....

【专利技术属性】
技术研发人员:罗应渝刘兵农云飞杨孛
申请(专利权)人:东风汽车有限公司东风日产乘用车公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1