一种聋哑患者交流装置制造方法及图纸

本实用新型专利技术提供一种聋哑患者交流装置，包括主控单元、触摸显示屏、存储卡、麦克风、扬声器，所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器，所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上，或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出，可以使聋哑人与普通人方便地进行交流。同时，本装置还设有语音手语交流按钮、语音播放按钮、书写训练按钮及手语库按钮，扩展了装置不同方面的使用功能，使用时更加便捷。

【技术实现步骤摘要】

本技术属于聋哑患者辅助工具领域，具体涉及一种基于语音识别和语义理解的聋哑患者交流装置。
技术介绍
随着全社会对聋哑患者的关心与帮助以及聋哑学校多年来的努力，近年来手语的普及有很大的提高。从聋哑学校毕业的聋哑患者都学会了手语，在街头也经常能够看见聋哑患者们通过手语聊天，他们用手语表达出丰富的思想，或高兴或兴奋或忧愁甚至用手语吵架，但是对于不会手语的其他人就无法和他们进行交流，无法了解他们的喜怒哀愁。同时，由于文字阅读上的通用性有限，许多聋哑人并不识字，而手语交流是世界通用的聋哑人语言，如果人们在与聋哑人进行交流时，可以将所表达的信息转换为手语信息，就可以方便的与聋哑人进行交流沟通。如上所述，当聋哑患者需要办理公共事务，例如去银行或医院，因为无法发声，一般都需要有人陪同，非常不方便。如果聋哑患者能够随身携带一个装置，这个装置能够进行语音识别和手语动画翻译，将帮助聋哑患者能够和非聋哑患者进行交流，提高聋哑患者的生活质量。本技术提供一种基于语音识别和语义理解的聋哑患者交流装置，以解决上述问题。
技术实现思路
本技术提供一种聋哑患者交流装置，包括主控单元、触摸显示屏、存储卡、麦克风、扬声器，所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器，所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上，或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出。优选的，所述聋哑患者交流装置还包括语音手语交流按钮，按下所述语音手语交流按钮后，麦克风开始采集语音音频数据。优选的，所述聋哑患者交流装置还包括语音播放按钮，按下所述语音播放按钮后，触摸显示屏显示日常用语列表，点击后播放相应语音信息及手语动画。优选的，所述聋哑患者交流装置还包括书写训练按钮，按下所述书写训练按钮，并开始在触摸显示屏上书写汉字，所述聋哑患者交流装置进行识别处理，播放语音信息和手语动画。优选的，所述聋哑患者交流装置还包括手语库按钮，按下所述手语库按钮后，触摸显示屏显示手语库动画，用户对手语动画进行操作。优选的，所述聋哑患者交流装置还包括电池设备。通过本技术提供的聋哑患者交流装置，设置了主控单元、触摸显示屏、存储卡、麦克风、扬声器，所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器，所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上，或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出，可以使聋哑人与普通人方便地进行交流。同时，本装置还设有语音手语交流按钮、语音播放按钮、书写训练按钮及手语库按钮，扩展了装置不同方面的使用功能，使用时更加便捷。附图说明为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本技术较佳实施例提供的聋哑患者交流装置内部结构示意图；图2是本技术较佳实施例提供的聋哑患者交流装置外部结构示意图；图3是本技术较佳实施例提供的聋哑患者交流系统内部功能分配示意图；图4a是本技术较佳实施例提供的外部语音向触摸显示屏转换流程图；图4b是本技术较佳实施例提供的从触摸显示屏向扬声器转换流程图；图5是本技术较佳实施例提供的聋哑患者交流装置汉字书写训练流程图。具体实施方式下文中将参考附图并结合实施例来详细说明本技术。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。图1是本技术较佳实施例提供的聋哑患者交流装置内部结构示意图。如图1所示，本技术较佳实施例提供的聋哑患者交流装置包括触摸显示屏1、存储卡2、主控单元3、麦克风4及扬声器5，所述主控单元3连接触摸显示屏1、存储卡2、麦克风4及扬声器5，所述主控单元3将从麦克风4获取的音频转换为动画手语及文字输出在触摸显示屏1上，或者从触摸显示屏1获取文字信息或手语动画转换为语音从扬声器5输出。于此，所述主控单元由嵌入式芯片制作，所述触摸显示屏为触摸液晶显示屏，所述存储卡为SD存储卡。麦克风4可以固定在装置上，也可以取下，取下后对准麦克风说话，采集的语音信息质量更好，准确性更高。所述聋哑患者交流装置还包括电池设备6，所述电池设备为触摸液晶显示屏、扬声器、麦克风及SD存储卡提供电力。图2是本技术较佳实施例提供的聋哑患者交流装置外部结构示意图。如图2所示，本技术较佳实施例提供的聋哑患者交流装置还包括支架7、语音手语交流按钮8、语音播放按钮9、书写训练按钮10及手语库按钮11。本实施例中，所述支架用于支撑本装置，使其置于桌面上，方便采音和交流。此外，聋哑患者交流装置设置的多个外部按钮，用于实现语音与文本或手语动画间的转换，并提供日常手语动画的练习等。所述各按钮如下。语音手语交流按钮，按下所述语音手语交流按钮后，麦克风开始采集语音音频数据。同时，所述语音音频数据传送到主控单元，由所述主控单元进行语音识别、句法分析、语义理解及手语动画匹配后，显示手语动画，并显示匹配的中文文本。语音播放按钮，按下所述语音播放按钮后，触摸显示屏显示日常用语列表，点击后播放相应语音信息及手语动画。具体地，按下所述语音播放按钮按钮，显示屏列出日常生活用语的列表，列表显示语音项编号和中文文本，聋哑患者点击某条信息后会播放相应语音信息，同时会播放手语动画，帮助不识中文的患者记住语音信息的条目。书写训练按钮，按下所述书写训练按钮，并开始在触摸显示屏上书写汉字，所述聋哑患者交流装置进行识别处理，播放语音信息和手语动画。具体地，由主控单元对输入的汉字进行文本和手语动画匹配，匹配成功后，播放语音信息和手语动画。手语库按钮，按下所述手语库按钮后，触摸显示屏显示手语库动画，用户对手语动画进行操作。具体地，所述手语库保存于SD存储卡中，其中包括日常手语动画，用户可以对常用手语动画项进行排序，也可以画一串简单图形符号对手语动画项进行标注，以帮助记忆。图3是本技术较佳实施例提供的聋哑患者交流系统内部功能分配示意图。如图3所示，程序写入主控单元后，手语动画、语音音频以及汉字特征模型信息存放在SD存储卡中，内置程序包含手语动画库，存储所有手语动画信息，用户可以进行手语动画的浏览和标注；包含语音库，存储所有语音音频信息和中文的对应关系数据，可以进行日常语音信息播放，选择语音项后可以进行手语动画浏览；包含汉字特征模型库，存储汉字特征模型数据共手写识别功能使用。图4a是本技术较佳实施例提供的外部语音向触摸显示屏转换流程图；图4b是本技术较佳实施例提供的从触摸显示屏向扬声器转换流程图。如图4a及图4b所示，当非聋哑患者和聋哑患者交流时，首先由麦克风采集语音音频信息，由程序进行语音识别，进行句法分析和语义理解，然后确定相对应的中文文本，进行显本文档来自技高网...

【技术保护点】
一种聋哑患者交流装置，其特征在于，包括主控单元、触摸显示屏、存储卡、麦克风、扬声器，所述主控单元连接触摸显示屏、存储卡、麦克风及扬声器，所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸显示屏上，或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器输出。

【技术特征摘要】
1.一种聋哑患者交流装置，其特征在于，包括主控单元、触摸显示屏、
存储卡、麦克风、扬声器，所述主控单元连接触摸显示屏、存储卡、麦克风
及扬声器，
所述主控单元将从麦克风获取的音频转换为动画手语及文字输出在触摸
显示屏上，或者从触摸显示屏获取文字信息或手语动画转换为语音从扬声器
输出。
2.根据权利要求1所述的聋哑患者交流装置，其特征在于，所述聋哑患
者交流装置还包括语音手语交流按钮，按下所述语音手语交流按钮后，麦克
风开始采集语音音频数据。
3.根据权利要求1所述的聋哑患者交流装置，其特征在于，所述聋哑患
者交流装置还包括语音播放按钮，按下所述语音播...

【专利技术属性】
技术研发人员：张宝峰，孔芳，熊焰，王平，
申请(专利权)人：苏州大学，
类型：新型
国别省市：江苏;32