一种适用于语言障碍人士的移动通话终端制造技术

本实用新型专利技术提供一种适用于语言障碍人士的移动通话终端，其中摄像头捕捉手语影像，手语解析芯片组将该手语影像解析为图形轨迹、并与存储器中的规范手语的图形轨迹匹配，得出相匹配的图形轨迹所对应的模糊文本信息；文本信息纠错芯片组利用存储器中的语法及组词参数对模糊文本信息进行纠错；中央处理器将准确文本信息转换为音频信号向对端移动通话终端发送；接收对端移动通话终端发送的音频信号，转换为文本信息后输出到显示屏进行显示。应用上述移动通话终端，使得语言障碍人士可以使用手语与通话对端的使用者进行同步、准确的通话交流。（*该技术在2019年保护过期，可自由使用*）

【技术实现步骤摘要】

本技术涉及移动通信技术，特别涉及一种适用于语言障碍人士的移动通话终丄山顺。
技术介绍
随着移动通信技术的迅速发展，移动通话终端成为人们日常生活中进行沟通交流 的主要工具。 目前普遍应用的移动通话终端都是将本端使用者的声音信号进行收音，然后转换 为适于移动通信网络传输的信号后传输到对端，再由对端移动通话终端进行反向转换生成 声音信号播放给对端使用者，显然这种普遍应用的移动通话终端并不适于语言障碍人士使 用。 专利申请号为200610121174.9的中国专利申请提出了一种解决方案，语言障碍人士将要通话的内容以短信息的方式输入本端的移动通话终端，一路由本端的移动通话终端将该内容以短信息的方式发送到对端的移动通话终端，另一路由本端的移动通话终端中的短信息音频转换器转换成音频信号发送到对端的移动通话终端，当对端的使用者也为语言障碍人士时可以通过阅读短消息来了解通话内容，当对端的使用者为正常人士时可以通过收听音频来了解通话内容。虽然该方案也解决了语言障碍人士使用移动通话终端进行通话的问题，但是通话时仍需逐字输入文字信息，特别是在通话内容较多时将非常麻烦。 专利申请号为200510047240. 8的中国专利提出了一种为语言障碍人员提供数据转换和传输的装置，该装置应用于电视接收机，存储有手语影像对应的文本信息和语音信息，当通过摄像部件接收到使用者的手语影像时，根据使用者的请求将该手语影像转换为文本信息或语音信息，还可以进一步将转换后的文本信息和语音信息传输给诸如移动通话终端或电脑等终端进行显示或播放。虽然该方案给出了将手语影像转换为文本信息或语音信息，相比于直接输入文字信息来说方便了使用，但是首先该装置设置于电视接收机中，如果通信双方的使用者位于不同地点，不仅双方都需要准备内置有该装置的电视接收机，同时还需准备其他接收信息的终端，同样非常麻烦且双方的交流也不同步，其次该装置将手语影像转换为文本信息或语音信息时仅简单的利用了预存的对应关系，假设使用者的手语输入不规范或者个别词语输入顺序错误，则将直接转换出错误的文本信息或语音信息，转换的准确度较低。
技术实现思路
本技术提供一种适用于语言障碍人士的移动通话终端，使得语言障碍人士可 以使用手语与通话对端的使用者进行同步、准确的通话交流。 本技术的技术方案是这样实现的 —种适用于语言障碍人士的移动通话终端，关键在于，该移动通话终端包括中央 处理器、显示屏、存储器、摄像头、手语解析芯片组和文本信息纠错芯片组； 所述摄像头与手语解析芯片组连接，将捕捉的手语影像传输给手语影像解析芯片 组； 所述手语解析芯片组与存储器和文本信息纠错芯片组分别连接，将摄像头捕捉的 手语影像解析为图形轨迹、并与存储器中预先存储的规范手语的图形轨迹进行匹配，得出 相匹配的图形轨迹所对应的模糊文本信息传输给文本信息纠错芯片组； 所述文本信息纠错芯片组与存储器和中央处理器分别连接，利用存储器中预先存 储的语法及组词参数对所述模糊文本信息进行纠错，得到准确文本信息传输给中央处理 器； 所述中央处理器与摄像头和显示屏分别连接，在通话连接建立后向摄像头发送触 发信号；将所述准确文本信息转换为音频信号向对端移动通话终端发送；接收对端移动通 话终端发送的音频信号，转换为文本信息后输出到显示屏进行显示。较佳地，所述手语解析芯片组包括解析芯片和匹配芯片； 所述解析芯片与摄像头和匹配芯片分别连接，将摄像头捕捉的手语影像解析为多 个包含手型轮廓和运动趋势的图形轨迹，并按顺序传输给匹配芯片； 所述匹配芯片与存储器和文本信息纠错芯片组分别连接，在存储器预先存储的图形轨迹中分别查找到与解析芯片解析出的多个图形轨迹相匹配的图形轨迹，再从存储器中读出相匹配的图形轨迹所对应模糊文本信息传输给文本信息纠错芯片组。较佳地，所述文本信息纠错芯片组包括参数读取芯片和纠错执行芯片； 所述参数读取芯片与存储器和纠错执行芯片分别连接，从所述存储器中读取预先存储的语法及组词参数传输给纠错执行芯片； 所述纠错执行芯片与手语解析芯片组和中央处理器分别连接，利用所述语法及组词参数，对所述模糊文本信息进行纠错，得到准确文本信息传输给中央处理器。较佳地，该移动通话终端中还包括麦克风、音频处理器和扬声器； 所述中央处理器进一步与麦克风和音频处理器分别连接，接收从所述显示屏输入的模式选择信号，当所述模式选择信号指示当前为语言障碍工作模式通话时，继续执行所述向摄像头发送触发信号的操作；当所述模式选择信号指示当前为正常工作模式通话时，向麦克风和音频处理器发送触发信号； 所述麦克风与音频处理器连接，收集外部声音信号传输给音频处理器； 所述音频处理器与扬声器连接，将所述麦克风收集的声音信号进行模数转换后传输给对端移动通话终端；接收对端移动通话终端发送的音频信号，在进行数模转换后传输到扬声器播放。 可见，如果通话发起端为语言障碍人士，则通话发起端的移动通话终端可将语言 障碍人士的手语影像转换为文本信息、再转换为音频信号传输给对端移动通话终端；如果 通话接收端为语言障碍人士，通话接收端的移动通话终端可将收到的音频信号转换为文本 信息进行显示；如果通话发起端为正常人士，则通话发起端的移动通话终端可直接将声音 信号转换后传输给对端移动通话终端；如果通话接收端为正常人士，则通话接收端的移动 通话终端可直接将音频信号转换为声音播放。这样本技术中的移动通话终端就实现了 语言障碍人士使用手语与对端使用者进行同步通话交流的目的，另一方面，本技术提 供的移动通话终端在对手语影像进行转换的过程中，不仅利用了预存的规范手语对应的模糊文本信息，还利用预存的语法及组词参数对模糊文本信息进行纠错，从而使通信双方通 话交流的内容更加准确。附图说明图1为本技术中适用于语言障碍人士的移动通话终端的结构示意图。具体实施方式为使本技术的目的和优点更加清楚，以下结合附图和实施例对本技术作 进一步的详细说明。 图1为本技术中适用于语言障碍人士的移动通话终端的结构示意图，该移动 通话终端包括存储器11、摄像头12、手语解析芯片组13、文本信息纠错芯片组14、中央处 理器15和显示屏16。 其中，存储器11中存储有语法及组词参数和规范手语的图形轨迹及其对应的模 糊文本信息。上述规范手语的图形轨迹包括手型轮廓和运动趋势，每一个常用词(例如我 们等)存储为一幅图片，当然这仅为图形轨迹及其存储方式的一种具体举例，并不排除在 其他应用场景下采用其他方式。上述语法及组词参数，包括语法及组词的常用规则，例如 陈述句的组词顺序为主语、谓语和宾语；常用词等。 摄像头12由中央处理器15触发，捕捉手语影像传输给手语影像解析芯片组13。 手语解析芯片组13将摄像头12捕捉的手语影像解析为图形轨迹、并与存储器11 中存储的图形轨迹进行匹配，得出相匹配的图形轨迹所对应的模糊文本信息传输给文本信 息纠错芯片组14。该手语解析芯片组13包括解析芯片131和匹配芯片132。 其中，解析芯片131将摄像头12捕捉的手语影像解析为多个包含手型轮廓和运动 趋势的图形轨迹，由于使用者在输入手语时，每两个常用词之间会有一定的停顿，因此摄像 头12捕捉并传输给解析芯片131的手语影像也在每两个常用词之间存在本文档来自技高网...

【技术保护点】
一种适用于语言障碍人士的移动通话终端，其特征在于，该移动通话终端包括：中央处理器、显示屏、存储器、摄像头、手语解析芯片组和文本信息纠错芯片组；　　　　所述摄像头与手语解析芯片组连接，将捕捉的手语影像传输给手语影像解析芯片组；　　　　所述手语解析芯片组与存储器和文本信息纠错芯片组分别连接，将摄像头捕捉的手语影像解析为图形轨迹、并与存储器中预先存储的规范手语的图形轨迹进行匹配，得出相匹配的图形轨迹所对应的模糊文本信息传输给文本信息纠错芯片组；　　　　所述文本信息纠错芯片组与存储器和中央处理器分别连接，利用存储器中预先存储的语法及组词参数对所述模糊文本信息进行纠错，得到准确文本信息传输给中央处理器；　　　　所述中央处理器与摄像头和显示屏分别连接，在通话连接建立后向摄像头发送触发信号；将所述准确文本信息转换为音频信号向对端移动通话终端发送；接收对端移动通话终端发送的音频信号，转换为文本信息后输出到显示屏进行显示。

【技术特征摘要】
一种适用于语言障碍人士的移动通话终端，其特征在于，该移动通话终端包括中央处理器、显示屏、存储器、摄像头、手语解析芯片组和文本信息纠错芯片组；所述摄像头与手语解析芯片组连接，将捕捉的手语影像传输给手语影像解析芯片组；所述手语解析芯片组与存储器和文本信息纠错芯片组分别连接，将摄像头捕捉的手语影像解析为图形轨迹、并与存储器中预先存储的规范手语的图形轨迹进行匹配，得出相匹配的图形轨迹所对应的模糊文本信息传输给文本信息纠错芯片组；所述文本信息纠错芯片组与存储器和中央处理器分别连接，利用存储器中预先存储的语法及组词参数对所述模糊文本信息进行纠错，得到准确文本信息传输给中央处理器；所述中央处理器与摄像头和显示屏分别连接，在通话连接建立后向摄像头发送触发信号；将所述准确文本信息转换为音频信号向对端移动通话终端发送；接收对端移动通话终端发送的音频信号，转换为文本信息后输出到显示屏进行显示。2. 如权利要求1所述的移动通话终端，其特征在于，所述手语解析芯片组包括解析芯 片和匹配芯片；所述解析芯片与摄像头和匹配芯片分别连接，将摄像头捕捉的手语影像解析为多个包 含手型轮廓和运动趋势的图形轨迹，并按顺序传输给匹配芯片；所述匹配芯片与存储器和文本信息纠错芯片组分别连接，在存储器预先存储的图形轨 迹中分...

【专利技术属性】
技术研发人员：陈绍君，龚云云，
申请(专利权)人：深圳市同洲电子股份有限公司，
类型：实用新型
国别省市：94[中国|深圳]