一种基于互联网的可穿戴式人机交互系统技术方案

本发明专利技术为一种基于互联网的可穿戴式人机交互系统，属于计算机图形学和互联网技术领域。该系统由客户端和服务器端组成；客户端由一个微型摄像机、4个颜色标记物、一个有网络接入功能的智能手机、一个微型投影仪组成；服务器端由后台服务器和数据库组成；用戴有颜色标记物的双手产生的手势信息来启动微型摄像机实时采集外界图形信息，然后通过有网络接入功能的智能手机上传到后台服务器并基于数据库提取有用信息，而后根据有用信息在互联网上查找反馈信息，最终通过微型投影仪将反馈信息投影在任何平面。本发明专利技术可以用于实现新一代的人机交互方式，将现实世界与数字世界无缝的结合在一起。

【技术实现步骤摘要】

本专利技术为一种基于互联网的可穿戴式人机交互系统，属于计算机图形学和互联网
，用于新一代的人机交互，将现实世界与数字世界无缝的结合在一起。
技术介绍
在上百万年的进化中，我们一直在感知周围的世界。当遇到某事某人，或来到某地时，我们使用天生的五感来收集信息，然后决定采取什么样的行动。同是人类的好奇心是非常强的，我们对新兴的技术和消息都会抱有极大的热情，这时求知欲也会无限地表示出来。 这样我们对包含来自人类千百万年来对万事万物积累下来的各种数据、体验知识和有实时信息的信息海洋互联网极度“痴迷”，并且人们也愿意把各种各样的信息发布到网上与别人分享。我们现在直观意义上理解的人机交互是指人与机器之间的互动方式一从键盘输入、手柄操作、触控操作，到索尼、微软不久前推出的动作感应。但这些交互方式主要存在以下几方面的不足(1)有些不是基于互联网的，作为现代人了解信息的主要途径的互联网如果不能被利用明显是不可取的；( 交互方式不够便捷或自然，传统的人机交互方式的移动性不强，把人限制在跟种各样的屏幕前，而且往往要借助辅助装置(如鼠标、键盘、手柄等)来进行交互，单通道的交互明显不够自然；C3)数字世界和现实世界泾渭分明，我们必须通过各种各样计算机走进数字世界，而不是将整个世界放进了你的设备中，同时把数字世界带入你的现实生活中。基于原有交互方式的不足，本专利技术提出了一种基于互联网的人机交互系统，带来一种全新的人机交互方式。
技术实现思路
本专利技术分位客户端和服务器端；客户端由一个微型摄像机、4个颜色标记物 、一个有网络接入功能的智能手机、一个微型投影仪组成；服务器端由后台服务器和数据库组成；用戴有颜色标记物的双手产生的手势信息来启动微型摄像机实时采集外界图形信息，然后通过有网络接入功能的智能手机上传到后台服务器并基于数据库提取有用信息，而后根据有用信息在互联网上查找反馈信息，最终通过微型投影仪将反馈信息投影在任何平面 。本专利技术具有如下特征(1)红、黄、蓝、绿四个颜色的颜色标记物分别佩戴在两个手的大拇指和食指指尖，用于产生预先定义的基于颜色标记物的手势信息。(2)微型摄像机获取手势信息。(3)有网络接入功能的智能手机通过运行的手势识别软件识别手势信息 所代表的含义并控制微型摄像机启动。(4)微型摄像机实时采集外界图形信息，并通过有网络接入功能的智能手机上传到后台服务器。(5)后台服务器对采集的外界图形信息进行识别和提取，若是文字 则直接将其作为有用信息，若是二维条码则进行基于数据库的有用信息 提取，否则舍弃。(6)利用有用信息在互联网上查找得到反馈信息，最终将反馈信息通过微型投影仪投影到任何平面。本专利技术有如下优点1、基于互联网，一种基于互联网的人机交互系统利用庞大的后台数据库作为支持，更是依托于整个互联网信息库得到反馈信息。2、一种基于互联网的人机交互系统的整个客户端装置可以由一条绳穿起挂在脖子上，而且本系统是使用利用基于视觉的手势识别进行人机交互的，所以充分体现了良好的移动性和自然化的人机交互方式。3、一种基于互联网的人机交互系统把数字世界和现实世界无缝的结合起来，现实世界中的信息通过微型摄像机放到数字世界，数字世界的信息通过微型投影仪带到现实世界。附图说明图1是本专利技术的穿戴示意2是本专利技术的人机交互流程示意3是本专利技术的服务器端有用信息提取的流程示意1-图3中1-微型摄像机、2-颜色标记物、3-有网络接入功能的智能手机、4-微型投影仪、5-后台服务器、6-手势信息、7-获取手势信息、8-识别手势信息、9-外界图形信息、10-有用信息、11-互联网、12-反馈信息、13-任何平面、14-文字、15- 二维条码、16-数据库。具体实施例方式实施举例一预先在手势识别软件中设定一个手势(如双手合十)代表启动微型摄像机。 当带有颜色标记物的双手产生这个手势信息W]时，通过微型摄像机获取手势信息并通过有网络接入功能的智能手机中运行的手势识别软件识别手势信息。 启动微型摄像机实时采集外界图形信息(如采集到一本书的封面信息)，并通过有网络接入功能的智能手机上传到后台服务器，后台服务器提取出外界图形信息中的有用信息(如封面中的书名或这本书二维条码)如果是文字即有用信息(如书名)；如果是二维条码则利用数据库查询出所包含的有用信息 (如书的出版社名、作者、简介等)。然后在互联网中查找反馈信息(如书评、 相关视频等)，最总将反馈信息传回有网络接入功能的智能手机并通过微型摄影仪投影到任何平面(如墙壁、纸面、手上等)。权利要求1.一种基于互联网的可穿戴式人机交互系统，其特征在于该系统由客户端和服务器端组成；客户端由一个微型摄像机、4个颜色标记物、一个有网络接入功能的智能手机、一个微型投影仪组成；服务器端由后台服务器和数据库组成；用戴有颜色标记物的双手产生的手势信息来启动微型摄像机实时采集外界图形信息 ，然后通过有网络接入功能的智能手机上传到后台服务器并基于数据库 提取有用信息，而后根据有用信息在互联网上查找反馈信息，最终通过微型投影仪将反馈信息投影在任何平面。2.权利要求1所述一种基于互联网的可穿戴式人机交互系统，其特征是微型摄像机用于获取手势信息和实时采集外界图形信息。3.权利要求1所述一种基于互联网的可穿戴式人机交互系统，其特征是红、黄、蓝、绿四个颜色的颜色标记物分别佩戴在两个手的大拇指和食指指尖，用于产生手势信息来进行人机交互。4.权利要求1所述一种基于互联网的可穿戴式人机交互系统，其特征是有网络接入功能的智能手机用于运行手势识别软件识别手势信息以及将微型摄像机采集的外界图形信息上传到后台服务器。5.权利要求1所述一种基于互联网的可穿戴式人机交互系统，其特征是微型投影仪用于从互联网上的反馈信息投影到任何平面上。6.权利要求1所述一种基于互联网的可穿戴式人机交互系统，其特征是后台服务器用于从采集的外界图形信息提取文字或二维条码，如果是二维条码还要进行基于数据库的信息提取，最终获得有用信息。数据库 中存放着每个二维条码对应的商品信息。全文摘要本专利技术为一种基于互联网的可穿戴式人机交互系统，属于计算机图形学和互联网
该系统由客户端和服务器端组成；客户端由一个微型摄像机、4个颜色标记物、一个有网络接入功能的智能手机、一个微型投影仪组成；服务器端由后台服务器和数据库组成；用戴有颜色标记物的双手产生的手势信息来启动微型摄像机实时采集外界图形信息，然后通过有网络接入功能的智能手机上传到后台服务器并基于数据库提取有用信息，而后根据有用信息在互联网上查找反馈信息，最终通过微型投影仪将反馈信息投影在任何平面。本专利技术可以用于实现新一代的人机交互方式，将现实世界与数字世界无缝的结合在一起。文档编号G06F3/01GK102236432SQ20101015534公开日2011年11月9日 申请日期2010年4月22日 优先权日2010年4月22日专利技术者夏季, 李坤东, 杜汶秦, 杨志刚, 田冬梅, 罗枭, 董楠楠, 袁娇娇, 赵倩, 陶然, 颜若颖 申请人:四川大学锦江学院, 李坤东, 陶然本文档来自技高网...

【技术保护点】
１．一种基于互联网的可穿戴式人机交互系统，其特征在于：该系统由客户端和服务器端组成；客户端由一个微型摄像机［１］、４个颜色标记物［２］、一个有网络接入功能的智能手机［３］、一个微型投影仪［４］组成；服务器端由后台服务器［５］和数据库［１６］组成；用戴有颜色标记物［２］的双手产生的手势信息［６］来启动微型摄像机［１］实时采集外界图形信息［９］，然后通过有网络接入功能的智能手机［３］上传到后台服务器［５］并基于数据库［１６］提取有用信息［１０］，而后根据有用信息［１０］在互联网［１１］上查找反馈信息［１２］，最终通过微型投影仪［４］将反馈信息［１２］投影在任何平面［１３］。

【技术特征摘要】

【专利技术属性】
技术研发人员：李坤东，陶然，杨志刚，罗枭，夏季，田冬梅，赵倩，颜若颖，杜汶秦，董楠楠，袁娇娇，
申请(专利权)人：四川大学锦江学院，陶然，李坤东，
类型：发明
国别省市：51