本公开涉及用于编码和解码多媒体文件中的触觉信息的方法和设备。一种用于编码具有内容的多媒体文件内的触觉信息的方法,包括:改变多媒体文件中的内容的一部分,以及将触觉信息加入内容的改变部分,触觉信息对应于用于在重放多媒体文件时生成触觉效果的触觉信号。一种用于从具有内容的多媒体文件内解码触觉信息的方法,该方法包括:定位多媒体文件内的触觉信息,和在重放多媒体文件的内容期间基于定位的触觉信息生成触觉信号。一种方法,包括:利用触觉装置的接收器接收包括音频信号和触觉信号的多媒体信号,以及利用触觉装置的触觉输出装置基于多媒体信号中的触觉信号输出触觉效果。
【技术实现步骤摘要】
用于编码和解码多媒体文件中的触觉信息的方法和设备
本专利技术涉及用于编码在诸如音频和/或视频文件的多媒体文件中的触觉信息的方法和设备,以及用于解码多媒体文件中的触觉信息的方法和设备。
技术介绍
普遍认为将触觉反馈增加到媒体对象(例如图像、视频或音频剪辑)可以在某些情况下,增强媒体对象的用户体验。例如,一只猫的照片可以具有与它相关联的咕噜触感知觉。在与媒体对象关联触感反馈方面的关键挑战是,大多数呈现(rendering)引擎没有提供明确的触觉效果信息。可以具有与这个信息分离的文件或与流,但是这第二内容源复杂化现有内容递送机制,例如超文本传输协议(“HTTP”)。 一种针对这个挑战的潜在解决方案是在呈现端点从媒体对象自动生成触觉内容。现有的算法和方法可以通过使用音频和视频媒体对象作为输入来完成这种类型的内容创建。其它的算法和方法可以从图像提取空间纹理信息和对此局部呈现。这些方法中两者仅适合于机械性明显的触觉显示器。不能利用这种方法生成内容产生器期待的新颖内容。
技术实现思路
期望将更多的真实性和生活增加到多媒体对象。根据本专利技术的方面,水印或隐写算法或方法可被用于将数字信息直接编码到媒体内容本身中。 根据本专利技术的一个方面,提供了一种用于编码具有内容的多媒体文件内的触觉信息的方法。该方法包括改变多媒体文件中的内容的一部分,和将触觉信息加入内容的改变部分,触觉信息对应于用于在重放多媒体文件时生成触觉效果的触觉信号。 根据本专利技术的一个方面,提供了一种用于从具有内容的多媒体文件内解码触觉信息的方法。该方法包括:定位多媒体文件内的触觉信息;以及在重放多媒体文件的内容期间基于定位的触觉信息生成触觉信号。 根据本专利技术的一个方面,提供了一种触觉装置,包括被配置成输出媒体文件中媒体内容的媒体输出装置,处理器,被配置成打开该媒体文件,解码在媒体文件中编码的触觉信息,和基于从媒体文件解码的触觉信息输出触觉信号,以及触觉输出装置,被配置成基于从处理器接收到的触觉信号输出触觉效果。 根据本专利技术的一个方面,提供了一种方法,包括:利用触觉装置的接收器接收包括音频信号和触觉信号的多媒体信号,以及利用触觉装置的触觉输出装置基于多媒体信号中的触觉信号输出触觉效果。 根据本专利技术的一个方面,提供了一种触觉装置,包括接收器,被配置成接收多媒体信号;处理器,被配置成处理多媒体信号和识别多媒体信号中的触觉信号;以及触觉输出装置,被配置成基于触觉信号输出触觉效果。 【附图说明】 以下图的组件被示出是为了强调本公开的总原理,而不一定是按比例绘制的。为了一致和清晰,必要时在所有图中重复指定相应组件的参考字符。 图1是根据本专利技术实施例的电子装置的示意图; 图2是图1的电子装置的处理器的示意图; 图3是示出方法的一个实施例的流程图,该方法用于生成触觉内容和在媒体文件中包括触觉内容以及利用媒体文件的内容重放触觉内容; 图4示出多媒体文件的音频流的一个实施例,其包括射击和要在射击音频文件中编码的触觉触发标记的六个可能位置; 图5示出触觉效果触发标记将被增加到其中的单音音频信号的一个实施例; 图6示出在图5的单音音频信号中的编码的触觉效果触发标记; 图7A示出图6的单音音频信号的20毫秒帧的一个实施例,其不包含编码的触觉信息; 图7B示出图6的单音音频信号的20毫秒帧的另一个实施例,其包含被编码的触觉信息; 图8示出图7A和图7B的过滤后的信号的功率谱的一个实施例; 图9示出用于在重放期间编码触觉触发和解码触觉触发的方法的一个实施例,以及 图10示出用于基于多媒体信号中接收的触觉信息生成触觉效果的方法的一个实施例,。 【具体实施方式】 图1是根据本专利技术的一个实施例的电子装置10的示意图。如所示,电子装置100包括处理器110、存储器装置120、和输入/输出装置130,这些装置经由总线140互连。在一个实施例中,输入/输出装置130可以包括触摸屏装置150或其它人机界面装置。 触摸屏装置150可以被配置成任何合适的人机界面或触摸/接触表面组件。触摸屏装置150可以是任何触摸屏、触控板、触摸敏感结构、计算机监视器、膝上型电脑显示装置、工作簿显示装置、电脑亭屏幕、便携式电子装置屏幕、或其它合适的触摸敏感装置。触摸屏装置150可以被配置为与用户控制的装置(诸如触笔、手指等)进行物理交互。在一些实施例中,触摸屏装置150可以包括至少一个输出装置和至少一个输入装置。例如,触摸屏装置150可以包括视觉显示器和叠加在视觉显示器上以从用户的手指接收输入的触摸敏感屏。视觉显示器可以包括高清晰显示屏幕。 在各种实施例中,触摸输出装置160被配置成向电子装置100的至少一部分提供触觉反馈,该触觉反馈可以被传达给与电子装置100接触的用户。具体地,触摸输出装置160可以向触摸屏本身提供触觉反馈,以当用户与该屏幕接触时施加触觉效果。如以下更详细讨论的,触觉效果可以用于当观看媒体文件中的内容时增强用户体验。 触觉效果可以按创建触觉的任何方法创建,例如振动、变形、运动知觉、静电型或超声波摩擦等。在一个实施例中,触觉输出装置160可以包括致动器,例如偏心旋转质量(“ERM”)的电磁致动器,其中偏心质量块被电机驱动,线性谐振执行器(“LRA”),其中附连到弹簧的质量块被来回驱动,或“智能材料“,例如压电材料、电活性聚合物或形状记忆合金、宏复合纤维致动器、静电致动器、电触感致动器和/或另一种类型致动器,其提供诸如触觉(诸如振动触觉)反馈的物理反馈。触觉输出装置160可以包括非机械或非振动装置,例如使用静电摩擦(ESF)、超声表面摩擦(USF)的那些、或者利用超声波触觉传感器诱发声辐射压力的那些,或使用触觉基板和柔性或可变形表面的那些,或者提供投射触觉输出(例如空气喷射的一股空气)的那些等等。在一个实施例中,多个触觉输出装置可以被用于产生不同的触觉效果。 电子装置100可以是任何装置,诸如台式电脑、膝上型电脑、电子工作簿、电子手持装置(诸如移动电话、智能手机、游戏装置、个人数字助理(“PDA”)、便携式电子邮件装置、便携式互联网接入装置、计算器等)、电脑亭(诸如自动柜员机、定时购买机等)、打印机、销售点装置、游戏控制器、可佩戴装置或其它电子装置。 处理器110可以是用于管理或控制电子装置100的操作和功能的通用或专用处理器或微控制器。例如,处理器110可以被专门设计为专用集成电路(“ASIC”),其控制到输入/输出装置130的驱动器的输出信号以提供触觉效果。处理器110可以被配置成基于预定义因素来决定基于处理器110接收到或确定的触觉信号要产生什么触觉效果、产生触觉效果的次序、以及触觉效果的幅度、频率、持续时间和/或其它参数。处理器110还可以被配置成提供可以用于驱动用于提供特定触觉效果的触觉输出装置160的流传输命令。在一些实施例中,处理器装置110实际上可以包括多个处理器,每个处理器被配置成执行电子装置100内的某些功能。下面更详细描述处理器110。 存储器装置120可以包括一个或多个内部固定存储单元、可移除存储单元、和/或可远程访问存储单元。各种存储单元可以包括易失性存储器和非易失性存储的任何组合。存储单元本文档来自技高网...
【技术保护点】
一种用于编码具有内容的多媒体文件内的触觉信息的方法,该方法包括:改变多媒体文件中的内容的一部分;以及将触觉信息加入内容的改变部分,触觉信息对应于用于在重放多媒体文件时生成触觉效果的触觉信号。
【技术特征摘要】
2013.03.15 US 13/842,9121.一种用于编码具有内容的多媒体文件内的触觉信息的方法,该方法包括: 改变多媒体文件中的内容的一部分;以及 将触觉信息加入内容的改变部分,触觉信息对应于用于在重放多媒体文件时生成触觉效果的触觉信号。2.根据权利要求1所述的方法,其中多媒体文件的内容包括图像。3.根据权利要求1所述的方法,其中多媒体文件的内容包括视频。4.根据权利要求1所述的方法,其中多媒体文件的内容包括音频内容。5.根据权利要求1所述的方法,其中,所述改变包括从多媒体文件去除内容的所述部分,并且其中所述触觉信息被增加代替内容的去除部分。6.根据权利要求5所述的方法,其中,从多媒体文件去除内容的所述部分包括利用过滤器过滤多媒体文件内的内容。7.根据权利要求6所述的方法,其中,所述过滤器是阻带过滤器,具有对应于被增加代替内容的去除部分的触觉信息的频率的中心频率。8.根据权利要求1所述的方法,其中,所述改变包括重排多媒体文件中内容的所述部分。9.一种用于从具有内容的多媒体文件内解码触觉信息的方法,该方法包括: 定位多媒体文件内的触觉信息;以及 在重放多媒体文件的内容期间基于定位的触觉信息生成触觉信号。10.根据权利要求9所述的方法,其中,所述定位触觉信息包括利用过滤器以触觉信息的频率过滤内容。11.根据权利要求9所述的方法,其中,所述过滤器是带通过滤器。12.一种触觉装置,包括: 被配置成输出媒体文件中的媒体内容的媒体输出装置; 处理器,被配置成打开该媒体文件,解码在媒体文件中编码的触觉信息,和基于从媒体文件解码的触觉信息输出触觉信号;以及 触觉输出装置,被配置成基于从处理器接收到的触觉信号输出触觉效果。13.根据权利要求12所述的触觉装置,其中,所述媒体文件包括图像并且媒体输出装置被配置成显示图像。14.根据权利要求12所述的触觉装置,其中,所述媒体文件包括视频并且媒体输出装置被配...
【专利技术属性】
技术研发人员:A·瑟恩,C·J·乌尔里奇,J·M·克鲁兹埃尔南德斯,A·莫达里斯,
申请(专利权)人:英默森公司,
类型:发明
国别省市:美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。