用于适配情境模型的方法和装置制造方法及图纸

公开一种用于适配情境模型的方法、设备、计算机程序产品和因特网服务。在该方法中，接收媒体剪辑。也接收至少部分在捕获媒体剪辑时捕获的传感器数据。至少部分基于传感器数据使用情境模型来推导情境，并且向用户提供关于情境的指示。从用户接收关于情境的相关度的反馈。基于反馈，继而可以适配情境模型。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及适配情境(context)识别器的情境模型。本专利技术还涉及一种情境识别 器和计算机程序产品，该计算机程序产品具有在其中存储的用于适配情境识别器的情境模 型的计算机代码。
技术介绍
便携设备(如移动电话和膝上型计算机)已经在人们之中变得很流行。在人们到处 移动时经常至少携带移动电话。其中这样的便携设备由便携设备的用户携带的情境可以变 化。有时可能希望使便携设备或者可能在便携设备中运行的应用的属性适配于用户位于其 中的环境和用户的活动。数字相机也已经在过去十年很快变成常见家用物品。除了独立相机之外，许多其 它电子设备(如移动电话和计算机)配备有数字相机。用数字相机拍摄的图片和/或视频保 存于设备的记忆卡或者内部存储器上，并且可以容易并且瞬时地从该存储器取用它们以用 于查看和打印。拍摄照片已经变得容易并且非常可负担。这已经自然地造成数字图片数目 激增并且随着每个图片数兆字节的常见大小而造成存储需要激增。为了管理个人容易具有 的数以千计的图片，已经开发了计算机程序和因特网服务。这样的程序和服务通常具有如 下特征，这些特征允许个人根据某一标准排列图片或者甚至执行搜索以发现所需图像。搜索包含所需内容的图片和视频是有挑战的任务。关于图片或者视频的一些附加 信息(如捕获时间或者地点)经常可用来帮助搜索。也有可能例如借助脸部识别来分析图片 内容，从而使得可以在搜索中使用人们的姓名。这自然地需要一些用户交互以关联姓名与 识别的脸部。为了帮助搜索，图片和视频管理系统的用户可以给出将向图片附着的文字输 入，它们可以对图片分类和评级并且执行其它人工任务以在以后它们需要发现所需图片时 帮助识别所需图片。这样的人工操作欠灵活并且耗时，并且在另一方面，全自动图片搜索方 法可能经常产生不令人满意的结果。需要开发用于感测环境(比如室夕卜、室内、办公室或者餐馆)以及活动(比如奔跑或 者行走)的方法，从而使得可以提供适配于用户的情形的设备、应用和服务。具体而言，已经注意在制造自动分析用户情境的商业上可行系统时的一个问题可 能是用于对每个用户的个别特性建模的能力。这可以在使用详尽登记阶段时是有可能的， 在该阶段期间，用户将输入环境和活动范围，系统将收集数据并且更新和/或训练它的模 型。然而，这可能对于最终用户而言要求太高。
技术实现思路
现在已经专利技术了一种改进的方法和实施该方法的技术设备，通过该方法和设备可 以不明显地收集用户专属适配数据而不麻烦用户太多，从而使得可以改进情境识别算法的 性能。本专利技术的各种方面包括一种方法、装置、服务器、客户端和计算机可读介质，该计算机 可读介质包括在其中存储的计算机程序。在一些实施例中，相关度反馈可以用于适配用于除了在搜索查询中使用的或者在内容项中包括的模态(modality)之外的模态的模型。例 如，用于图像的相关度反馈可以用来适配基于音频的情境模型。本专利技术的一些示例实施例包括情境识别器(例如，基于音频)和相机应用。当用户 拍摄图片时，基于图片拍摄情境向用户建议一个或者多个标签。当用户做出用于将标签链 接到图像的选择时，这一信息被用来适配情境识别器。例如，如果情境识别器建议用于图像 的标签“街道”，并且用户选择标签，则适配用于情境“街道”的模型。因此，情境识别器算法 可以学习以更好地对用户拜访的情境建模。在从属权利要求中公开本专利技术的各种实施例。本专利技术的一些实施例提供基于用户从建议的标签选择哪些标签来适配一个或者 多个情境模型。根据本专利技术的第一方面，提供一种方法，该方法包括-接收媒体剪辑；-接收至少部分结合媒体剪辑的捕获而捕获的传感器数据；-至少部分基于传感器数据使用情境模型来推导至少一个情境；-向用户提供关于情境的指示；-从用户接收关于情境的相关度的反馈；-基于反馈来适配情境模型。根据本专利技术的第二方面，提供一种装置，该装置包括-用于接收媒体剪辑的装置；-用于接收至少部分结合媒体剪辑的捕获而捕获的传感器数据的装置；-用于至少部分基于传感器数据使用情境模型来推导至少一个情境的装置；-用于向用户提供关于情境的指示的装置；-用于从用户接收关于情境的相关度的反馈的装置；以及-用于基于反馈来适配情境模型的装置。根据本专利技术的第三方面，提供一种装置，该装置包括至少一个处理器，以及包括计算机程序代码的至少一个存储器，至少一个存储器和计算机程序代码被配置成与至少一个处理器一起使该装置至 少-接收媒体剪辑；-接收至少部分结合媒体剪辑的捕获而捕获的传感器数据；-至少部分基于传感器数据使用情境模型来推导至少一个情境；-向用户提供关于情境的指示；-从用户接收关于情境的相关度的反馈；-基于反馈来适配情境模型。根据本专利技术的第四方面，提供一种装置，该装置包括-第一输入，配置用于接收媒体剪辑；-第二输入，配置用于接收至少部分结合媒体剪辑的捕获而捕获的传感器数据；-第一单元，配置用于至少部分基于传感器数据使用情境模型来推导至少一个情境;-第二单元，配置用于向用户提供关于情境的指示；-第三输入，配置用于从用户接收关于情境的相关度的反馈；-第三单元，配置用于基于反馈来适配情境模型。根据本专利技术的第五方面，提供一种包括至少一个计算机可读存储介质的计算机程 序产品，至少一个计算机可读存储介质具有在其中存储的计算机可执行程序代码部分，计 算机可执行程序代码部分包括程序代码指令，程序代码指令用于-接收媒体剪辑；-接收至少部分结合媒体剪辑的捕获而捕获的传感器数据；-至少部分基于传感器数据使用情境模型来推导至少一个情境；-向用户提供关于情境的指示；-从用户接收关于情境的相关度的反馈；-基于反馈来适配情境模型。附图说明在下文中，将参照附图更具体地描述本专利技术的各种实施例，在附图中图1示意地示出了利用本专利技术的一些实施例的电子设备；图2示意地示出了适合于利用本专利技术的一些实施例的用户设备；图3进一步示意地示出了使用无线和有线网络连接来连接的利用本专利技术的实施 例的电子设备；图4a示意地示出了利用本专利技术的实施例的装置的一些细节；图4b示意地示出了根据本专利技术的一个实施例的情境识别和适配模块的进一步细 节;图5示出了用于实施本专利技术的处理步骤的概况；图6a描绘了用户已经拍摄的图片的示例；图6b描绘了由装置提出的标签的示例视图，该视图交织最喜欢的标签和自动推 导的标签；图6c描绘了标签组合的选择；图7示出了以基于搜索的相关度反馈为基础的一个实施例的处理步骤的概况；图8示出了用于通过对音频特征应用搜索标准来实现从图像数据搜索的方法；图9示出了用于通过比较与图像相关联的音频特征来实现从图像数据搜索的方 法;图10示出了通过应用从时域向频域的变换来形成音频特征的示图1la示出了形成Mel频率倒频谱系数作为音频特征的示图1lb示出了用于创建Mel频率倒频谱系数或者其它音频特征的滤波器组的可能 形成；并且图12示出了分布式图片捕获和情境适配的示例的用例的示例。具体实施方式在下文中，将在通过使用涉及标注媒体数据的用户活动或者设备环境作为指示符 来适配情境模型的上下文中描述本专利技术的若干实施例。然而，将注意，本专利技术并不限于具体 设备或者具体网络设置。事实上，不同实施例在其中需要改进情境模型适配的任何环境中 广泛具有应用。概率标签是关键词和至少一个参数值的联合，该参数值指示关键词的本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种在装置中的方法，包括 -接收媒体剪辑； -接收至少部分结合所述媒体剪辑的捕获而捕获的传感器数据； -至少部分基于所述传感器数据使用情境模型来推导至少一个情境； -向用户提供关于所述情境的指示； -从所述用户接收关于所述情境的相关度的反馈； -基于所述反馈来适配所述情境模型。2.根据权利要求1所述的方法，还包括推导第一参数值，所述第一参数值指示所述传感器数据与所述情境匹配的概率。3.根据权利要求1或者2所述的方法，还包括与所述媒体剪辑的接收独立地将所述情境模型用于确定活动情境、音频情境和社交情境中的至少一个情境。4.根据权利要求1或者2所述的方法，其中所述向所述用户提供关于所述情境的指示包括 -将关键词集合与所述情境相关联；以及 -向所述用户呈现所述关键词集合。5.根据权利要求4所述的方法，其中所述从所述用户接收所述情境的相关度的反馈包括接收所述用户从所述关键词集合对关键词的选择。6.根据权利要求1或者2所述的方法，其中所述向所述用户指示所述情境包括 -接收具有至少一个与情境有关的搜索标准的搜索查询； -推导在所述情境与所述至少一个与情境有关的搜索标准之间的相似度； -呈现所述媒体剪辑的至少部分作为对所述搜索查询的响应。7.根据权利要求6所述的方法，其中所述从所述用户接收所述情境的相关度的反馈包括接收相对于所述至少一个与情境有关的搜索标准的关于所述媒体剪辑的相关度的反馈。8.根据权利要求7所述的方法，其中适配所述情境模型还基于所述相似度。9.根据权利要求2所述的方法，包括推导在所述情境与所述至少一个与情境有关的搜索标准之间的相似度，其中适配所述情境模型还基于所述相似度，并且所述方法还包括基于所述反馈或者所述相似度中的至少一项适配所述第一参数值。10.根据权利要求1或者2所述的方法，其中向所述用户指示所述情境包括 -接收搜索查询，所述搜索查询是包括或者伴随第一与情境有关的数据项的示例； -推导在所述情境与所述第一与情境有关的数据项之间的相似度；以及 -呈现所述媒体剪辑的至少部分作为对所述搜索查询的响应。11.根据权利要求10所述的方法，其中所述从所述用户接收所述情境的相关度的反馈包括接收相对于所述第一与情境有关的数据项的关于所述媒体剪辑的相关度的反馈。12.根据权利要求1至11中的任一权利要求所述的方法，其中所述媒体剪辑是以下各项中的至少一项 -照片； -视频剪辑； -音频剪辑。13.一种装置，包括-用于接收媒体剪辑的装置； -用于接收至少部分结合所述媒体剪辑的捕获而捕获的传感器数据的装置； -用于至少部分基于所述传感器数据使用情境模型来推导至少一个情境的装置； -用于向用户提供关于所述情境的指示的装置； -用于从所述用户接收关于所述情境的相关度的反馈的装置；以及 -用于基于所述反馈来适配所述情境模型的装置。14.根据权利要求13所述的装置，还包括用于推导第一参数值的装置，所述第一参数值指示所述传感器数据与所述情境匹配的概率。15.根据权利要求13或者14所述的装置，还包括用于与所述媒体剪辑的接收独立地将所述情境模型用于确定活动情境、音频情境和社交情境中的至少一个情境的装置。16.根据权利要求13或者14所述的装置，其中所述用于向所述用户提供关于所述情境的指示的装置包括 -用于将关键词集合与所述情境相关联的装置；以及 -用于向所述用户呈现所述关键词集合的装置。17.根据权利要求16所述的装置，其中所述用于从所述用户接收所述情境的相关度的反馈的装置被进一步配置用于接收所述用户从所述关键词集合对关键词的选择。18.根据权利要求13或者14所述的装置，还包括 -用于接收具有至少一个与情境有关的搜索标准的搜索查询的装置； -用于推导在所述情境与所述至少一个与情境有关的搜索标准之间的相似度的装置； -用于呈现所述媒体剪辑的至少部分作为对所述搜索查询的响应的装置。19.根据权利要求18所述的装置，其中所述用于从所述用户接收所述情境的相关度的反馈的装置被进一步配置用于接收相对于所述至少一个与情境有关的搜索标准的关于所述媒体剪辑的相关度的反馈。20.根据权利要求19所述的装置，其中所述用于适配所述情境模型的装置被进一步配置用于基于所述相似度执行所述适配。21.根据权利要求14所述的装置，包括用于推导在所述情境与所述至少一个与情境有关的搜索标准之间的相似度的装置，其中适配所述情境模型还基于所述相似度，并且所述装置被进一步配置用于基于所述反馈或者所述相似度中的至少一项适配所述第一参数值。22.根据权利要求13或者14所述的装置，其中所述用于向所述用户指示所述情境的装置包括 -用于接收搜索查询的装置，所述搜索查询是包括或者伴随第一与情境有关的数据项的示例； -用于推导在所述情境与所述第一与情境有关的数据项之间的相似度的装置；以及 -用于呈现所述媒体剪辑的至少部分作为对所述搜索查询的响应的装置。23.根据权利要求22所述的装置，其中所述用于从所述用户接收所述情境的相关度的反馈的装置被配置用于接收相对于所述第一与情境有关的数据项的关于所述媒体剪辑的相关度的反馈。24.根据权利要求13至23中的任一权利要求所述的装置，其中所述媒体剪辑是以下各项中的至少一项-照片； -视频剪辑； -音频剪辑。25.一种装置，包括 至少一个处理器，以及 包括计算机程序代码的至少一个存储器， 所述至少一个存储器和所述计算机程序代码被配置成与所述至少一个处理器一起使所述装置至少 -接收媒体剪辑； -接收至少部分结合所述媒体剪辑的捕获而捕获的传感器数据； -至少部分基于所述传感器数据使用情境模型来推导至少一个情境； -向用户提供关于所述情境的指示； -从所述用户接收关于所述情境的相关度的反馈； -基于所述反馈来适配所述情境模型。26.根据权利要求25所述的装置，其中所述至少一个存储器和所述计算机程序代码被进一步配置成与所述至少一个处理器一起使所述装置至少推导第一参数值，所述第一参数值指示所述传...

【专利技术属性】
技术研发人员：M·安尼克塞拉，A·埃罗南，J·莱帕南，
申请(专利权)人：诺基亚公司，
类型：
国别省市：