图画描绘支援装置、方法、以及程序制造方法及图纸

本发明专利技术提供对用户的图画描绘制作进行支援，以使用户能简单地描绘所希望的图画的图画描绘支援装置、方法、以及程序。一实施形态的图画描绘支援装置具备特征提取部、声音识别部、关键词提取部、图像检索部、图像选择部、图像变形部以及提示部。特征提取部从用户所描绘的图画中提取特征量。声音识别部对用户发出的声音进行声音识别。关键词提取部从上述声音识别结果中提取至少一个关键词。图像检索部从预先准备的图像中检索与上述至少一个关键词对应的一个以上的图像。图像选择部根据上述特征量从上述检索出的一个以上的图像中选择符合上述图画的图像。图像变形部根据上述特征量使上述被选择的图像变形，生成输出图像。提示部提示上述输出图像。

【技术实现步骤摘要】
图画描绘支援装置、方法、以及程序
本专利技术的实施形态涉及图画描绘支援装置、方法、以及程序。
技术介绍
存在有通过手写方式对图画的描绘进行支援的图画描绘支援装置。已有的图画描 绘支援装置对用户所描绘的图画进行图形识别，生成以识别结果为依据的图画。 现有技术文献 专利文献 专利文献1 :日本专利第4708913号 专利文献2 :日本特开2002 - 215627号公报
技术实现思路
专利技术要解决的课题 在上述那样的图画描绘支援装置中，存在只在对用户所描绘的图画进行了正确的 图形识别的情况下图画描绘支援才能够成功的问题。具体地说，与四边形等简单的图形和 文字以外的对象(物体）对应是困难的，而且为了与形状复杂的图形对应，用户必须描绘出 能够进行图形识别的详细的图画。 对图画描绘支援装置的要求是，能够支援用户的图画描绘，以使得用户能简单地 描绘所希望的图画。 本专利技术想要解决的课题，是提供一种能够支援用户的图画描绘以使用户能够简单 地描绘所希望的图画的图画描绘支援装置、方法、以及程序。 解决课题用的手段 本专利技术一实施形态的图画描绘支援装置具备特征提取部、声音识别部、关键词提 取部、图像检索部、图像选择部、图像变形部、以及提示部。特征提取部从用户所描绘的图画 中提取特征量。声音识别部对上述用户发出的声音进行声音识别。关键词提取部从上述声 音识别结果提取至少一个关键词。图像检索部从预先准备的图像中检索与上述至少一个关 键词对应的一个以上的图像。图像选择部根据上述特征量从上述检索出的一个以上的图像 中选择符合上述图画的图像。图像变形部根据上述特征量使上述被选择出的图像变形，生 成输出图像。提示部提示上述输出图像。 【附图说明】 图1是概略表示一实施形态所涉及的图画描绘支援装置的方框图。 图2是表示图1的图画描绘支援装置的处理步骤例的流程图。 图3是表示用户所描绘的图画之一例的图。 图4是表示图1所示的关键词提取部的处理步骤例的流程图。 图5是表示图1所示的关键词提取部所保持的配置短语提取辞典之一例的图。 图6是表示图1所示的图像存储部所存储的图像的例子的图。 图7是表示图1所示的图像选择部的处理步骤例的流程图。 图8是表示图1所示的图像变形部的处理步骤例的流程图。 图9的（a)及（b)是表不利用图1所不的图像变形部生成的变形图像的例子的图。 图10是表示图1所示的图像变形部将图9的（a)的变形图像与图9的（b)的变形 图像合成制作的输出图像的图。 图11是表示用户所描绘的图画的另一例子的图。 图12是表示图1的图画描绘支援装置根据图11的图画制作出的输出图像之一例 的图。 【具体实施方式】 以下参照附图对各种实施形态进行说明。 图1概略地表示一实施形态所涉及的图画描绘支援装置。该图画描绘支援装置可 以适用于像PC (个人电脑)、平板电脑、智能手机等那样具备能够用笔或手指进行手写输入 的手写输入接口的终端装置。在本实施形态中，作为手写输入接口，设想是包含设置于显示 装置的显示画面的触摸屏和操作触摸屏用的笔的笔式输入装置。 图1所示的图画描绘支援装置是利用声音识别支援用户描绘图画的装置。具体地 说，图画描绘支援装置具备声音识别部101、关键词提取部102、图像存储部103、图像检索 部104、特征提取部105、图像选择部106、图像变形部107、以及显示部(也称为提示部)108。 声音识别部101对用户发出的声音进行声音识别，将识别结果作为文本（text)输 出。具体地说，用户发出的话语利用麦克风等声音输入装置收集，作为声音数据被提供给声 音识别部101。声音识别部101通过对声音数据进行声音识别，将用户发出的话语(声音)转 换为文本。声音识别可以借助于公知的或今后能够开发出的任意声音识别技术进行。还有， 在识别结果不能够被唯一地确定的情况下，声音识别部101可以将多个候补识别结果附上 其可信度输出，或也可以将每一单词的候补识别结果的系列作为格网（9 f 等数据结 构输出。 关键词提取部102从声音识别部101输出的文本中提取关键词。作为关键词的提 取方法，可以利用例如对文本进行语态分析，提取独立词的方法。在声音识别部101的识别 结果为包含助词的句子的情况下等，也有关键词提取部102提取多个关键词的情况。 在图像存储部103,与标签信息对应地储备、即存储有被事先登记了的图像数据。 还有，图像存储部103不限于设置在图画描绘支援装置内的例子，也可以设置在与图画描 绘支援装置进行通信的其他装置(例如服务器)。 图像检索部104将关键词提取部102所提取的关键词作为检索关键词，根据标签 信息检索在图像存储部103中存储的图像。可以检索一个图像，也可以检索多个图像。 特征提取部105从用户一边发声一边描绘的图画中提取特征量。还有，发声与描 绘不一定要同时进行，也可以是时间上有偏差的动作。例如，用户也可以在描绘图画后输入 与该图画对应的（即表现该图画的）声音，或者也可以在输入声音后描绘对应的图画。 进一步地，特征提取部105从图像检索部104检索出的图像中提取特征量。还有， 对检索出的图像的特征提取处理不一定要在检索后执行。例如也可以在特征提取部105对 预先准备的图像进行特征提取处理，将图像与处理结果（即特征量）及标签信息对应地存储 于图像存储部103。 图像选择部106根据所描绘的图画的特征量和检索出的图像的特征量，从检索出 的图像中选择符合该图画的图像。在这里，符合是一致或类似的意思。图像变形 部107按照描绘的图画的特征量，使图像选择部106选择出的图像变形，生成与用户描绘出 的图画对应的输出图像(也称为输出图画）。显示部108为了将图像变形部107生成的输出 图像向用户提示而进行显示。 本实施形态的图画描绘支援装置利用声音识别，从预先准备的多个图像中选择符 合用户描绘的图画的图像，基于该图像生成输出图像。借助于此，能够对描绘制作图画进行 支援，以使用户能够简单地描绘所希望的图画。 下面对本实施形态的图画描绘支援装置的动作进行说明。 图2概略地表示本实施形态的图画描绘支援装置的动作例。在步骤S201中，用户 用笔描绘图画，同时发出与该图画对应的声音。在步骤S202,特征提取部105从用户描绘 的图画中提取特征量。在步骤S203,声音识别部101对用户的声音进行声音识别。在步骤 S204,关键词提取部102从声音识别结果中提取关键词。在步骤S205,判断关键词提取部 102提取的关键词是否为多个。在提取到一个关键词的情况下，进入步骤S208,在提取到多 个关键词的情况下，进入步骤S206。在步骤S206中，图像检索部104从图像存储部103检 索标签信息完全包含这些关键词的图像。在步骤S207,判断是否检索到图像。检索到图像 的情况下，进入步骤S210,没有检索到图像的情况下，进入步骤S208。 在步骤S208,图像检索部104对每一关键词检索包含该关键词的图像。在步骤 S209,判断是否对全部关键词中的各关键词进行了图像检索。对全部关本文档来自技高网...

【技术保护点】
一种图画描绘支援装置，其特征在于，具备：特征提取部，其从用户所描绘的图画中提取特征量；声音识别部，其对所述用户发出的声音进行声音识别；关键词提取部，其从所述声音识别的结果提取至少一个关键词；图像检索部，其从预先准备的图像中检索与所述至少一个关键词对应的一个以上的图像；图像选择部，其根据所述特征量，从所述检索出的一个以上的图像中选择符合所述图画的图像；图像变形部，其根据所述特征量使所述被选择的图像变形，生成输出图像；以及提示部，其提示所述输出图像。

【技术特征摘要】
2013.03.21 JP 2013-0589411. 一种图画描绘支援装置，其特征在于，具备： 特征提取部，其从用户所描绘的图画中提取特征量； 声音识别部，其对所述用户发出的声音进行声音识别； 关键词提取部，其从所述声音识别的结果提取至少一个关键词； 图像检索部，其从预先准备的图像中检索与所述至少一个关键词对应的一个以上的图 像； 图像选择部，其根据所述特征量，从所述检索出的一个以上的图像中选择符合所述图 画的图像； 图像变形部，其根据所述特征量使所述被选择的图像变形，生成输出图像；以及 提示部，其提示所述输出图像。2. 根据权利要求1所述的图画描绘支援装置，其特征在于， 所述图像选择部根据所述特征量计算所述图画与所述检索出的一个以上的图像的每 一个之间的类似度，根据所述类似度与规定的阈值的比较，选择与所述图画类似的图像。3. 根据权利要求2所述的图画描绘支援装置，其特征在于， 在所述关键词提取部提取多个关键词，且所述图像选择部根据所述比较判断所述检索 出的图像中没有与所述图画类似的图像的情况下，所述图像检索部就所述多个关键词的每 一个检索与该关键词对应的一个以上的图像，所述图像选择部从所述检索出的一个以上的 图像中选择与所述图画的一部分类似的图像，所述图像变形部将与所述多个关键词分别对 应的多个图像合成。4. 根据权利要求2所述的图画描绘支援装置，其特征在于， 在所述图画是简单的图形，且所述图像选择部根据所述比较判断所述检索出的图像中 没有与所述图画类似的图像的情况下，所述图像选择部从所述检索出的一个以上的图像中 选择与所述图画的类似度最大的图像，所述图像变形部根据所述图画的大小和位置使所述 被选择的图像变形。5. 根据权利要求2所述的图画描绘支援装置，其特征在于， 所述特征...

【专利技术属性】
技术研发人员：铃木优，冈本昌之，长健太，布目光生，
申请(专利权)人：株式会社东芝，
类型：发明
国别省市：日本;JP