评价方法和评价装置制造方法及图纸

提供一种评价方法和评价装置。该评价方法包括：基于由包括在通过连续图像捕获而获得的多个捕获图像中的人打拍子的动作指示的节拍或该人打拍子的定时所指示的节拍与参考节拍的比较，输出对该人的动作的节拍的评价，该动作或定时是从捕获图像中提取的。

【技术实现步骤摘要】

本文所讨论的实施例涉及一种评价程序、评价方法和评价装置。
技术介绍
已开发出用于对人的舞蹈进行评分并且将评分结果通知给人的技术。 用于对人的舞蹈进行评分和评价的技术的示例可以包括用于对进行游戏的玩家 的游戏比赛进行评价的技术，在游戏中玩家随着音乐移动身体部分。例如，该技术基于这 样的确定结果来进行评价：在玩家的身体部分以等于参考速度或高于参考速度的速度移动 后，该部分是否连续基本停止参考时段。 日本特开2013-154125号公报 为了对人的舞蹈进行评分或评价，需要提取人打节奏的定时，即人打拍子的动作 或定时。然而，上面描述的技术，由于用于分析的大量的处理可能不能容易地提取人打拍子 的动作或定时。因此，该技术可能不能容易地对人动作的节拍进行评价。 在一个方面中，例如，通过用相机捕获人的动作、用计算机分析通过捕获获得的运 动图像并且提取人的节奏来对人的舞蹈进行评分。在特定的方法中，例如，通过预定的识别 技术（诸如模板匹配）从运动图像来识别人的脸的部分和身体的部分或由人使用的乐器 (诸如沙球）。这生成了所识别的脸的部分和身体部分或所识别的乐器的移动量的时间序 列数据。随后，对时间序列数据进行傅里叶分析等，从而从特定的频带分量提取人的节奏。 通过将所提取的人的节奏与参考节奏进行比较，例如，可以基于比较结果对人的舞蹈进行 评分。在使用模板匹配来根据上述方面的运动图像识别人的脸的部分和身体部分或由人使 用的乐器（诸如沙球）的情况下，例如在模板和运动图像的部分之间的比较被反复地执行。 这增加了用于分析的处理量，从而增加了计算机的处理负荷。 因此，本专利技术的实施例的一个方面的目的是根据捕获的图像对人的动作的节拍进 行评价。
技术实现思路
一种评价方法，包括：基于由通过连续图像捕获所获得的多个捕获图像中包括的 人打拍子的动作指示的节拍或由人打拍子的定时指示的节拍与参考节拍的比较，输出对该 人的动作的节拍的评价，该动作或该定时是从捕获的图像提取的。【附图说明】 图1是根据第一实施例的评价装置的配置的示例框图； 图2是帧的示例图； 图3是定时数据的示例图； 图4是二值化图像的示例图； 图5是在背景差分量和帧号之间关联的示例图； 图6是根据第一实施例的用于说明由评价装置执行的处理的示例图； 图7是通过绘制由定时数据所指示的人打拍子的定时而获得的曲线图的示例图； 图8是用于在使用人打拍子的定时作为参考的情况下来比较定时的方法的示例 图； 图9是用于在使用在参考节拍中的拍子的定时作为参考的情况下来比较定时的 方法的示例图； 图10是根据第一实施例的评价处理的流程图； 图11是根据第二实施例的评价装置的配置的示例框图； 图12是用于比较定时的数量的方法的示例图； 图13是根据第三实施例的评价装置的配置的示例框图； 图14是用于比较人的动作特征和旋律特征的方法的示例图；图15是在评价装置结合卡拉OK机操作的情况下的系统的示例图； 图16是包括服务器的系统的示例图；以及 图17是执行评价程序的计算机的图。【具体实施方式】 将参考附图来说明优选实施例。实施例无意限制所公开的技术，并且，在不引起在 处理内容上的不一致的情况下，可以对这些实施例进行适当的组合。 第一实施例 根据第一实施例的评价装置10的功能配置的示例。 在图1的示例中示出的评价装置10从通过用相机捕获跳舞的人而获得的运动图 像中的每一帧提取人的动作量暂时地减少的定时，作为人打节奏的定时，即人打拍子的定 时。因此，人的动作量暂时减少的定时被提取为人打拍子的定时。这是因为当人打拍子时 会暂时停止运动，由此动作量暂时减少。例如，节奏意味着节拍的间隔的规律性。例如，节 拍意味着拍子之间的间隔的长度。评价装置10将由所提取的定时指示的节拍与用作为参 考的参考节拍进行比较，从而对人的动作的节拍进行评价。如上所述，评价装置10提取人 打拍子的定时，从而在不执行用于识别人的脸的部分和身体的部分或乐器的识别处理，即 需要大量的处理的识别处理（高处理负荷）的情况下，来对人的动作的节拍进行评价。因 此，评价装置10能够便利于对人的动作的节拍进行评价。 图1是根据第一实施例的评价装置的配置的示例框图。如在图1中的示例所示， 评价装置10包括输入单元11、输出单元12、存储单元13和控制单元14。 输入单元11向控制单元14输入各种类型的信息。例如，当输入单元11从使用评 价装置10的用户接收到执行评价处理的指令（将在下面描述）时，输入单元11将所接收 到的指令输入到控制单元14。输入单元11的设备示例可以包括鼠标、键盘和网卡，该网卡 接收从其它设备（未图示）传输的各种类型的信息并且将所接收到的信息输入到控制单元 14〇 输出单元12输出各种类型的信息。例如，当输出单元12从输出控制单元14e(将 在下面描述）接收到人的动作的节拍的评价结果时，输出单元12显示所接收的评价结果或 将所接收的评价结果发送给用户的移动终端或外部监视器。输出单元12的设备示例可以 包括监视器和网卡，该网卡将发送自控制单元14的各种类型的信息发送给其它设备（未图 示）。 存储单元13存储有各种类型的信息。例如，存储单元13存储有运动图像数据13a、 定时数据13b、音乐节拍数据13c和评价数据13d。 运动图像数据13a是通过用相机捕获跳舞的人而获得的、包括多个帧的运动图像 的数据。人的示例可以包括在卡拉OK包厢中随着由卡拉OK机再现的音乐唱歌并随着再现 的音乐跳舞的人。包括在运动图像数据13a中的帧通过用相机进行连续地图像捕获而获 得，并且是捕获图像的示例。图2是帧的示例图。在图2的示例中，帧15包括在卡拉OK包 厢90中随着音乐唱歌和跳舞的人91。运动图像数据13a的帧速率可以被设置为期望的值。 在下面的描述中，帧速率被设置为30帧每秒（fps)。 定时数据13b指示跳舞的人打拍子（打拍子）的时间（定时）。在包括在运动图 像数据13a中的人是在卡拉OK包厢中随着再现的音乐唱歌和跳舞的人的情况下，时间的示 例可以包括从音乐和舞蹈的开始的时间。这是因为随着音乐的开始舞蹈同时开始。图3是 定时数据的示例图。在图3的示例中所示出的定时数据13b包括"时间"项和"打拍子的定 时"项。在"时间"项中，从音乐和舞蹈的开始的时间由提取单元14c记录，这将在下面描 述。在"打拍子的定时"项中，在记录在"时间"项的时间是人打拍子的定时的情况下，"打 拍子"由提取单元14c(将在下面描述）记录，然而在该时间不是人打拍子的定时的情况下， "不打拍子"被记录。在图3中的示例所图示的定时数据13b的第一记录中，在音乐和舞蹈 开始后"0. 033"秒的时间与记录在"打拍子的定时"项中的"打拍子"关联。这表明该时间 是人打拍子的定时。在图3中的示例所图示的定时数据13b的第二记录中，在音乐和舞蹈 开始后"0. 066"秒的时间与记录在"打拍子的定时"项中的"不打拍子"关联。这表明该时 间不是人打拍子的定时。 音乐节拍数据13c指示参考节拍。参考节拍通过评价单元14d(将在下面描述） 从声音信息中获得。声音信息的示例可以包括通过麦克风（未图示）收集的声音、通过卡 拉OK机再现的音乐、与来自用摄像机等（未图示）记录的视频数据的本文档来自技高网...

【技术保护点】
一种评价方法，包括：基于由包括在通过连续图像捕获而获得的多个捕获图像中的人打拍子的动作指示的节拍或所述人打拍子的定时所指示的节拍与参考节拍的比较，输出对所述人的动作的节拍的评价，所述动作或所述定时是从所述捕获图像中提取的。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：坂井美帆，小口淳，
申请(专利权)人：富士通株式会社，
类型：发明
国别省市：日本;JP