一种AR辅助乐器练习方法、系统以及一种智能设备技术方案

本发明专利技术提供一种AR辅助乐器练习方法、系统以及一种智能设备，所述AR辅助乐器练习方法应用于一智能设备中，所述AR辅助乐器练习方法包括：捕捉弹奏智能乐器的用户弹奏动作实时图像；从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；实时显示所述用户弹奏动作实时图像并根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。本发明专利技术中，用户通过智能设备进行乐器练习，智能设备可以判定用户手型，弹奏指法是否正确，若弹错，提示用户错在哪里，下一步应该怎么弹，为练习者提供有效的教学辅助手段。

【技术实现步骤摘要】
一种AR辅助乐器练习方法、系统以及一种智能设备
本专利技术涉及乐器
，特别是涉及钢琴
，具体为一种AR辅助乐器练习方法、系统以及一种智能设备。
技术介绍
钢琴是一种键盘乐器，用键拉动琴槌以敲打琴弦。钢琴通常包括踏板、调音钉、琴槌、制音器、击弦机、音板和琴键构成。其中，踏板是指钢琴下面用足踩的踏板而言。它是钢琴中除键盘外最重要的配件。制音器是与弦紧贴着，用来阻止弦的震动。例如当钢琴上的琴键被按下时，钢琴内部的琴槌会打在一条条用铜制造的琴弦上，借着琴弦的震动发出声音。击弦机连接着琴键和琴槌，是整部钢琴的灵魂和最重要的配件。音板位于钢琴内部的一块大木板，高档钢琴用枫树实木板拼成，现代低端普及琴有用密度板。它连着调音钉，紧贴着琴弦，当琴弦振动，音板会使声波高效率耦合到空气中，即将声音透过响板反射以及扩大出来。整个琴键都是由黑键和白键组合而成，通常包括黑键36个，白键52个，共88个。随着技术的不断发展，现代钢琴不断与新技术相结合，对如何利用新技术帮助钢琴的演奏和指导钢琴的教学方面不断提出新的要求。乐器的学习需要大量的重复性练习，如何更好的为乐器练习者提供教学辅助用具是本领域技术人员亟待解决的技术问题。
技术实现思路
鉴于以上所述现有技术的缺点，本专利技术的目的在于提供一种AR辅助乐器练习方法、系统以及一种智能设备，用于为乐器练习者提供教学辅助。为实现上述目的及其他相关目的，本专利技术提供一种AR辅助乐器练习方法，应用于一智能设备中，所述AR辅助乐器练习方法包括：捕捉弹奏智能乐器的用户弹奏动作实时图像；从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；实时显示所述用户弹奏动作实时图像并根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。于本专利技术的一实施例中，所述AR辅助乐器练习方法还包括：从所述智能乐器实时获取每一个弹奏指法的弹奏注意事项；根据所述弹奏注意事项显示当前弹奏指法的下一弹奏指法的弹奏注意事项。于本专利技术的一实施例中，所述AR辅助乐器练习方法还包括：在用户当前弹奏指法错误时，通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的错误。于本专利技术的一实施例中，通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的正确弹奏指法。本专利技术的实施例还提供一种AR辅助乐器练习系统，应用于一智能设备中，所述AR辅助乐器练习系统包括：图像捕捉模块，用于捕捉弹奏智能乐器的用户弹奏动作实时图像；信息接收模块，用于从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；教学模块，用于实时显示所述用户弹奏动作实时图像并根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。于本专利技术的一实施例中，所述信息接收模块还用于从所述智能乐器实时获取每一个弹奏指法的弹奏注意事项；所述教学模块还用于根据所述弹奏注意事项显示当前弹奏指法的下一弹奏指法的弹奏注意事项。于本专利技术的一实施例中，在用户当前弹奏指法错误时，所述教学模块还用于通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的错误。于本专利技术的一实施例中，所述教学模块通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的正确弹奏指法。本专利技术的实施例还提供一种存储介质，存储有程序指令，所述程序指令被执行时实现如上所述的AR辅助乐器练习方法。本专利技术的实施例还提供一种智能设备，包括处理器和存储器，所述存储器存储有程序指令，所述处理器运行程序指令实现如上所述的AR辅助乐器练习方法。如上所述，本专利技术的AR辅助乐器练习方法、系统以及一种智能设备，具有以下有益技术效果：本专利技术中，用户通过智能设备进行辅助乐器练习，智能设备可以判定用户手型，弹奏指法是否正确，若弹错，提示用户错在哪里，下一步应该怎么弹，为练习者提供有效的教学辅助手段。附图说明图1显示为本专利技术的AR辅助乐器练习方法的流程示意图。图2显示为本专利技术的AR辅助乐器练习方法中进行提示的流程示意图。图3显示为本专利技术的AR辅助乐器练习系统的原理框图。元件标号说明100AR辅助乐器练习系统110图像捕捉模块120信息接收模块130教学模块S110～S170步骤具体实施方式以下通过特定的具体实例说明本专利技术的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本专利技术的其他优点与功效。本专利技术还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本专利技术的精神下进行各种修饰或改变。本实施例的目的在于提供一种AR辅助乐器练习方法、系统以及一种智能设备，用于为乐器练习者提供教学辅助。以下将详细阐述本实施例的一种AR辅助乐器练习方法、系统以及一种智能设备的原理及实施方式，使本领域技术人员不需要创造性劳动即可理解本实施例的一种AR辅助乐器练习方法、系统以及一种智能设备。如图1所示，本实施例提供一种AR辅助乐器练习方法，所述AR辅助乐器练习方法应用于一智能设备中，所述AR辅助乐器练习方法包括以下步骤：步骤S110，捕捉弹奏智能乐器的用户弹奏动作实时图像；步骤S120，从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；步骤S130，实时显示所述用户弹奏动作实时图像；步骤S140，根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，步骤S150，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。以下对本实施例AR辅助乐器练习方法的步骤S110至步骤S150进行详细说明。步骤S110，捕捉弹奏智能乐器的用户弹奏动作实时图像。其中，所述智能乐器包括不限于智能钢琴、智能小提琴、大提琴、智能吉他等。其中，所述智能设备为但不限于智能眼镜、智能手机或PAD等支持AR的设备，所述智能设备中内置有一摄像头，通过所述智能设备中的摄像头捕捉弹奏智能乐器的用户弹奏动作实时图像。步骤S120，从所述智能乐器实时获取用户当前按键信息和按键正确指法信息。于本实施例中，于所述智能乐器中预存曲谱信息，曲谱对应的按键正确指法信息，所述智能乐器通过键盘的传感器或者其它按键信息采集设备实时采集用户当前按键信息。在用户打开所述智能乐器上的曲谱时，将曲谱对应的按键正确指法信息发送至智能设备，在用户进行弹奏，按下琴键时采集的用户当前按键信息发送至所述智能设备。步骤S130，实时显示所述用户弹奏动作实时图像。通过智能设备可以实时看到用户弹奏动作实时图像。步骤S140，根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确。其中，从所述用户弹奏动作实时图像中提取按键指法信息，结合所述用户当前按键信息，匹配当前按键的按键正确指法信息，判断用户的当前按键指法是否正确。步骤S150，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。于本实施例中，在用户当前弹奏指法错误时，通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的错误。即在用户当前弹奏指法错误时，可以在智能设备里面显示对应的错误提示，并显示正确的弹奏指法。其中，于本文档来自技高网...

【技术保护点】
1.一种AR辅助乐器练习方法，应用于一智能设备中，其特征在于：所述AR辅助乐器练习方法包括：捕捉弹奏智能乐器的用户弹奏动作实时图像；从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；实时显示所述用户弹奏动作实时图像并根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。

【技术特征摘要】
1.一种AR辅助乐器练习方法，应用于一智能设备中，其特征在于：所述AR辅助乐器练习方法包括：捕捉弹奏智能乐器的用户弹奏动作实时图像；从所述智能乐器实时获取用户当前按键信息和按键正确指法信息；实时显示所述用户弹奏动作实时图像并根据所述用户弹奏动作实时图像、所述用户当前按键信息和按键正确指法信息确定用户当前指法是否正确，在用户当前弹奏指法错误时进行提示并显示对应的正确弹奏指法。2.根据权利要求1所述的AR辅助乐器练习方法，其特征在于：所述AR辅助乐器练习方法还包括：从所述智能乐器实时获取每一个弹奏指法的弹奏注意事项；根据所述弹奏注意事项显示当前弹奏指法的下一弹奏指法的弹奏注意事项。3.根据权利要求1所述的AR辅助乐器练习方法，其特征在于：所述AR辅助乐器练习方法还包括：在用户当前弹奏指法错误时，通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的错误。4.根据权利要求1所述的AR辅助乐器练习方法，其特征在于：通过虚拟乐器键盘图片，弹奏指法手型以及文字进行提示并显示对应的正确弹奏指法。5.一种AR辅助乐器练习系统，应用于一智能设备中，其特征在于：所述AR辅助乐器练习系统包括：图像捕捉模块，用于捕捉弹奏智能乐器的用户弹奏动作实时图像；信息接收模块，用于从所...

【专利技术属性】
技术研发人员：刘晓露，燕斌，童刚，周国栋，
申请(专利权)人：森兰信息科技上海有限公司，
类型：发明
国别省市：上海,31