基于图像识别的交互方法及装置制造方法及图纸

本申请的实施例公开了基于图像识别的交互方法及装置。方法的一具体实施方式包括：获取待识别图像，待识别图像中包括预设卡片对象和预设指示物对象，预设指示物对象用于通过预设动作关联预设卡片对象中的图案；根据预设动作，识别待识别图像中预设指示物对象关联的图案；执行与图案对应的预设操作指令。本申请通过识别预设卡片中的图案，执行与图案对应的操作命令，卡片图案的识别相对于手势识别更易实现，提高了识别效率和识别精确度。提高了识别效率和识别精确度。提高了识别效率和识别精确度。

【技术实现步骤摘要】
基于图像识别的交互方法及装置


[0001]本申请实施例涉及计算机
，具体涉及一种基于图像识别的交互方法及装置。

技术介绍

[0002]随着计算机视觉技术的发展，人机交互的方式也渐渐由鼠标、键盘、遥控器等接触式交互转换为非接触式交互，例如，基于语音识别和手势识别的人机交互方式。
[0003]现有技术中，基于手势识别的人机交互方式，通常需要基于待识别图像进行手势识别，识别准确率和识别效率较低。

技术实现思路

[0004]本申请实施例提出了一种基于图像识别的交互方法及装置。
[0005]第一方面，本申请实施例提供了一种基于图像识别的交互方法，包括：获取待识别图像，待识别图像中包括预设卡片对象和预设指示物对象，预设指示物对象用于通过预设动作关联预设卡片对象中的图案；根据预设动作，识别待识别图像中预设指示物对象关联的图案；执行与图案对应的预设操作指令。
[0006]在一些实施例中，上述根据预设动作，识别待识别图像中预设指示物对象关联的图案，包括：根据预设动作，识别第一预设时间段内的图像帧对应的待识别图像中，预设指示物对象依次关联的预设卡片对象中的不同图案；以及上述执行与图案对应的预设操作指令，包括：执行与图案以及关联顺序对应的预设操作指令，关联顺序用于表征预设指示物对象依次关联的图案的顺序。
[0007]在一些实施例中，上述根据预设动作，识别待识别图像中预设指示物对象关联的图案，包括：根据预设动作，识别第二预设时间段内的图像帧对应的待识别图像中，预设指示物对象关联的图案的位移信息；上述执行与图案对应的预设操作指令，包括：执行与图案以及位移信息对应的预设操作指令。
[0008]在一些实施例中，预设卡片对象中的图案为表征盲文的图案；预设指示物对象为手指；预设动作为遮挡图案；上述根据预设动作，识别待识别图像中预设指示物对象关联的图案，包括：识别待识别图像中，与被预设指示物对象遮挡的图案相邻的图案；根据与被预设指示物对象遮挡的图案相邻的图案，以及预先存储的预设卡片对象中图案的相对位置关系，确定被预设指示物对象遮挡的图案。
[0009]在一些实施例中，在上述获取包含预设卡片对象和预设指示物对象的待识别图像之前，还包括：根据获取的人脸图像识别人脸图像对应的用户；获取与用户对应的操作模式，操作模式用于表征针对不同用户，所设置的预设卡片对象中的图案与预设操作指令的对应关系。
[0010]在一些实施例中，在上述根据预设动作，识别待识别图像中预设指示物对象关联的图案之前，还包括：识别动作是否为有效动作。
[0011]在一些实施例中，上述识别预设动作是否为有效动作，包括：识别待识别图像对应的当前帧图像之后的第三预设时间段内的视频的所有图像帧；根据所有图像帧中存在相同的预设动作的图像帧的占比与预设占比阈值的对比结果，判定预设动作是否为有效动作。
[0012]第二方面，本申请实施例提供了一种基于图像识别的交互装置，包括：获取单元，被配置成获取待识别图像，待识别图像中包括预设卡片对象和预设指示物对象，预设指示物对象用于通过预设动作关联预设卡片对象中的图案；识别单元，被配置成根据预设动作，识别待识别图像中预设指示物对象关联的图案；执行单元，被配置成执行与图案对应的预设操作指令。
[0013]在一些实施例中，识别单元，进一步被配置成根据预设动作，识别第一预设时间段内的图像帧对应的待识别图像中，预设指示物对象依次关联的预设卡片对象中的不同图案；以及上述执行与图案对应的预设操作指令，包括：执行与图案以及关联顺序对应的预设操作指令，关联顺序用于表征预设指示物对象依次关联的图案的顺序。
[0014]在一些实施例中，识别单元，进一步被配置成根据预设动作，识别第二预设时间段内的图像帧对应的待识别图像中，预设指示物对象关联的图案的位移信息；上述执行与图案对应的预设操作指令，包括：执行与图案以及位移信息对应的预设操作指令。
[0015]在一些实施例中，预设卡片对象中的图案为表征盲文的图案；预设指示物对象为手指；预设动作为遮挡图案；识别单元，进一步被配置成识别待识别图像中，与被预设指示物对象遮挡的图案相邻的图案；根据与被预设指示物对象遮挡的图案相邻的图案，以及预先存储的预设卡片对象中图案的相对位置关系，确定被预设指示物对象遮挡的图案。
[0016]在一些实施例中，还包括模式选择单元，被配置成根据获取的人脸图像识别人脸图像对应的用户；获取与用户对应的操作模式，操作模式用于表征针对不同用户，所设置的预设卡片对象中的图案与预设操作指令的对应关系。
[0017]在一些实施例中，还包括动作判定单元，被配置成识别动作是否为有效动作。
[0018]在一些实施例中，动作判定单元，进一步被配置成识别待识别图像对应的当前帧图像之后的第三预设时间段内的视频的所有图像帧；根据所有图像帧中存在相同的预设动作的图像帧的占比与预设占比阈值的对比结果，判定预设动作是否为有效动作。
[0019]第三方面，本申请实施例提供了一种计算机可读介质，其上存储有计算机程序，其中，程序被处理器执行时实现如第一方面任一实现方式描述的方法。
[0020]第四方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，其上存储有一个或多个程序，当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如第一方面任一实现方式描述的方法。
[0021]本申请实施例提供的基于图像识别的交互方法，首先，获取待识别图像，待识别图像中包括预设卡片对象和预设指示物对象，预设指示物对象用于通过预设动作关联预设卡片对象中的图案；然后，根据预设动作，识别待识别图像中预设指示物对象关联的图案；最后，执行与图案对应的预设操作指令。本申请通过识别预设卡片中的图案，执行与图案对应的操作命令，卡片图案的识别相对于手势识别更易实现，提高了识别效率和识别精确度。
附图说明
[0022]通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它
特征、目的和优点将会变得更明显：
[0023]图1是本申请的一个实施例可以应用于其中的示例性系统架构图；
[0024]图2是根据本申请的基于图像识别的交互方法的一个实施例的流程图；
[0025]图3是根据本实施例的基于图像识别的交互方法的应用场景的示意图；
[0026]图4是根据本申请的基于图像识别的交互方法的又一个实施例的流程图；
[0027]图5是根据本申请的基于图像识别的交互方法的再一个实施例的流程图；
[0028]图6是根据本申请的基于图像识别的交互装置的一个实施例的结构图；
[0029]图7是适于用来实现本申请实施例的计算机系统的结构示意图。
具体实施方式
[0030]下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关专利技术相关的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像识别的交互方法，所述方法包括：获取待识别图像，所述待识别图像中包括预设卡片对象和预设指示物对象，所述预设指示物对象用于通过预设动作关联所述预设卡片对象中的图案；根据所述预设动作，识别所述待识别图像中所述预设指示物对象关联的所述图案；执行与所述图案对应的预设操作指令。2.根据权利要求1所述的方法，其中，所述根据所述预设动作，识别所述待识别图像中所述预设指示物对象关联的所述图案，包括：根据所述预设动作，识别第一预设时间段内的图像帧对应的所述待识别图像中，所述预设指示物对象依次关联的所述预设卡片对象中的不同图案；以及所述执行与所述图案对应的预设操作指令，包括：执行与所述图案以及关联顺序对应的预设操作指令，所述关联顺序用于表征所述预设指示物对象依次关联的所述图案的顺序。3.根据权利要求1所述的方法，其中，所述根据所述预设动作，识别所述待识别图像中所述预设指示物对象关联的所述图案，包括：根据所述预设动作，识别第二预设时间段内的图像帧对应的所述待识别图像中，所述预设指示物对象关联的所述图案的位移信息；所述执行与所述图案对应的预设操作指令，包括：执行与所述图案以及所述位移信息对应的预设操作指令。4.根据权利要求1所述的方法，其中，所述预设卡片对象中的图案为表征盲文的图案；所述预设指示物对象为手指；所述预设动作为遮挡所述图案；所述根据所述预设动作，识别所述待识别图像中所述预设指示物对象关联的所述图案，包括：识别所述待识别图像中，与被所述预设指示物对象遮挡的图案相邻的图案；根据与被所述预设指示物对象遮挡的图案相邻的图案，以及预先存储的所述预设卡片对象中图案的相对位置关系，确定被...

【专利技术属性】
技术研发人员：ꢀ七四专利代理机构，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：