一种基于儿童图书的AR互动学习方法、装置、介质制造方法及图纸

本发明专利技术提供了一种基于儿童图书的AR互动学习方法、装置、介质，使图书中的虚拟角色及功能结合现实场景产生互动，同时引导儿童更好的理解图书中的内容，提高对事物的认知并使图书对于儿童更富有趣味性及互动性从而培养儿童喜欢看书的好习惯，方法包括如下步骤：步骤1：调用摄像头，获取图书的当前书页的页面信息；步骤2：识别书页的页面信息，获取相匹配的AR动画；步骤3：将AR动画渲染至当前摄像头所摄的场景中，在书页上播放AR动画；步骤4：通过用户的交互动作与AR动画进行互动。

An AR interactive learning method, device and medium based on children's books

The invention provides an AR interactive learning method, device and medium based on children's books, which enables the virtual role and function in the books to interact with the real scene, at the same time, guides the children to better understand the contents of the books, improves the cognition of things and makes the books more interesting and interactive for children, so as to cultivate children's good habit of reading. The method includes Next steps: Step 1: call the camera to obtain the page information of the current book page of the book; step 2: identify the page information of the book page and obtain the matching ar animation; step 3: render the AR animation to the scene taken by the current camera and play the AR animation on the book page; step 4: interact with the AR animation through the user's interaction action.

【技术实现步骤摘要】
一种基于儿童图书的AR互动学习方法、装置、介质
本专利技术涉及AR
，具体为一种基于儿童图书的AR互动学习方法、装置、介质。
技术介绍
AR是增强现实(AugmentedReality)的简称，是通过电脑技术，将虚拟的信息应用到真实世界，真实的环境和虚拟的物体实时地叠加到了同一个画面或空间。近年来，AR技术的规模应用主要是在儿童图书领域。儿童天生对色彩鲜艳、能说会动的东西感兴趣，静不下心来阅读平面图书。而AR技术集合文字、图片、三维动画、声音、视频、互动游戏等多种信息传达，为儿童教育提供了更丰富的载体，增强了书本的可参与性，使知识与信息能够更有效地被孩子接受和吸收。当前的儿童图书的AR动画的展现效果比较稚嫩，AR动画中虚拟世界的物品没有办法真正的融入现实世界，比如物品的摆放、运动等都无法跟真实世界做到完美的交互，AR技术只能表现在展示阶段而且不能真正的融入到真实世界。
技术实现思路
针对上述问题，本专利技术提供了一种基于儿童图书的AR互动学习方法、装置、介质，使图书中的虚拟角色及功能结合现实场景产生互动，同时引导儿童更好的理解图书中的内容，提高对事物的认知并使图书对于儿童更富有趣味性及互动性从而培养儿童喜欢看书的好习惯。其技术方案是这样的：一种基于儿童图书的AR互动学习方法，其特征在于：包括如下步骤：步骤1：调用摄像头，获取图书的当前书页的页面信息；步骤2：识别书页的页面信息，获取相匹配的AR动画；步骤3：将AR动画渲染至当前摄像头所摄的场景中，在书页上播放AR动画；步骤4：通过用户的交互动作与AR动画进行互动。进一步的，在步骤2中，若未在本地AR动画库未匹配到与书页的页面信息相对应的内容，则将页面信息发送给服务器，在服务器中匹配与书页的页面信息相对应的AR动画，并将AR动画下载到本地AR动画库。进一步的，在步骤1中，识别书页的页面信息通过将摄像头所摄图片的特征点与本地AR动画库中模板图片的特征点进行匹配实现。进一步的，在步骤1中，对将摄像头所摄图片进行灰度处理，将图片转换成黑白图片；提取黑白图片的特征点；将特征点数据打包；对比摄像头所摄图片的特征点数据包与本地AR动画库中模板图片的特征点数据包。进一步的，在步骤3中，计算书页的空间位置信息，并绑定AR动画在书页的空间位置处，将AR动画渲染在实体书页的空间位置处。进一步的，在步骤3中，将AR动画绑定音频，在播放AR动画时，同步播放音频，所述音频与所述AR动画相匹配。一种基于儿童图书的AR互动学习装置，其特征在于，包括：书页扫描模块，用于获取当前书页的页面信息，并将所述页面信息发送至内容检测模块；本地AR动画库，用于存储AR动画；所述内容检测模块，用于根据所述页面信息从所述本地AR动画库中获取相匹配的AR动画，并将AR动画的播放信息发送至AR动画播放模块；AR动画播放模块，用于根据放信息播放所述本地AR动画库中、与所述页面信息相匹配的AR动画，将AR动画渲染至当前的真实场景中；交互模块，用于与所述AR动画进行互动。进一步的，还包括：服务器，用于存储AR动画；无线通讯模块，用于与所述服务器通讯；在所述内容检测模块未从所述本地AR动画库中获取相匹配的AR动画时，所述内容检测模块将所述页面信息发送至所述服务器，从所述服务器中下载与所述页面信息相匹配的AR动画至本地AR动画库中并通过所述AR动画播放模块播放。一种基于儿童图书的AR互动学习装置,其特征在于，其包括：包括处理器、存储器以及程序；所述程序存储在所述存储器中，所述处理器调用存储器存储的程序，以执行上述的基于儿童图书的AR互动学习方法。一种计算机可读存储介质，其特征在于，所述计算机可读存储介质被配置成存储程序，所述程序被配置成执行上述的基于儿童图书的AR互动学习方法。本专利技术的基于儿童图书的AR互动学习方法、装置、介质，使图书中的虚拟角色及功能结合现实场景产生互动，使阅读内容更加生动形象，增加了阅读的趣味性，显著提升了阅读体验，同时引导儿童更好的理解图书中的内容，提高对事物的认知，并使图书对于儿童更富有趣味性及互动性，从而培养儿童喜欢看书的好习惯，；此外，还使得低龄儿童能更早的接触到新科技，了解科技对科技的发展起到启蒙作用；本专利技术的基于儿童图书的AR互动学习方法特别是对于孩子们学习过程和理解书本内容起到了加强和补充的作用，尤其是自然科学、艺术以及卫生类的课本，增强现实技术让书本具有互动性，实现了原地不动地进行场景创造、行程规划、情节模拟，让教师、学生和家长们随时随地都可以参与进来，AR的加入基于积极的探索和发现，让学习和阅读变得更有条理，更具乐趣，其集在线学习、多元化、多角度于一体，带来前所未有的体验和进步。附图说明图1为本专利技术的一种基于儿童图书的AR互动学习方法的流程图；图2为本专利技术的一个实施例的基于儿童图书的AR互动学习装置的构成框图；图3为本专利技术的另一个实施例的基于儿童图书的AR互动学习装置的构成框图；具体实施方式见图1，一种基于儿童图书的AR互动学习方法，包括如下步骤：步骤1：调用摄像头，获取图书的当前书页的页面信息；步骤2：识别书页的页面信息，获取相匹配的AR动画；步骤3：将AR动画渲染至当前摄像头所摄的场景中，在书页上播放AR动画；步骤4：通过用户的交互动作与AR动画进行互动。具体在本实施例中，在步骤1中，识别书页的页面信息通过将摄像头所摄图片的特征点与本地AR动画库中模板图片的特征点进行匹配实现。具体的，在步骤1中，对将摄像头所摄图片进行灰度处理，将图片转换成黑白图片；提取黑白图片的特征点；将特征点数据打包；对比摄像头所摄图片的特征点数据包与本地AR动画库中模板图片的特征点数据包。具体的，在步骤3中，计算书页的空间位置信息，并绑定AR动画在书页的空间位置处，将AR动画渲染在实体书页的空间位置处。此外，在本专利技术的另一个实施例中，在步骤3中，将AR动画绑定音频，在播放AR动画时，同步播放音频，音频与AR动画相匹配。此外，在本专利技术的另一个实施例中，在步骤2中，若未在本地AR动画库未匹配到与书页的页面信息相对应的内容，则将页面信息发送给服务器，在服务器中匹配与书页的页面信息相对应的AR动画，并将AR动画下载到本地AR动画库。见图2，本专利技术的一种基于儿童图书的AR互动学习装置，包括：书页扫描模块1，用于获取当前书页的页面信息，并将页面信息发送至内容检测模块；本地AR动画库2，用于存储AR动画；内容检测模块3，用于根据页面信息从本地AR动画库中获取相匹配的AR动画，并将AR动画的播放信息发送至AR动画播放模块5；AR动画播放模块4，用于根据放信息播放本地AR动画库中、与页面信息相匹配的AR动画，将AR动画渲染至当前的真实场景中；交互模块5，用于与AR本文档来自技高网...

【技术保护点】
1.一种基于儿童图书的AR互动学习方法，其特征在于：包括如下步骤：/n步骤1：调用摄像头，获取图书的当前书页的页面信息；/n步骤2：识别书页的页面信息，获取相匹配的AR动画；/n步骤3：将AR动画渲染至当前摄像头所摄的场景中，在书页上播放AR动画；/n步骤4：通过用户的交互动作与AR动画进行互动。/n

【技术特征摘要】
1.一种基于儿童图书的AR互动学习方法，其特征在于：包括如下步骤：
步骤1：调用摄像头，获取图书的当前书页的页面信息；
步骤2：识别书页的页面信息，获取相匹配的AR动画；
步骤3：将AR动画渲染至当前摄像头所摄的场景中，在书页上播放AR动画；
步骤4：通过用户的交互动作与AR动画进行互动。


2.根据权利要求1所述的一种基于儿童图书的AR互动学习方法，其特征在于：在步骤2中，若未在本地AR动画库未匹配到与书页的页面信息相对应的内容，则将页面信息发送给服务器，在服务器中匹配与书页的页面信息相对应的AR动画，并将AR动画下载到本地AR动画库。


3.根据权利要求1所述的一种基于儿童图书的AR互动学习方法，其特征在于：在步骤1中，识别书页的页面信息通过将摄像头所摄图片的特征点与本地AR动画库中模板图片的特征点进行匹配实现。


4.根据权利要求3所述的一种基于儿童图书的AR互动学习方法，其特征在于：在步骤1中，对将摄像头所摄图片进行灰度处理，将图片转换成黑白图片；提取黑白图片的特征点；将特征点数据打包；对比摄像头所摄图片的特征点数据包与本地AR动画库中模板图片的特征点数据包。


5.根据权利要求1所述的一种基于儿童图书的AR互动学习方法，其特征在于：在步骤3中，计算书页的空间位置信息，并绑定AR动画在书页的空间位置处，将AR动画渲染在实体书页的空间位置处。


6.根据权利要求1所述的一种基于儿童图书的AR互动学习方法，其特征在于：在步骤3中，将...

【专利技术属性】
技术研发人员：叶苗，
申请(专利权)人：苏州悠优互娱文化传媒有限公司，
类型：发明
国别省市：江苏;32