【技术实现步骤摘要】
本申请涉及音视频处理，尤其涉及一种教学行为分析方法、装置、设备及存储介质。
技术介绍
1、数字化、媒体化的智能信息技术正在改变传统的教学模式，教育信息化在课堂教学领域的应用愈发广泛。例如，为了能够采集记录教师、学生在课堂上的行为，通常在教室中设置有摄像头、录像机、麦克风等多媒体设备，实现教学音视频的录制，以供进行教学行为分析。
2、在相关技术中，一些厂商提供的服务仅通过对视频的视觉分析以及语音分析，对课堂行为进行识别，并统计相应的时长，进而确定课堂行为所占用的时长和占比。
3、但专利技术人在实际应用中发现，上述数据与教学质量的关联性较弱，无法关联课堂教学内容和教师教学行为，相关技术提供的方案无法更客观合理地为用户提供教学质量分析，不利用户对教学效果的认知和对教学质量的提升，相关技术提供的方案不够实用。
技术实现思路
1、本申请提供了一种教学行为分析方法、装置、设备及存储介质，解决了对教学音视频的分析中难以关联课堂教学内容和教学行为，且对教学质量的分析不够合理的问题，本方案能够更好地关联课堂教学内容和教学行为，并得到更合理的教学质量分析结果。
2、第一方面，本申请提供了一种教学行为分析方法，应用于终端设备，终端设备与教室场景中的音视频采集组件通信连接，以接收音视频采集组件采集到的教学音视频，该方法包括：
3、获取当前教室的课程信息，并结合课程信息对教学音视频的音频数据进行语义分析，以获取关联于课堂教学内容的知识点信息；
4、
5、基于教学音视频的时间轴，确定对应各知识点信息以及各教授行为的时间节点，并生成教学流程时序图；
6、根据教学音视频的时间轴以及学习行为，确定学生在各采样时刻上的学习投入度，并对学习投入度和对应知识点信息以及各教授行为的时间节点进行关联；
7、生成并显示对应的显示窗口，显示窗口显示有教学音视频、学习投入度和教学流程时序图。
8、第二方面，本申请还提供一种教学行为分析装置，该装置包括：
9、知识点提取模块，配置为获取当前教室的课程信息，并结合课程信息对教学音视频的音频数据进行语义分析，以获取关联于课堂教学内容的知识点信息；
10、行为分析模块，配置为根据对教学音视频的视觉分析和语义分析的分析结果，确定对应于教师的教授行为以及对应于学生的学习行为；
11、图像生成模块，配置为基于教学音视频的时间轴，确定对应各知识点信息以及各教授行为的时间节点，并生成教学流程时序图；
12、数据关联模块，配置为根据教学音视频的时间轴以及学习行为，确定学生在各采样时刻上的学习投入度，并对学习投入度和对应知识点信息以及各教授行为的时间节点进行关联；
13、窗口生成模块，配置为生成并显示对应的显示窗口，显示窗口显示有教学音视频、学习投入度和教学流程时序图。
14、第三方面，本申请还提供一种终端设备，包括：
15、一个或多个处理器；
16、存储装置，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如上述提供的教学行为分析方法。
17、第四方面，本申请还提供一种存储计算机可执行指令的存储介质，计算机可执行指令在由处理器执行时用于执行如上述提供的教学行为分析方法。
18、本申请方案通过对教学音视频的视觉分析以及语义分析，从而在音频数据以及视频画面中确定当前课堂的知识点信息以及相应的教学行为，而且还对教师的教授行为以及学生的学习行为进行区分，以将课堂教学内容和教师的教授行为关联，并且还对应学生的学习行为确定相应的学习投入度，进而再度关联课堂教学内容。方案能够利用课堂教学内容和教学行为的关联，从而客观合理地体现教学质量，使设备生成能体现教学质量的输出结果，有利于用户对教学效果的认知以及对教学质量的提升。
本文档来自技高网...【技术保护点】
1.一种教学行为分析方法，其特征在于，应用于终端设备，所述终端设备与教室场景中的音视频采集组件通信连接，以接收所述音视频采集组件采集到的教学音视频，所述方法包括：
2.根据权利要求1所述的教学行为分析方法，其特征在于，所述教室场景中配置有显示课件的教学设备，所述教学设备中记录有所述课程信息；
3.根据权利要求2所述的教学行为分析方法，其特征在于，所述获取当前教室的课程信息，并结合所述课程信息对所述教学音视频的音频数据进行语义分析，以获取关联于课堂教学内容的知识点信息，还包括：
4.根据权利要求1或2所述的教学行为分析方法，其特征在于，所述根据对所述教学音视频的视觉分析和语义分析的分析结果，确定对应于教师的教授行为以及对应于学生的学习行为，包括：
5.根据权利要求4所述的教学行为分析方法，其特征在于，所述学生动作包括举手动作；
6.根据权利要求4所述的教学行为分析方法，其特征在于，所述教师动作包括口述动作，所述教授行为包括提问行为和讲授行为；
7.根据权利要求1所述的教学行为分析方法，其特征在于，所述基于所述教
8.根据权利要求1所述的教学行为分析方法，其特征在于，所述根据所述教学音视频的时间轴以及所述学习行为，确定学生在各采样时刻上的学习投入度，并对所述学习投入度和对应知识点信息以及各教授行为的时间节点进行关联，包括：
9.根据权利要求8所述的教学行为分析方法，其特征在于，还包括：
10.一种教学行为分析装置，其特征在于，应用于终端设备，所述终端设备与教室场景中的音视频采集组件通信连接，以接收所述音视频采集组件采集到的教学音视频，所述装置包括：
11.一种终端设备，其特征在于，包括：
12.一种存储计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由处理器执行时用于执行如权利要求1-9中任一项所述的教学行为分析方法。
...【技术特征摘要】
1.一种教学行为分析方法，其特征在于，应用于终端设备，所述终端设备与教室场景中的音视频采集组件通信连接，以接收所述音视频采集组件采集到的教学音视频，所述方法包括：
2.根据权利要求1所述的教学行为分析方法，其特征在于，所述教室场景中配置有显示课件的教学设备，所述教学设备中记录有所述课程信息；
3.根据权利要求2所述的教学行为分析方法，其特征在于，所述获取当前教室的课程信息，并结合所述课程信息对所述教学音视频的音频数据进行语义分析，以获取关联于课堂教学内容的知识点信息，还包括：
4.根据权利要求1或2所述的教学行为分析方法，其特征在于，所述根据对所述教学音视频的视觉分析和语义分析的分析结果，确定对应于教师的教授行为以及对应于学生的学习行为，包括：
5.根据权利要求4所述的教学行为分析方法，其特征在于，所述学生动作包括举手动作；
6.根据权利要求4所述的教学行为分析方法，其特征在于，所述教师动作包括口述动作，所述教授行为包...
【专利技术属性】
技术研发人员：黄逸涛，曾繁荣，余鹏飞，
申请(专利权)人：广州开得联智能科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。