(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221048618 8.X (22)申请日 2022.05.06 (71)申请人 深圳市微 酷智能科技有限公司 地址 518000 广东省深圳市龙岗区园山 街 道荷坳社区龙岗大道8288号大运软件 小镇66栋301C0-C11室 (72)发明人 曹栋　 (74)专利代理 机构 北京冠和权律师事务所 11399 专利代理师 茆林霞 (51)Int.Cl. G06Q 50/20(2012.01) G06V 20/52(2022.01) G10L 15/22(2006.01) H04N 5/225(2006.01)H04N 7/18(2006.01) H04N 21/431(2011.01) (54)发明名称 一种数字化教育互联网学习 系统 (57)摘要 本发明提供一种数字化教育互联网学习系 统， 包括： 教师端监控模块， 用于对教师端进行监 控， 确定教师端对应的教师的授课状态； 多个学 生端监控模块， 用于对学生端进行一一对应监 控， 确定各个学生端对应的学生的听课状态； 互 动模块， 用于接收教师端和/或学生端的互动请 求， 建立互动连接并进入互动连接显示。 本发明 的数字化教育互联网学习系统， 通过互动模块， 实现教师与学生之间的快速互动， 提高了授课质 量以及学习效率。 权利要求书4页 说明书9页 附图1页 CN 114936952 A 2022.08.23 CN 114936952 A 1.一种数字化教育互联网学习 系统， 其特 征在于， 包括： 教师端监控 模块， 用于对教师端 进行监控， 确定所述教师端对应的教师的授课状态； 多个学生端监控模块， 用于对学生端进行一一对应监控， 确定各个所述学生端对应的 学生的听课状态； 互动模块， 用于接收所述教师端和/或所述学生端的互动请求， 建立互动连接并进入互 动连接显示。 2.如权利要求1所述的数字化教育互联网学习系统， 其特征在于， 所述教师端监控模块 对教师端 进行监控， 确定所述教师端对应的教师的授课状态， 执 行如下操作： 通过所述教师端的第一摄 像设备， 获取当前的所述教师的第一图像； 获取当前的所述学生端上显示的第二图像； 将所述第一图像和所述第二图像进行匹配， 确定所述教师 是否为现场授课； 和/或， 通过所述教师端的第一摄 像设备， 获取从授课开始后所述教师的第二图像； 通过所述教师端的第一音频采集设备， 获取从授课开始后所述教师的第一音频； 对所述第二图像进行 唇语识别， 获取第一信息； 对所述第一音频进行音频识别， 获取第二信息； 将所述第一信息与所述第二信息进行匹配， 确定所述教师 是否为现场授课； 和/或， 当所述教师为现场授课时， 通过所述教师端的第一音频采集设备， 每隔预设的第一时 间获取所述教师在所述第一时间内的第二音频； 对所述第二音频进行音频识别， 获取第三信息； 基于预设的关键词提取模板， 对所述第三信息进行关键词提取； 基于提取的关键词和预设的授课状态触发库， 确定所述授课状态； 其中， 所述授课状态包括讲解状态、 互动状态、 答疑状态、 总结状态、 作业布置状态其中 一种或多种结合。 3.如权利要求2所述的数字化教育互联网学习系统， 其特征在于， 所述学生端监控模块 对学生端 进行监控， 确定所述学生端对应的学生的听课状态， 执 行如下操作： 在所述授课状态转换的所述关键词对应的时间点之后， 每隔预设的第二时间， 通过所 述学生端的第二摄像设备， 获取所述学生的第三图像； 通过所述学生端的第二音频采集设 备， 获取所述学生的第三音频； 重新调取转换后的所述授课状态对应的预设的听课状态 识别库； 基于所述第三图像、 所述第三音频和所述听课状态 识别库， 确定所述听课状态； 其中， 基于所述第三图像、 所述第三音频和所述听课状态识别库， 确定所述听课状态， 包括： 对所述第三图像进行 特征提取， 获取多个第一特 征值； 对所述第三音频进行 特征提取， 获取多个第二特 征值； 基于多个所述第一特 征值和多个所述第二特 征值， 构建识别特 征集； 将所述识别特征集与 所述听课状态识别库中各个听课状态集一一匹配， 确定所述 听课 状态识别库中与所述识别特 征集匹配的所述听课状态集对应的所述听课状态。权　利　要　求　书 1/4 页 2 CN 114936952 A 24.如权利要求3所述的数字化教育互联网学习系统， 其特征在于， 所述互动模块接收所 述教师端和/或所述学生端的互动请求， 建立互动连接并进入互动连接显示， 执行如下操 作： 当所述授课状态为互动状态时， 通过 各个所述学生端的第二摄 像设备采集第三图像； 基于各个所述第三图像和预设的互动参与识别库， 确定参与互动的学生列表； 将所述学生列表输出至所述教师端； 通过所述教师端的第一音频采集设备获取所述教师在预设的所述第二时间内的第四 音频； 对所述第四音频进行音频识别， 获取第四信息； 基于上课的学生名单， 确定所述第四信息是否包 含所述学生名单内的学生 姓名； 当包含时， 建立所述学生姓名对应的学生端与所述教师端的互动连接， 将互动连接的 所述学生端的第二摄像设备采集的第三图像和所述教师端的第一摄像设备采集的第一图 像并排悬浮显示在所述教师端和各个所述学生端的显示画面上； 或， 当所述授课状态为非互动状态时， 通过各个所述学生端的第二摄像设备采集第三图 像； 基于各个所述第三图像和预设的互动参与识别库， 确定互动发起的目标 学生； 将所述目标 学生的第三图像发送至所述教师端； 通过所述教师端的第一音频采集设备获取所述教师在预设的所述第二时间内的第四 音频； 对所述第四音频进行音频识别， 获取第四信息； 确定所述第四信息是否包 含所述目标 学生的学生 姓名； 当包含时， 建立所述目标学生对应的学生端与所述教师端的互动连接， 将互动连接的 所述学生端的第二摄像设备采集的第三图像和所述教师端的第一摄像设备采集的第一图 像并排悬浮显示在所述教师端和各个所述学生端的显示画面上。 5.如权利要求1所述的数字化教育互联网学习 系统， 其特 征在于， 还 包括： 第一触发模块， 用于对所述学生端的第二摄像设备采集的第三图像进行分析， 当所述 学生离开所述第三图像内对应的听课区域时， 触发计时； 缓存模块， 用于当计时达到预设的第一时间阈值时， 将从触发计时开始后的传输至所 述学生端的第二图像进行缓存； 处理模块， 用于在缓存时基于所述第二图像对应的音频识别后的文字信息， 对所述第 二图像进行 标注处理； 第二触发模块， 用于对所述学生端的第二摄像设备采集的第三图像进行分析， 当所述 学生再次进入所述第三图像内对应的听课区域时， 触发缓存播放判断； 并根据教师教授课 程的情况以及缓存情况， 确定是否触发缓存播 放； 缓存播放模块， 用于当确定触发缓存播放 时， 根据预设的播放模式播放缓存内容， 并在 播放时采用悬浮 提醒框提醒的方式提醒 所述学生 正在进行缓存播 放。 6.如权利要求5所述的数字化教育互联网学习系统， 其特征在于， 所述缓存模块在对所 述第二图像进行缓存处 理时， 还执 行如下操作：权　利　要　求　书 2/4 页 3 CN 114936952 A 3