知识图谱专注力分析情感计算等AI技术如何升级常态化录播

Q博士将从常态化录播面临的挑战、AI升级录播的关键技术、AI升级录播的4个方面,阐述AI如何升级常态化录播,为教育工作者提供参考。

本文内容思维导图

常态化录播面临的挑战

课堂录播为整堂课的视频录制和播放提供支持,但面对数据驱动教学教研的需求,常态化录播存在以下2点局限:

1、回顾课堂视频费时费力

2、缺少数据作为教研依据

AI升级常态化录播的关键技术

1、基础教育知识图谱

知识图谱一般分成通用知识图谱和领域知识图谱,基础教育知识图谱属于领域知识图谱。基础教育知识图谱的构建有准确性、全学科、全覆盖、可用性四个方面的要求。

*我们科技与.知识工程实验室合作,目前已有大规模基础教育知识图谱1000多个概念类、160万多实例、2200万条三元组,覆盖1300本教材教辅的电子资源,100011本课外的电子书资源。

2、专注力分析

专注力可以反映出学生是否进入学习状态。传统课堂,老师通过提高音量、增加互动、改进内容等方式提高学生的专注力,但由于教学任务重、班级人数多、精力有限,老师无法细致地了解每位学生每堂课的专注力情况。

伴随式采集课堂教学视频后(不干扰课堂教学),通过头部姿态估计技术,推断出学生头部在三维空间的姿态参数,建立头部三维空间姿态模型,通过头部姿态在不同坐标系之间的相互转换,判断学生群体的头部朝向。

再利用头部姿态追踪人眼的视线方向,对汇总数据进行二次分析,从而计算出学生的社交专注保持力(SAHP,SocialAttentionHoldingPower),这也是目前学习认知领域最先进的分析技术。

→点击了解“课堂专注度”详情

3、情感计算

1997年,MIT(麻省理工)媒体实验室的RosalindPicard教授提出了“情感计算”的概念,她把“情感计算”定义为:针对人类的外在表现,能够进行测量和分析并能对情感施加影响的计算。事实证明,情感计算与认知研究密不可分。

在课堂场景中,利用深度学习算法对课堂教学过程进行分析。通过采集设备获取教学过程的图像序列,利用深度神经网络检测人脸位置区域,进一步识别人脸关键点,根据教学场景的特性进行面部表情识别。然后再结合教学方法论进行深度分析,帮助学校了解教师授课风格及学生情感状态变化,在此基础上进行教学指导,改进教学效果。

AI升级常态化录播的4个方面

1、从人工检索到自动标记

录播完成后,教师通过完整的课堂教学视频回顾教学内容。但是如果教师想要回顾讲到某个知识点时,学生的课堂表现,则需要来回拖动视频进度条,这是一个人工检索信息的过程,视频只完成了记录的工作,为实际使用带来了很大的困难。

利用基础教育知识图谱技术,将整堂课的关键知识点进行自动标记,由计算机代替人工,教师在回顾知识点时就会更加高效。除了标记知识点,课堂专注力、学生情感变化也能直接呈现在视频中。

2、从回顾视频到查看数据

在回顾课堂视频的基础上,利用AI技术为教师和学校管理者提供课堂专注度、师生发言明细、教师的授课模式、学生的情绪变化等数据,能提高教学复盘的效率,从回顾视频到查看数据,为教师成长、教学管理提供数据支持。

3、更有效的教学资源积累

同时,AI技术自动提取板书、整理课堂语音笔记、提取知识点等功能,不仅让课堂教学资源得到有效积累,还可以直观、清晰地反映教师的授课逻辑。

4、量化过程性教学评价

过程性评价也应该从量化与质性两方面进行,AI技术为过程性评价提供了分析框架,可以帮助管理者更好地对课堂录像进行分析与理解,使过程性评价可用、高效。

Q博士有话说

记录之外,为教师和学校管理者提供对视频内容的解读,在教学研究和管理上用客观数据替代主观感受,这是新技术在教育教学领域应用的方向。常态化录播是信息技术走进课堂的敲门砖。接下来,我们期待新技术的应用,能更好的促进“有效教学”,服务于教师专业成长,让教研工作更加轻松有效。

THE END
1.特斯拉机器人盲爬坡,马斯克称利用神经网络控制肢体特斯拉机器人盲爬坡,马斯克称利用神经网络控制肢体界面新闻 上海 0 打开网易新闻 体验效果更佳棕熊追杀黑熊 小帅日常 1914跟贴 打开APP 冯小刚客串电影功夫,一句台词火遍全网 知己影视 5991跟贴 打开APP 只为超越自己,中国突破雷达功放芯片黑科技,功率大到不可思议 瞩望云霄 490跟贴 打开APP 当地恶霸陆续死去,新来https://m.163.com/v/video/VDI4D24F2.html
2.深度学习深度学习的顶级循环神经网络的工作方式包括 LSTM、GRU 和 RNN. 循环神经网络(RNN)在自然语言处理、语音识别等有很广泛的用途。LSTM和GRU是目前使用最广泛的两个循环神经网络的模型变种。该视频课程内容主要分为三大部分,机器学习神经网络RNN教程、LSTM、GRU。 课程目录 第一章:RNN RNN与序列问题 18:55 第二章:https://edu.csdn.net/course/detail/8262
3.基于深度时空残差卷积神经网络的课堂教学视频中多人课堂行为识别针对课堂教学场景遮挡严重、学生众多,以及目前的视频行为识别算法并不适用于课堂教学场景,且尚无学生课堂行为的公开数据集的问题,构建了课堂教学视频库以及学生课堂行为库,提出了基于深度时空残差卷积神经网络的课堂教学视频中实时多人学生课堂行为识别算法。首先,结合实时目标检测和跟踪,得到每个学生的实时图片流;接着,利用https://www.joca.cn/CN/10.11772/j.issn.1001-9081.2021040845
4.3DMAX一键生成样条线神经网络生长动画插件Spline3DMAX一键生成样条线神经网络生长动画插件 Spline-Fibers v1.5.2 For 3ds Max 2010 – 2023光缆插件2023年06月28日发布 2818人浏览 0人评论 4人下载 30金币 VIP 1金币 下载 金币充值 M2118878 3223 发布资源 0 发布留言 3461 累计收益 发表评论https://www.maliang.com/ziliaoku/v15919.html
5.资源帖丨字节跳动技术Leader们推荐的学习资源链接:http://mooc.study.163.com/smartSpec/detail/1001319001.htm斯坦福 CS231n:用于视觉识别的卷积神经网络主讲:李飞飞斯坦福一大知名课程,主讲人是推动了CV行业飞速发展的ImageNet发起人李飞飞。链接:http://cs231n.stanford.edu/《机器学习》作者:周志华这本书也是业界知名的教材,它从“如何挑西瓜”这个例子开头https://maimai.cn/article/detail?fid=1589935106&efid=ROE93ZNmM8sYE6S4rjpy5w
6.科研智慧教育平台融合在线视频教学、编程测评、知识问答、与大数据分析功能与一体,整体框架使用SpringMVC编写,将视图、数据分离,保证数据的安全与私密性,同时代码分层,保证二次开发和功能拓展的灵活性。前端采用html5和echarts进行页面的排版和数据的展示。后端数据库采用MySQL、Redis数据存储方式,分别记录用户个人的行为、网站的https://cs.xidian.edu.cn/ztwz/z2024yzzt/sy/dsjysjznyjs/ky.htm
7.说课视频,名师课例课堂实录,高效课堂教学视频,观摩展示公开优质课网(www.youzhik.com)收录全国及各省市最新优质课视频,说课视频,名师课例实录,高效课堂教学视频,观摩课展示课公开课示范课视频,教学大赛视频!http://www.youzhik.com/index.html
8.用服务器跑python用服务器跑神经网络用服务器跑python 用服务器跑神经网络 超级感谢up主7_xun的B站教学视频:适合深度学习小白的CV实战——在AutoDL上租用云服务器跑YOLOv5的全过程 链接:https://www.bilibili.com/video/BV1jA4y1o7Ph/?spm_id_from=333.1007.top_right_bar_window_history.content.click&vd_source=e482aea0f5ebf492c0b0220fbhttps://blog.51cto.com/u_16099164/9273647
9.YouTube:开启全民创作时代的中视频龙头流媒体网算法分发:从VV到时长,深度融合神经网络推荐算法 核心参考指标——从VV(播放次数)到时长。2012之前,YouTube核心推荐在以观看次数为指标的推荐机制下,内容生产者们为了获得高点击量,往往采用具有误导性的标题和缩略图进行诱导,以至于观众在点击后会感到被欺骗,甚至会因恼火而中途停止观看视频,YouTube意识到了这点并改变https://lmtw.com/mzw/content/detail/id/204595/keyword_id/
10.Wooddefectultralytics/nn/__init__.py 神经网络模块的初始化,包含网络结构和相关功能(未分析)。 ultralytics/models/yolo/detect/val.py 实现YOLO模型的验证功能,评估模型性能(未分析)。 备注 对于未详细分析的文件,功能描述可能需要根据具体实现进行补充。整体上,这些模块共同构成了一个强大的目标检测和分割框架,能够支持从https://github.com/qunshansj/Wood-defect-detection/blob/main/README.md