CN107169902A - 基于人工智能的微表情分析的课堂教学评价系统 - Google Patents

Abstract

本发明公开了一种基于人工智能的微表情分析的课堂教学评价系统，由视频输入模块、云处理系统和输出模块组成，所述云处理系统包括服务器、GPU加速人工智能计算模块、微表情模块、考勤模块、座位位置信息模块、人际关系模块、学工系统、教务系统和评价评估系统组成。本发明通过课堂实时监控，实时动态捕获学生的表情及微表情，座位位置信息，人际关系等综合信息，通过对接教务信息，学工信息，心理健康中心等数据库，通过大数据处理反映出学生课堂效果，学生认知与心理状态等，作为教师、教务、学工、家长等各方的重要科学分析与决策依据。

Description

基于人工智能的微表情分析的课堂教学评价系统

技术领域

本发明涉及人工智能技术领域，尤其涉及一种基于人工智能的微表情分析的课堂教学评价系统。

背景技术

课堂质量评价是教育教学系统的关键环节，是反映教师的“教”与学生的“学”的动态过程综合的结果。教师的教学水平通过学生的认知和接受能力间接反应，课堂氛围和活动均体现在学生课堂上的动态的心理行为和表情或微表情。但是如何科学的衡量课堂质量评价，

现有的评价方法和手段建立在传统教学质量评价体系基础上，通过抽样调查、访谈、考试测评等手段，投入大量的教辅人员以及财力物力等的基础上，其评价结果的准确性和可靠性受诸多外部环境制约，无法准确实时跟踪课堂实效，关键是忽略了学生学习过程中的认知、感受及心态等关键要素。

发明内容

本发明的目的就在于为了解决上述问题而提供一种基于人工智能的微表情分析的课堂教学评价系统。

本发明通过以下技术方案来实现上述目的：

本发明由视频输入模块、云处理系统和输出模块组成，所述云处理系统包括服务器、GPU加速人工智能计算模块、微表情模块、考勤模块、座位位置信息模块、人际关系模块、学工系统、教务系统和评价评估系统组成。

进一步，所述服务器包括姓名、学号、照片信息、课程系统、教师服务、学工测评信息、学工综合信息、教务综合信息。

进一步，所述GPU加速人工智能计算模块包括课堂目标自动识别、座位位置信息、人际关系、表情信息、人工智能深度学习、微表情信息、表情与微表情的自学习、历史数据更新与关联处理和其他信息的对接融合分析。

本发明的有益效果在于：

本发明是一种基于人工智能的微表情分析的课堂教学评价系统，与现有技术相比，本发明运用人工智能深度学习的技术手段，通过上课过程中的综合信息分析全面反映课堂教学的信息，从而给教师，教务，家长等提供科学的决策依据。表情与微表情的自学习能力，即系统自动捕获不能分析的表情或微表情，通过大量数据获取，进行自学习能力，然后将特征数据保存入数据库。

通过课堂实时监控，实时动态捕获学生的表情及微表情，座位位置信息，人际关系等综合信息，通过对接教务信息，学工信息，心理健康中心等数据库，通过大数据处理反映出学生课堂效果，学生认知与心理状态等，作为教师、教务、学工、家长等各方的重要科学分析与决策依据。

附图说明

图1是本发明的整体结构原理框图；

图2是本发明的服务器运行系统原理框图；

图3是本发明的GPU加速人工智能计算模块运行原理框图。

具体实施方式

下面结合附图对本发明作进一步说明：

如图1所示：本发明由视频输入模块、云处理系统和输出模块组成，所述云处理系统包括服务器、GPU加速人工智能计算模块、微表情模块、考勤模块、座位位置信息模块、人际关系模块、学工系统、教务系统和评价评估系统组成。

结合学工部学生信息数据库，导入学生的姓名，学号，照片等信息；结合教务系统，导入学生的课程系统，教师信息；通过对上述数据分析，并通过人工智能训练，提取照片的特征信息，并建立初始数据库，并与学号、姓名等其他信息关联；

如图2所示：所述服务器包括姓名、学号、照片信息、课程系统、教师服务、学工测评信息、学工综合信息、教务综合信息。借助学校已经建立的视频采集网络，在上课期间自动启动运行，其数据直接传送至学校中央服务器。取决于服务器的计算能力，采取低频取样，约10Hz～20Hz采样频率，即每0.1s至0.05s采样一次，用于分析提取学生表情，座位位置信息等；

如图3所示：所述GPU加速人工智能计算模块包括课堂目标自动识别、座位位置信息、人际关系、表情信息、人工智能深度学习、微表情信息、表情与微表情的自学习、历史数据更新与关联处理和其他信息的对接融合分析。

课堂目标自动识别；

根据前期人工智能训练的结果，根据视频流信息实时进行课堂目标任务的自动识别与追踪；将每节课的开始和结束时的照片取样，通过目标识别后标注日期、识别目标的学号、姓名等信息，并存储于中央服务器，用于备份和取证；

座位位置信息；

获取班级位置的分布，比如是正三角，倒三角，均匀分布，前排空后排集中式等，通过分析学生上课历史的课堂特点，以及任课教师历史上课特点，定性判断学生与教师的特点和行为；获取学生的位置信息，综合分析学生的个人座位喜好，通过对学生历史上该课程的座位情况，间接反映学生的学习习惯、生活习惯；获取学生附近人员位置信息，比如和谁同桌，以及最相邻学生信息，通过多次数据统计反映学生的人际交往情况；

表情信息；

根据照片提取学生面部表情，嘴角表情，眼睛状态等信息；通过上述信息，与学生的学习状态建立关联；

微表情信息；

进行高频取样，比如50Hz至100Hz的取样，记录学生上课过程中的微表情，即时反映学生瞬时心态或情绪；建立微表情与师生互动的关联。学生的微笑、严肃等，间接反映老师课堂中的兴奋点，课堂活跃程度，或者教学激发学生的思考；通过对任课教师所担任课程的历史课堂学生的微表情分析，反映教师的教学技能和特点；

表情/微表情自学习能力；

由于初始的学生信息是静态的，所分析的表情及微表情的数据不完整，故而开发算法，进行表情/微表情的自学习；即通过自动捕获学生学习过程中的没有识别的表情，进行智能学习，实现自学习能力。与历史数据的更新、关联与处理；实时处理与在线云处理结合，通过(1)-(5)跟踪，更新，分析历史数据，反映教学课堂综合情况。

与其他信息的对接与融合分析；

实时将处理结果与教务、学工信息的对接，综合输出结果；在课堂情况恶化或达到某一阈值时，启动课堂自动报警功能；

输出综合分析结果

通过各种信息技术手段(短信，邮件，电话)，将数据实时反馈给教务，学工，家长等；为避免任何人为的干预，保证数据的真实性与可靠性，所有照片信息，和综合分析算法均公开；

综合分析结果用于评价学生的生活习惯，学习习惯，学习能力，课程的偏好，学习兴趣等，并根据上述结果做出指导与干预；

综合分析结果用于评价教师的课程与课堂特点，并根据学生的分析结果做出对教师，以及课程的综合评价，用于教师能力评估以及课程的安排与调整；

综合分析结果用于教务处，学工等部门的政策制定和修改依据；

综合分析结果反馈给家长，在家长配合下，干预和参与学生教育的全过程。

以上显示和描述了本发明的基本原理和主要特征及本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。

Claims (3)

1.一种基于人工智能的微表情分析的课堂教学评价系统，其特征在于：由视频输入模块、云处理系统和输出模块组成，所述云处理系统包括服务器、GPU加速人工智能计算模块、微表情模块、考勤模块、座位位置信息模块、人际关系模块、学工系统、教务系统和评价评估系统组成。

2.根据权利要求1所述的基于人工智能的微表情分析的课堂教学评价系统，其特征在于：所述服务器包括姓名、学号、照片信息、课程系统、教师服务、学工测评信息、学工综合信息、教务综合信息。

3.根据权利要求1所述的基于人工智能的微表情分析的课堂教学评价系统，其特征在于：所述GPU加速人工智能计算模块包括课堂目标自动识别、座位位置信息、人际关系、表情信息、人工智能深度学习、微表情信息、表情与微表情的自学习、历史数据更新与关联处理和其他信息的对接融合分析。