认知智能国家重点实验室荣获教育因果挑战赛真实场景教学效果推断赛道冠军

发布时间2023.01.17

近日,由中国科学技术大学和科大讯飞联合承建的认知智能国家重点实验室在NeurIPS 2022教育因果挑战赛(Causal Insights for Learning Paths in Education)中,以显著优势夺得真实场景教学效果推断赛道冠军,创新性地提出了基于学习过程一致性知识追踪的教学效果推理模型,相较第二名得分高出约10%。目前,该技术已经在科大讯飞AI学习机中规模化落地


1.png

教育因果挑战赛Task 4公榜榜单


2.png

教育因果挑战赛Task 4私榜榜单

注:因涉及真实数据隐私问题,以上榜单隐去分数,仅展示排名。


3.jpg

什么是教育因果挑战赛?


NeurIPS 2022教育因果挑战赛由微软研究院、英国Eedi公司、莱斯大学联合举办,该赛事提供了从在线教育平台真实环境中获得的学生学习过程序列数据,并通过严格的A/B测试来确定学生完成给定知识点的课程与学生在特定题目上的表现之间的关系。参赛者需要使用这些真实的学习过程序列数据,解决教育背景下机器学习中的两个基本因果挑战:
  • 确定不同所学习的知识点之间的学习顺序因果关系;

  • 在前者的基础上,进行教学效果的因果推断,即推断完成给定知识点的课程为学生带来的不同学习效果。
在智能教育领域,决定知识点的学习顺序一直以来都是智能教育中的重大挑战,发现知识点之间的关系并且推断学习特定知识点的效果可以帮助教师设计更有针对性的课程。因此实现真实学习场景下的教学效果精准推断,对实现个性化学习具有重要意义。
然而在真实学习场景下,学习数据存在较多缺失值,每个学生的学习内容、作答内容不同,再加上不同学生的知识掌握分布差异,导致教学效果推断极为困难。
解决该问题的关键在于对学生知识能力变化的精准建模,然而目前的建模方法重点关注于学习结果(即得分正确或错误),建模过程基于一个简单的假设,即学生知识能力下降的原因是答错题目,学生知识能力增长的原因是答对题目,但对学生具体学习过程的探究较少。单从学习结果上看,仅能知晓学生当前的知识能力处于什么程度,却忽视了更为关键的因素——学生当前的知识能力是如何形成的,未来又会如何发展,因此难以预估教学手段是否有效。
3.jpg

创新性提出基于认知建模的教学效果推断方法

服务个性化学习


针对以上问题,实验室聚焦于学习过程的建模,创新性地提出一种学习过程一致性知识追踪方法(LPKT),技术方案已发表在数据挖掘领域顶级国际会议KDD 2021上。
该方法首次将学习过程的基本模块形式化为“题目-答题时间-答案-间隔时间”,学习过程可以由多个这样的基本模块串联而成。基于这样的学习过程,实验室从客观学习规律的角度提出答题对错不是学生知识能力变化的根本原因,学生学习过程中知识能力的变化由两方面因素决定:
  • 对知识能力起到积极作用的是学习行为,比如答题(不论对错)和上课等;

  • 对知识能力起到消极作用的则是一定时间内不学习导致的遗忘。

综合考虑学习行为带来的积极作用和遗忘导致的消极作用,实验室团队准确建模学生学习过程中知识能力的变化过程。
4.png

LPKT模型结构


基于上述方法,实验室使用学生真实的学习序列数据训练LPKT模型,并选取特定学生样本进行模拟测试,预测学生完成特定课程后在指定知识点上能力的变化情况,最后计算得到教学措施的条件平均因果效应,完成教学效果推断。

以上技术创新成果将进一步在科大讯飞AI学习机等科大讯飞智慧教育产品中落地应用,为真实场景下的个性化学习提供服务,帮助师生减负增效,促进教学质量提升,助力因材施教


  小初高AI同步精准学  
科大讯飞AI学习机的小初高AI同步精准学功能,只需要10道题左右,就能找到孩子学习的薄弱点。通过 "测-学-练" 科学的学习方法,针对薄弱点学习微课,举一反三的训练,完成学习闭环。小初高AI同步精准学功能全面覆盖了小初高数理化生英共9.3万个知识点,梳理超10万个知识点逻辑关系,覆盖7000万+精品题库,每个知识点都有对应的微课和知识卡片。
小初高AI同步精准学覆盖小学数学、英语,初中数学、物理、化学、生物、英语和高中数学、物理、化学、英语学科。

5.png


  AI作业诊断  


10s找到薄弱项,拍照就能精准学!科大讯飞AI学习机的AI作业诊断功能,不等于拍照搜题、也不等于作业检查。不是为了找到原题解析和答案,而是追根溯源地找到作业背后的薄弱点,解决薄弱点,才能解决一类问题。并且针对考什么(区域考情)、哪里弱(个人薄弱点)、怎么学(解决方案)三个问题,输出详细的作业诊断报告。

6.png

8.png


  中学英语AI听说模拟考  


科大讯飞AI学习机使用中高考听说考试同源的评分技术,对齐各开考区域的考试评分标准,让孩子从小就可以跟着考试标准练英语口语,100%还原考试流程,从试音、答题、到考试界面都与正式考试一致,让孩子的每一次开口练习都是实战。

7.png


面向教育高质量发展命题,科大讯飞依托核心技术突破,已构建个性化推荐、智能批改、口语评测等多项认知智能系统并实现广泛应用。未来,科大讯飞将继续坚持源头技术创新,赋能教育,让因材施教惠及每位师生,推动更多地区教育高质量发展,共创教育美好未来!