返回首页

基于大数据的教学评价研究

时间:2017-06-06 09:58来源:知行网www.zhixing123.cn 编辑:麦田守望者

摘要        

        文章基于教育大数据的视角,结合教育评价活动的转型,对教育大数据的采集、可视化分析与呈现技术等开展了研究。文章认为,教育大数据技术推动了教育评价中数据驱动决策的实现,为多方参与教育评价、实现发展性学生评估提供了良好的支持。平板电脑、数码笔、可穿戴设备等能够实时地将不同类型的学习数据数字化,实现了对学生学习全过程数据的采集,为教育领域中实现基于数据分析与理性证据的教育评估与决策提供了数据基础。各类可视化分析工具能够在稀疏的教育大数据中过滤、挖掘各类隐含的教育信息和规律,帮助我们理解学生个人知识体系的构建过程,探索学生个体的社会学习网络的演化规律,揭示教育事件在特定时空呈现的特征。 数据(Data)是按照一定规则排列组合的物理符号,可以表现为符号、文字、数字、语音、图像、视频等形式,是信息的表现形式和载体。2001年高德纳咨询公司在研究报告中指出,人类社会数据爆炸从三个维度展开:一是同一类型的数据量在快速增大,二是数据增长的速度在加快,三是数据的来源和新的数据种类在不断增加——上述事实清楚地说明人类真正进入到了大数据时代[1]

关于大数据的定义暂时还没有达成共识,现存的定义主要从大数据具备的性质出发进行界定。目前,研究界认可的是大数据应当满足3V特点,即规模性(Volume)、多样性(Variety)和高速性(Velocity[2];随后,不同的机构将其扩展成为4V,如IBM提出的准确性(Veracity)以及IDC提出的价值性(Value)等[3]。大数据立足于对大量数据的深度挖掘与科学分析,寻求数据背后的隐含关系与价值,使得人们可以从基于小样本数据的推测或基于感性的偏好性选择转向基于数据分析与理性证据的决策[4]。当前,大数据正不断地深入教育领域,对一些“数据密集型”的教育业务如考试、学习分析等产生了强劲的冲击。

大数据与教学评价变革

教育评价指的是在系统、科学、全面地搜集、整理、处理和分析教育信息的基础上,对教育的价值做出判断的过程。从个人层面来看,教育评价的目的在于了解学生的发展情况,对学生的学习情况进行客观总结、对教师的教学质量进行评估;从宏观来看,评价的目的更在于促进教育改革,提高整个国家的教育质量[5]。我国《国家中长期教育改革和发展规划纲要(2010-2020年)》指出:“要改进教育教学评价,根据培养目标和人才理念,建立科学、多样的评价标准。开展由政府、学校、家长及社会各方面参与的教育质量评价活动。做好学生成长记录,完善综合素质评价,探索促进学生发展的多种评价方式。”美国于2010年发布的《国家教育技术计划》(National Education Technology Plan)中强调各级各类教育系统要利用技术来测量、评价学习过程,教育管理者应该利用技术来收集学习过程中的实时数据,为持续改善学习效果提供依据[6]

中美两国的重要教育文件都揭示了教育评价在整个国家教育系统中的重要地位,并预示着教育评价将在理念、内容、方式等方面的转型取向,在现代教育价值趋于多元化的基础上,教育评价方式面临全面转变的现实需要[7]。这种转变主要表现在如下方面:①做好学生成长记录、收集学生学习过程中的实时数据等评价措施的提出,体现了评价理念从以往“经验主义”向“数据主义”转变的趋势;②完善综合素质评价、探索促进学生发展的多种评价方式以及提供持续改善学习效果等评价目标的提出,体现了评价内容从以往注重认知水平的“总结性评价”向综合素养的“发展性评价”转变的趋势;③政府、学校、家长及社会各方面参与的评价主体的提出,体现了评价方式从“单一封闭”向“多元开放”转变的趋势。事实上,上述教育评价的转型并非全新的理念和思想。依据数据所提供的证据进行判定是实证主义的基本思想,发展性原则一直是教育评价本身应有之义,学生的自我评价、家长的校外评价[8]也是很多学校采取的评价方式之一。然而近几年来,这些思想在国家教育纲要性文件中被显著地提及,说明其在过去落实的力度欠缺,或者说直至今日这些思想的落实方才具备可操作性的条件,这就是现代信息技术和大数据在教育领域中应用的用武之地。

教育评价是为了让我们更好地了解学生、审视我们的课堂和教学过程。在传统的教育环境下,了解学生的主要方法为问卷调查、课堂行为观察、考试、作业分析等。这些方法存在着耗时长、数据不准确、过程型数据遗漏或者无法采集等多种弊端,建立在这种不完整数据之上所获得的分析结果只能揭示某些特定的问题,缺乏综合性。此外,不同来源的数据之间难以整合,因为采集成本等原因,获得的数据缺少持续性,导致数据内部隐含的信息连接被割裂。比如学生作业水平和学生课堂学习行为之间的所存在关系的挖掘;学生阅读能力对其数学学科表现的影响分析等都难以实现。因而教师往往只能根据经验来处理教学问题,这些都对于科学、精准地了解学生,做出教学决策甚至制定教育政策造成不利影响。教育大数据的应用则为克服现有教育评价中的不足提供了效果良好的解决方案。

1 大数据推动数据驱动的教学决策

数据驱动决策在教育中是指收集、分析、报告和使用数据用于教育教学改进的过程[9]。比如美国普渡大学的“课程信号灯”(CourseSignals)项目是国际知名的大数据诊断学生、提供教育决策的典型案例之一[10]。如图1所示,“课程信号灯”系统主要以成果算法为基础,对学生课程表现、课程努力程度、前期学业历史、学习者特征等数据进行采集和计算,实现对课程的实时预测。预测结果将通过红、黄、绿三种颜色信号灯的形式,呈现在学生的学习页面以及教师的课程控制页面中——红灯表示课程学习中存在极大的失败可能性;黄灯表示在课程学习中存在一定的问题,有失败的可能;绿灯表示学习成功的几率很高。根据不同的信号显示,教师通过发送电子邮件、短信以及面谈等方式对学生学习进行适当的干预,还可以通过“课程信号灯”系统自带的推荐学习导师与学习资源模块,对学习者学习提供适当的帮助,以促进其在课程学习中取得成功。

2 大数据促进了学生发展性评估

早在1940年,美国史密斯—泰勒报告中就指出教育评价不能只测量学生的某些能力和特征,而应该根据教育目标来评价学生发展及成长的进程和水平,这是发展性评价理念在现代教育评价中的确立。发展性评价是指通过系统地搜集评价信息和进行分析,对学生的教育活动进行价值判断,实现其发展目标的过程。发展性评估主要发挥评价诊断的功能,突出评价的过程,重视学生的个性差异,因此,其往往要和学生的学习过程紧密结合,进行长期追踪。如北京、成都、深圳等地的中小学校,以发展性评价理念为指导,持续跟踪学生历次考试成绩,通过时间序列分析、聚类分析等手段,对学生的学习数据进行挖掘,构建学生的学科知识地图,进行学习风格和学习行为分析,最终完成对每个学生的学习力诊断[11]

2015年成立的北京市未来教育高精尖创新中心,正致力于利用学生学习全过程的大数据分析,帮助学生发现并提升优势学科、诊断和补救劣势学科,以适应新型的学生评价机制,实现个性化、差异化的学生发展目标。

3 大数据提供了多方参与评价的途径

过去的学生评价主要是针对学生的学业水平测试,评价主要由学校相关部门和教师完成,整个评价体系呈现出封闭性的特征。当前强调学生的发展性评价和综合素质评价,评价活动贯穿学生的整个学习过程,覆盖学生在校园内外的学习活动和行为表现。多种来源、结构不同的数据汇总将用来分析学生的综合素质,并通过数据的不断积累,使各类参数和模型得以确立,以提高分析的精确性。可见教育大数据直接产生于各种教育活动(包括教学活动、管理活动、科研活动、校园活动等),每个教育利益相关者既是教育数据的生产者也是教育数据的消费者[12],基于开放性大数据的评价活动,为那些能够掌握和提供学生不同情境下学习数据的多方主体共同参与评价活动架设了桥梁。可以说,数据是驱动教育评估转型变革的核心因素。研究认为,从用户的视角来看,在教育评价活动中很容易从数据的入口和使用,即数据的采集和分析两个方面感受到大数据带来的变化。

教学评价数据的采集

 

1 教学评价数据的采集类型

2013年颁布的《教育部关于推进中小学教育质量综合评价改革的意见》强调要改革评价方式,将定量与定性评价相结合,注重全面客观地收集信息,根据数据和事实进行分析判断[13]。该意见说明,教育质量评价不再单一地依托考试成绩,而是要将学生发展的所有信息收集、整理、分析并得出结论性的认识,也就是说要基于“数据”和“证据”对教育质量做出评价[14]。在当前倡导的以学生为中心的学习环境中,学生学习“数据”和“证据”的主要产生途径如图1所示。其中,学生在学校内外的学习过程数据包括学习交互、学习行为、学习路径、各类过程性学习档案等,学习者个性数据则包括学生的生理、情感、认知状态数据等,以及各类以考试、作业、作品等形式展现的学习成果。

2 教学评价数据的采集技术

为了实现“数据”+“证据”为基础的教育评价,学校采取了很多评价数据采集措施,如考试、问卷、作业档案袋等。然而这类信息多是采集学生的学习结果信息或者状态信息(如学习风格),属于静态信息,而学生在学习过程中实时产生的诸多动态信息如学习路径、学习行为等未能实现有效采集。不完整的数据采集势必会影响评价结果的准确度和可信度,也会制约大数据下教育评价的实施,因而教育全过程数据的采集研究是大数据应用与教育评价的关键要素。

目前,智能学习环境以及具有数据采集能力的学习终端如平板电脑、智能手机、数码笔、可穿戴设备等的应用,为破解学生学习数据采集难题提供了技术方案。

 

平板电脑是一种便携的智能设备,很多学校将其配备给学生开展数字化学习。通过平板电脑中电子教材系统、数字资源系统、作业与考试系统和互动交流系统可以记录和生成学习行为大数据[15],主要包括海量的学习内容序列节点数据、海量的学习资源序列节点数据、海量的练习评测序列节点数据和海量的互动交流序列节点数据等。这些数据涵盖了学生在学习过程中所产生的所有学习行为数据,再结合平板电脑环境感知数据能够对学生进行多元深层次评价,从而发现学生真正的不足和潜能。

一些学校也尝试在学生最自然的纸笔环境下采集学习数据,而数码笔可以帮助实现这样的目标。如图2所示,数码笔与普通笔的外形和使用方法完全一致,所不同的是数码笔内置高速摄像机,书写时压力传感器可以把笔尖的信息传递到摄像机,从而实时记录和采集笔迹的轨迹。利用数码笔可以实时记录学生在纸笔环境下的学习行为,并对学生的学习状态和教师教学提供诊断信息。如数码笔采集的XXX同学在语文课堂学习文言文的记录和诊断信息如下[1]

XXX同学从45秒处画了个小人。150秒点断第一段结束,250秒开始点断第二段,估计是一分钟通读。330秒点断结束,同时有回看,将前边疑难断点点出,说明其有回看意识和整合文段的意识449秒翻页,第一篇点断完毕。

515秒完成第二篇第一段点断,同时有回读。632秒大体完成第二篇点断,752秒回到第一页。此后一直没有动作,直到教师朗读指令发出。1659秒开始画小人,1850秒小人画完,同时还完善了前边画的小人,说明这2分钟该生在走神

2220秒开始翻译,翻译速度很快,“就之而不见所畏焉”一句不会翻译,主要是不了解此话所代表的含意,缺少认知背景。

数码笔也可以在教师批阅作业或试卷的同时,将每个学生的平时作业及考试信息以数字化的方式记录下来,结合课堂学习行为表现能够为学生和教师提供个性化的评价和学习分析诊断。

学生学习的全过程大数据除了我们熟知的课堂中的学习数据以外,还包括课堂外学习数据和学生的个人生活、心理等状态数据。尽管人们早已认识到这类数据的重要性,但现实中却难以精准采集这类数据。学习分析专家Siemens教授指出,学习分析所需的数据主要来源于学习管理系统、键盘数据、浏览器数据等学生操作电脑的数据,缺少对现实情境中学习过程数据的捕捉,从而导致分析者难以深入了解学习和教学过程[16]2007年凯文·凯利提出了量化自我的概念,就是用实时测量或记录的方法,测试、量化和记录个人的生命数据(如饮食、运动、睡眠、情绪等),并通过数据反馈进行自我调整[17]。量化自我概念的提出和大数据密切相关,其中传感器网络、可穿戴技术、移动终端等对量化自我起关键作用。

教育领域也可使用RFID芯片、眼动仪以及可穿戴设备如各种手环等技术,真实地采集学生在教室内外的学习信息和学生的日常行为数据,供精确化学习分析和个性化教育评估与管理的使用。如眼动技术通过对眼动轨迹的记录,从中提取诸如注视点、注视时间和次数、眼跳距离、瞳孔大小等数据,从而研究个体的内在认知过程。有研究就采用眼动仪采集23岁婴幼儿对图画书页面区域的注视点个数、注视注视点时间长度、回视等行为数据和生理数理,用来评估其图画书阅读的注意力水平、阅读喜好、读图能力、阅读理解能力等[18]。手环等设备则可以实时地记录学生的位置信息、运动数据和身体健康指标等,可以随时将这些数据与学生的学业表现关联,用来分析、预测不同类型学生的学习表现和发展。

顶一下
(1)
100%
踩一下
(0)
0%
标签(Tag):教学评价
------分隔线----------------------------
------分隔线----------------------------
发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
表情:
验证码:点击我更换图片
猜你感兴趣