《基于学习分析在线学习测评建模与应用,课程综合评价参考模型研1》由会员分享，可在线阅读，更多相关《基于学习分析在线学习测评建模与应用,课程综合评价参考模型研1（17页珍藏版）》请在金锄头文库上搜索。
1、本文格式为Word版，下载可任意编辑基于学习分析在线学习测评建模与应用,课程综合评价参考模型研1 摘 要 课程是在线学习的载体。课程评价是远程教导教学评价的重要组成片面。近年来，随着在线学习的急速进展，课程评价从内容到手段上都正体验着重要的转变。学习分析的进展为课程评价供给了新的途径。本研究首先提出了课程评价的概念框架，并通过学习分析构建了课程评价的模型，从媒体技术、学习资源、学习活动、学习支持和联通度五个维度对在线学习课程举行评价。在此模型的根基上，设计并开发了课程评价的学习分析工具，对所提出的模型举行了实际验证。结果，分析了基于学习分析的课程评价的特征和趋势。本研究为课程综合测评供给了理论
2、参考，为学习分析技术在课程评价中的实际应用供给了方法上的借鉴。 关键词 学习分析; 课程综合评价参考模型; C-SERI; 课程评价 一 引言 课程是远程教学的载体， 1 承载着远程教学的内容与过程。对于课程的评价是远程教导教学评价的重要组成片面。 在远程教导领域中，课程内涵丰富，并且在不断进展之中。课程从其来源意义上包含着学科教学科目和教学进程两个层面。现代汉语词典中将课程解释为学校教学的科目和进程。中国大百科全书(其次版)中将课程定义为课业及其进程，并列举了三种对课程的常见理解：课程即教学科目，课程即预期的学习结果或目标，课程即学习阅历或体验。 2 教导行业标准中在线课程创办征求观法稿中指
3、出，在线课程是在网络环境下组织某门课程的教学内容并实施的教学活动的总和。在线课程由在线学习平台承载和运行。在线课程包括有组织的教学内容，有设计的教学活动，有记录的交互信息和对课程的教学分析。 3 国家开放大学将课程界定为实现专业培养目标而开设的学科及其目的、内容、范围、活动、进程等的总和。一门课程是教学筹划中的一个科目。 4 英国高等教导统计署(Higher Education Statistics Agency)发布的 什么是课程研究报告中指出，课程具有广泛的内涵，课程的概念在高等教导周期的不同阶段有所不同。总体而言，课程是与一系列确定的学习结果相关的学习参与。 5 这个定义从课程的目的启程
4、，强调了课程的参与过程。可见课程并非仅仅是科目与资源的集合，而更为强调学习过程和结果。 通过以上定义可见，课程的定义有广义和狭义之分。广义定义将课程界定为学科，由一系列课程构成科目体系;狭义的课程指一门概括课程，包含着课程内容与学习进程。本文所评价的课程为一门特定课程，评价内容包括课程的内容、过程和效果等方面。 对课程定义的解析有助于察觉课程评价的重点所在。课程评价应当涵盖课程内容和实施过程。但在常见的课程评价中，存在课程评价的全面性、有效性和实时性三方面的局限。评价全面性方面，评价对象往往偏重课程内容，弱化对教学过程的评价。评价有效性方面，专家评价和学习者调查等方式限制了评价的客观性。评价实
5、时性方面，量表和问卷为主的评价手段使得课程评价具有较强的滞后性。 近年来蓬勃进展的学习分析对于远程教导中的课程评价供给了强有力的支持。首届学习分析技术与学识国际会议上将学习分析定义为测量、采集、分析和报告有关学习者及其学习情境的数据集合，以理解和优化学习过程与学习情境的技术。 6 学习分析可以从监测、评价、诊断、预料和推举等方面对远程教导教学举行支持，对远程教导教学产生了深远的影响。 在线课程评价具备应用学习分析开展数据评价的根基条件。在线课程的教学内容资源存储在教学平台之中，其内容与布局可以通过数据明显地表达。在线教与学的过程那么可以通过行为数据和内容数据举行表征。基于课程数据的学习分析可以
6、对教学进程举行动态跟踪，从而能实时掌管课程的进展状况。学习分析为当前课程评价所存在的问题供给了解决思路。 有效的课程评价需要依托一个系统且有效的课程评价模型。评价模型的构建需要从数据的角度对课程内容和教学进程举行解析，给出课程的数据形态。同时，需要从不同的角度设计课程内容与教学进程的评价方式，并举行有机整合，为综合性课程评价供给解决方案。构建基于学习分析的课程评价模型是应用学习分析对课程内容与教学过程开展全面评价的核心工作。 二 课程评价理论模型研究 课程评价是远程教导教学评价的重要组成片面。围绕课程评价有着大量研究与实践。在远程教导课程评价研究中，各种评价标准从评价的内容、手段和形式方面有着
7、较大不同，从不同的侧面供给了课程评价模型构建的依据。 1. 课程评价研究综述 美国在线课程质量量规(Quality Matters Rubric，QM)是认可度较高，应用范围很广的课程评价量规。它从 8 个方面对课程举行了评价，分别是课程概述与介绍、教学目标、教学评价、教学材料、学习者交互与参与、技术应用、学习者支持和易用性。 7 加州大学北岭分校(Northridge)构建了在线教与学评价框架(Quality Online Learning and Teaching Framework，QOLT)，包括 10 个维度，58 个指标。其中 10 个维度为课程概览与介绍、学生学习评价、教学材料与
8、资源、学生交互和社区、课程辅导与教学、教学与学习技术、学习支持与资源、易用性与综合设计、课程总结和移动学习支持。 8 在线课程质量量规和在线教与学评价框架在维度布局上具有较高好像性，然而其指标表述有着很大不同。前者依旧从课程设计的角度启程，分析课程在设计上如何对学习过程举行支持。而在线教与学评价框架那么既重视课程设计又重视课程实施，从教师的教和学生的学方面增加了评价要求。 MOOCs 诞生以来，成为具有全球影响的远程教学形式。近年来对于 MOOCs 的评价成为全球范围的研究热点。对比有典型意义的研究包括 Chapman 等人和 Lin 等人的研究。 Chapman 等人提出的 MOOCs 评价
9、指标是一套较为完备的评价标准，包括学习者笼罩、学习参与、成就认证和课程质量。其中，学习者笼罩包括学习者的地理分布、年龄性别、社会经济状况。学习参与包括内容访问、学习路径、退出率、资源使用和在线协作。成就认证包括获得认证的学生比例和测验劳绩。课程质量包括界面设计、教学资源、学术支持、技术支持和评价与学习目标的相关度。 9 在各个维度中，学习者笼罩、学习参与、成就认证三个维度根本都通过 MOOC 平台所记录的数据举行评价，仅有学习参与中的在线协作同调查问卷评价。而课程质量维度那么全部通过问卷举行评价。 Lin 等人通过方法目的链模型(Means-end Chains Model)研究了 MOOCs
10、 中的属性(Attributes)、影响(Consequences)和价值(Values)链条，分析了 MOOCs 的 14 个属性，12 个结果和 9 种价值之间的关系。最终察觉课程的资源丰富性、实时议论、视频指导和学习认证四个属性，可以产生促进学生学识理解，增进学习交互，简化时间管理，提高竞争力的影响，最终获得生活乐趣，自我实现，成就感等价值。 10 这一研究虽然并未直接提出课程评价标准，但察觉了课程质量的重要影响因素，为课程评价供给了依据。 学习分析领域对在线教学评价的数据指标开展了较多研究。其中最具代表性的研究是 Dyckhoff 等人对20 余项学习分析研究举行了综述后，总结了教学过
11、程涉及的 198 个指标。其中，课程相关指标主要包括课程总访问量、资源访问量、未被访问的资源量、学生学习路径、课程社会网络中心度、学生对主题的理解、学生测验劳绩平均分、学生错题聚类结果等。 11 在 Dyckhoff 等人设计开发的课程学习分析工具 eLAT 中，将课程评价分为四个维度，分别为资源文档应用、测试评价表现、用户活动和交流互动。 12 近年来快速进展的 Canvas 学习管理系统，供给了课程评价功能(Course Analytics)。其评价包括了学习活动、学习任务、学习劳绩三个方面。学习活动主要包括页面欣赏和学习者参与，学习任务评价包括任务提交处境，学习劳绩评价为课程整体劳绩分布
12、。 13 在此根基上，Canvas 供给了针对每个学生的三个维度分析。Canvas 的评价主要着眼于学习过程和学习结果，根本没有涉及课程内容。 在课程评价研究的进展过程中，可以察觉课程评价在对象和手段上的变化。以在线课程质量量规为代表的评价主要的着眼点是课程内容，在学习过程方面着重评价了如何通过课程内容对学习过程举行支持。MOOCs 课程评价和基于学习分析的课程评价中新增了大量学习过程相关内容，重视对课程实施过程的分析评价。从评价手段上，在线课程质量量规仍采取专家打分方式，MOOCs 课程评价中行为数据占据了很大比重，学习分析课程评价中根本都通过学习数据对课程举行评价。在课程评价的进展变化中，
13、我们能够察觉评价重点正由课程内容向着学习过程转移，而学习分析为代表的分析技术为这一转变供给了技术支持。 2. 联通主义对课程评价的启示 课程创办的根本目的是为了承载学习过程。对于学习的剖析，对于课程创办与评价有着重要意义。联通主义理论是互联网时代的代表性学习理论。联通主义将学习解析为将信息、关系和资源组建成学习网络的过程。 1415 联通主义透露了互联网时代学习的规律。联通主义学习广泛存在于不同类型的学习中，具有三种形式：简朴联通、社会联通、繁杂联通。 16 Siemens 认为社会性联系对于学习具有根基性作用，对意会(Sensemaking)和寻径(Wayfinding)有着重要支持作用。寻
14、径和意会是联通主义的重要学习过程。寻径代表对联通关系的不断建立和优化。意会代表学习者从自主学习和联通关系中，获得新的学识和才能。与意会相比，寻径是根基和前提。寻径的过程可以由社会交互的进展过程来表征，更加便于通过行为数据来举行分析。 在互联网时代，学习的形式与过程正快速产生变化，课程的创办与评价也应当随之变化。联通主义学习理论对学习过程提出了新的解释。相应的，在课程学习评价中也需要对课程的联通状况开展评价。课程联通 水平的评价是课程评价在互联网时代的进展，是对于课程教学的深层次评价。可以预见，这种评价的重要性将随着互联网教导的进展不断提升。 3. 课程评价理论框架的提出 在综合分析各类在线课程
15、评价研究和联通主义学习理论的根基上，笔者构建了课程评价框架，包括媒体技术、学习资源、学习活动、学习支持和联通水平五个维度。在模型概念框架初步构建完成后，笔者邀请了在线教导领域、学习分析领域和教学评价领域的 7 位专家举行了半布局化访谈，在此根基上构建了课程评价的概念框架，内容描述如图 1 所示。 图 1 课程综合评价参考模型 媒体技术包括远程学习中传递学习资源、支持教学交互活动、实施教学的技术与工具应用处境。技术应用代表着课程开展所需的技术支持，包括是否采取了丰富多样的技术手段对教学举行支持;所采用的技术是否具有较高的可用性(Usability)，操作便捷易用;在移动学习快速进展的背景下，是否能够广泛支持各种操作系统和设备开展泛在学习应用。 学习资源是为课程学习服务的各种形式的学习内容和材料。学习资源对在线学习过程的支持，首先表达在内容的丰富性。课程需要供给丰富多样的教学资源，重复表达课程教学内容，促进学习者的学习。再者，学习资源需要具有明显的布局，指示学习者的学习路径，并说明供给资源的目的，以及资源使用方法。结果，学习资源要能够有效支持学习
