《三大MOOC平台Coursera、EdX和Udacity的可用性比较研究_1》由会员分享,可在线阅读,更多相关《三大MOOC平台Coursera、EdX和Udacity的可用性比较研究_1(5页珍藏版)》请在金锄头文库上搜索。
1、 三大MOOC平台Coursera、EdX和Udacity的可用性比较研究 摘要:文章对三大MOOC平台(Coursera、EdX和Udacity)进行网站可用性测试,从可靠性、可学习性和满意度三个角度来研究比较三个网站的可用性,找出每个网站的可用性缺陷,最后给出了提高网站可用性的建议和方法。关键词:MOOC,可用性,可靠性,可学习性,满意度编者按:虽然MOOC的兴起只是近两年的事情,但其发展异常迅猛,全球的参与者已近千万,MOOC所积累的优质资源为人们的学习提供了极大的便利。本专题立足研究与应用两个维度,对三大MOOC平台Coursera、EdX和Udacity的可用性进行了比较研究,又从教
2、学应用方面分享了三所不同学校的实践经验,以期为国内MOOC建设提供参考。一、研究背景在当今的网络时代,大规模在线开放课程(Massive Open Online Course简称MOOC)的普及使地域、年龄、语言、文化、种族、资本、收入等因素不再成为学习者接受课堂教学的障碍。作为一种新型技术,MOOC已经成为主要教学手段之一(郝丹,2013),受到了许多国家高等教育者的青睐(王文礼,2013;王颖等,2013)。MOOC平台的显著特点之一是开放共享(陈肖庚,王顶明,2013)。具有较强可用性(usability)的MOOC平台才具有较强的开放共享功能(M. Clar,E. Barber,201
3、4)。可用性一词源于上世纪80年代早期,指特定使用者在特定环境中完成特定任务时对所使用系统或产品的效能、效率与满意度的评价(ISO,1998)。不同学者、组织从技术、用户使用、用户满意度等方面对网站可用性虽然提出了不同的理解(雷银枝,2011),而Nielsen(1994)提出的衡量网站可用性的五个方面得到普遍认可,它们是可学习性(用户第一次进入网站时需要多长时间来完成任务)、使用效率(用户熟悉这个网站后需要多长时间来完成任务)、可记忆性(用户再次访问网站时是否需要重新学习网站操作)、可靠性(用户访问网站过程中是否发生技术故障)和用户满意度(用户是否喜欢或者愿意继续访问这个网站)。10多年来,
4、国内学者参考Nielsen(1994)调研结果,并主要采用访谈法(段江玲,王峰,2011)、问卷调查法(雷刚,2010;左伍衡等,2013)、启发式评估(党洪莉,陈玉顺,2007;张敏,2007)、可用性测试(魏晓玲,2010;赵宇翔,2007)、日志分析法(赵程程等,2004;黄晓斌,邱明辉,2011)、专家调查法(张洪梅等,2009;贺桂和等2010)等,对网站可用性进行了大量研究,但人们对网站可用性的内涵还没有形成一致认识。导致这种局面的原因很多,例如定性研究居多定量研究不足和评价指标过于多元化等(韩玺,2014)。但我们认为,还有一方面的原因是网站可用性的相对性。网站是一个复杂的工程,
5、对于特定的学习者群体,不同MOOC平台可能在可用性的不同方面存在差异。也就是说,对于不同的MOOC平台,同一学习者群体完成不同任务操作的相对效率会有显著性差异。为验证这一假设,我们拟对世界上的三大MOOC平台(Coursera、EdX和Udacity)进行一项实验研究。二、研究方法被试是在浙江大学紫金港校区随机招募的32名在校学生,其中男生16名、女生16名,学历层次博士生2名,硕士生5名,本科生25名,平均年龄为22岁。实验在多媒体教室里进行,被试根据提示先后进入Coursera、EdX和Udacity三个MOOC平台,并分别完成三个不同的任务:在网站上注册一个帐号、查找并进入某一门课程介绍
6、页和打开第一个课程视频。我们用Camtasia Studio 6.03记录每位被试的操作过程,计算每位被试完成每一个任务所需要的时间。实验结束后,被试填写网站满意度测试7-点量表(1表示非常满意,7表示非常不满意)。三、结果分析我们计算32个被试在不同网站完成不同任务操作的成功率、满意度和所花费的时间,结果如表1所示。表1 被试在不同网站完成不同任务的成功率(%)、满意度和所花时间(秒)网站任务成功率满意度(MSD)时间(MSD)Coursera注册1001.700.65777.6029.570查询搜索942.751.02095.0086.439视频学习843.101.210217.3588.
7、842EdX注册973.901.165186.65109.787查询搜索973.551.31799.8538.990视频学习753.251.372166.2072.781Udacity注册1002.051.05081.5544.27查询搜索753.601.501233.80130.276视频学习752.701.08139.6520.0221.可靠性分析可靠性是指用户在访问网站过程中是否有错误发生。我们用任务完成成功率作为衡量网站可靠性的指标。Coursera、EdX和Udacity在三个任务上的平均成功率分别为93%、90%和83%,所有的值均高于可接受的最小阀值70%(K. Maxwell,
8、2002),说明三个网站的可靠性都比较高。卡方检验表明,不同网站三个任务的平均成功率没有显著性差异,X2(2)=0.594,p=0.743,说明从可靠性角度来说,三个网站是没有差别的。对不同网站不同任务的成功率进行独立性检验表明,被试完成不同任务的成功率与网站无关,X2(4,797)=2.486,p=0.647,Cramers=0.056,更印证了刚才卡方检验的结果。2.可学习性分析对于一个被试,如果他/她在任何网站完成任何任务不成功,那么相应数据将不参与运算。我们获得20个被试的有效数据,并对他们在不同网站完成不同任务所花费时间进行3(网站:Coursera、EdX和Udacity)3(任务
9、:注册、查询搜索、视频学习)二因素重复测量方差分析,结果表明,网站主效应显著F(2,38)=4.275,p=0.021,p2=0.184;任务主效应显著F(2,38)=3.437,p=0.042,p2=0.153;网站和任务交互作用显著(如图1所示),F(4,76)=29.197,p=0.000,p2=0.606。图1 学生在不同网站完成不同任务所需要的时间简单效应分析表明,学生成功完成注册任务所需要的时间,Coursera和EdX有显著性差异,t(19)=-4.615,p=0.000;EdX和Udacity有显著性差异,t(19)=4.713,p=0.000;Coursera和Udacity
10、没有显著性差异,t(19)=-0.429,p=0.672。也就是说,学生首次访问Coursera和Udacity网站并完成注册的时间要快于EdX,而他们两者之间是没有显著差别的。周俊(2012)提到注册信息应该最简化和层次化,首次注册时应该简化用户必须输入的信息,保证用户能够注册成功,然后再考虑分步骤实现其它信息的收集,把繁琐的注册环节分成多个部分完成,有利于分散用户的抗拒情绪。观察学生操作视频,我们发现Coursera和Udacity的注册功能有相似之处,两者需要学生提交的表单数量都比较少,只有最简单的用户名、用户邮箱、用户密码等4个选项,填写表单需要耗费的时间都比较短。而EdX上需要提交的
11、表单有9个选项,大量的输入项增加用户注册时的难度,耗费更多的时间和精力,更严重的是增加了注册的心理负担,成功注册的概率也随之下降。学生成功完成查询搜索任务所需要的时间,Coursera和EdX没有显著性差异,t(19)=-0.258,p=0.799;EdX和Udacity有显著性差异,t(19)=-5.055,p=0.000;Coursera和Udacity有显著性差异,t(19)=-4.083,p=0.001;也就是说,学生首次进入Coursera和EdX网站,查询搜索一门课程所需要的时间比在Udacity上要快。观察操作视频,三个网站都提供了根据发布时间早晚、课程类别、课程语言、课程学校等
12、缩小搜索范围的途径,区别在于Coursera和EdX的搜索框放在首页最醒目的位置,而Udacity是将搜索框放在课程列表页。还有学生在Udacity上查询搜索课程时,遭遇找不到该课程和点击搜索提交按钮无响应等困难,最终不得不在课程列表里一页一页去浏览,如果能够提供必要的帮助和提示,学生也不会因此而放弃。Cockrell和Jayne(2002)也持有类似的观点,他们认为网站内搜索应该放在醒目的位置,并且尽可能的提供更多的途径和帮助指导。学生成功打开该课程第一个视频所需要的时间,Coursera和EdX没有显著性差异,t(19)=1.888,p=0.074;EdX和Udacity有显著性差异,t(19)=7.795,p=0.000;Coursera和Udacity有显著性差异,t(19)=8.799,p=0.000。也就是说,学生在Udacity上打开一门课程开始学习的时间要快于Coursera和EdX。观察操作视频,我们发现虽然Coursera和EdX打开视频的时间是没有差异的,但原因却是不同的;在Coursera点击一门课程开始学习时,会弹出如何获取课程认证证书的提示框,引导学生至缴费支付页面。等学生明白课程学习是免费的时候,再次返回课程内容页,已经耗费了大量的时间;而在EdX,学生耗费太多的时间用于熟悉课程界面,因为视频链接不够显眼又缺少特殊标记。 -全文完-