《如何写好学科考试数据统计分析报告》由会员分享，可在线阅读，更多相关《如何写好学科考试数据统计分析报告（102页珍藏版）》请在金锄头文库上搜索。
1、学业质量监测与评价体系的应用,中国教研网教研管理评价研究部 北京京外维佳信息技术有限公司 2014年6月,专题讲座,实施学生学业质量监测与评价体系，实现对学生学业发展的全面监测，既是贯彻落实国家在不断深化的课程改革中加强对教育质量进行监测的政策要求，也是进一步提学校教育质量，全面提高基础教育整体水平的基础性工程。建立适应素质教育与新课程实施所需求的，以促进学生发展为目的、对象和主体多元、评价方式多样化的学生学业质量监测与评价体系，促进学校内涵的全面发展，是锐意改革的教育局和学校领导者普遍关注的课题。,前 言,目前，在多数学校的考试评价中，仅仅使用“标准参照评价”中人为划定的“及格率”和“优秀率
2、”，以及“平均分”、“分数段”等少数简单指标，主要采用“排名”式的评价显然是十分粗放、而且并不科学的评价和教学管理方法。“普遍存在着对考试数据描述不全面，解释不正确和使用不科学的现象。如以1分之差，甚至0.1分之差排出学校名次；直接将教学实验前后的分数进行对比；考试研究中，只统计平均分，而不及其他”（上海教育考试院院长李瑞阳考试数据的统计分析和解释序言）。,考试评价中普遍存在的问题与弊病,上述的问题与弊病正如北京市教委基础教育处网站上，李观政副主任讲话所总结的：“在教育评价上，学校教育评价方式单一，缺乏具体、操作性强的评价手段与工具，评价结果多数用于学校、教师排名，评价结果缺乏真实性等等”。“
3、评价内容比较片面，往往缺乏系统性，因而所获得的信息也比较有限。也正因为此，教育行政部门很难依据现有的评价进行有效的决策和资源分配，学校领导也很难通过现有的评价促进学校内涵的全面发展”。,一、系统功能与操作方法概述 二、成绩统计分析的科学理论与方法 三、试题组块分析与精细化评价工具 四、正态化标准分与发展增值评价 五、决策支持工具为教学科研服务 六、云平台上三个维度的学科评估框架,讲 座 目 录,学生学业质量监测与评价体系 网络服务平台 Quality Monitoring and Assessing System （QMAS),“学生学业质量监测与评价体系”（QMAS），是一个适应素质教育与新
4、课程实施的需求而建立的，以促进学生发展为目的、对象和主体多元、评价方式多样化的学业质量评价体系。它为您带来系统的教育评价、测量、统计学的理念，同时也是一个“具体、操作性强的评价手段与工具”，既能全面地完成终结性考试评价的全部分析项目，更适用于学校教学过程的发展性评价与精细化管理的要求。仅仅在北京市，已有西城区、朝阳区、通州区教委及260多所学校在成功地使用。其最新版的网络服务平台，是由我们与中国科学院自动化所联合设计的，可在一个地区或学校的网络上对学生学业成绩的发展实施全面的监测、管理与评价。教育局的版本除了供教育局教研室使用之外，还能向所辖区全体学校提供详尽到班级或个人的考试分析信息。,一、
5、系统功能与操作方法概述,“学生学业质量监测与评价体系”（QMAS），是教育评价、测量和统计学的理论和方法所支持的、一个完整的监测、管理与评价体系。它把绝对评价方法与相对评价方法相结合，定性方法与定量方法相结合、形成性评价与终结性评价相结合；它使用教育评价、测量的经典理论来获取科学的数据；它包含了描述统计方法和推断统计方法；它囊括了教育评价、测量和统计学的主要算法与功能模块200余个，可以对数据和信息进行全面、深入的发掘和分析，获得教学质量及学生发展状况真实、全面的评价信息。充分发挥各种方法的优势和特长，又可以互相弥补其缺陷和不足，从而使评价的结果更加全面、客观和公正，在领导决策和教学导向中充分
6、发挥作用。,除系统本身的管理功能之外，体系的评价部分主要由七大部分组成：,通过输入成绩、试题得分数据或抽样数据，即可对考试的质量分析（如团体和学生的宏观指标、命题的质量、学生对每个知识点掌握的程度等）做出全面分析、定位和详细的诊断。它为教学过程的精细化管理与评价提供了十分丰富的、操作性强的评价手段与工具，用精彩纷呈的各种测验量表、统计表格和动画图形和来展现数据，对数据和信息进行全面、深入的发掘和分析。,教育评价学 标准参照评价常模参照评价个体内差异评价 教育测量学 测验量表、正态化分布常模导出分数：百分等级分数、正态化标准分数测验质量分析：难度、区分度、信度、效度 教育统计学 描述统计学 分数
7、分布状态描述分数分布趋势描述推断统计学 假设检验区间估计相关分析线性回归多元分析,【理论体系结构】教育评价学、测量学和统计学方法综述,【查询数据的途径一】 通过系统菜单查询数据,最常用的指标名称列表 平均分、及格率等常用指标的表和图 学生各科分数、地区与学校名次 总分及学科分数上线指标 总分名次分段 百分等级分段 总分分数段 学科分数段 总分及学科累计分数段 平均值、标准差、差异系数等统计量 （教研员常用的指标和分析图）,【查询数据的途径二】 图形报表集成的操作方法,在系统主菜单中选择： 决策支持工具图形报表集成成绩统计分析（试题组块分析） 选择查询项目的操作方法： 按住Ctrl键，用鼠标选择
8、多个查询项目确定提交。,【查询数据的途径二】 图形报表集成的显示窗口,在图形报表集成窗口中，对选择的查询项目实施提交后，可以把常用的图形报表全部集成在同一个窗口内进行显示，能够十分方便地进行浏览和查询。,例如，“常模参照评价学生成绩报道”，点击“选项”框，可以查询学生各科原始分数在总体中的位置：导出分数（百分等级分、标准分Z、标准分T）和顺序名次等。在顺序名次表中，点击表头某字段，出现蓝色箭头；点击箭头，即可进行该字段的递增或递减排序。,【查询数据的方法】 表格的查询和数据排序,在统计表格中，点击下方的“下载”按键，即可把表格的内容下载为Excel表，甚至可以直接把多个班级的数据，保存为一个压
9、缩包。下图为“我的电脑”窗口中解压缩产生全校各班级的Excel文件。,【系统输出功能】 把表格的内容下载为压缩包,例如，进入“标准参照评价标准参照指标统计图”。点击“选项”框，分别绘制平均分、及格率等8种统计图。在科目及图形中，点击“图形”框，分别绘制柱状图或折线图。想要进行指标的递增或递减排序，点击“按指标递增（或递减）”。,【查询数据的方法】 图形的绘制和数据排序,例如，累计频率分布图描述了分数在各分数段所出现累计频率的分布情况。纵坐标为频率（%），横坐标为分数段。点击选择比较单位，弹出小窗口，再选任意个学校（或班级），提交，即绘制出累计频率比较图，对它们的分布进行详细分析比较。,【查询数
10、据的方法】 图形绘制时任意选择数据,在图形中击鼠标右键，弹出菜单，选择 “Save as JPEG Image”，即可把图形下载为JPEG 格式的图形文件保存。,【系统输出功能】 把显示图形下载为文件保存,在“考试参数设置”中选择“科目管理”，可以十分灵活地进行分析科目的设置。,【系统设置功能】 分析科目的设置,在“考试参数设置”中选择“分段管理”，可以十分灵活地进行分数段的设置。,【系统设置功能】 分数段的设置,使用“区县版”内的系统管理功能，选择“角色管理角色授权”，可灵活地限制教研员或学校用户对每个模块的操作查询的权限。,【系统管理功能】 用户操作查询权限的设置,在“教育局版”内，当设置
11、某学校对某个模块的操作查询的权限为“汇总+本校数据”时，该学校除了能查询到全区、各分组的指标，只能看到本校指标（限制不能看其他学校指标），还能查询本校每个班级（或个人）的指标。,【系统管理功能】 用户操作查询权限的演示,系统支持用户自定义统计表格和图形，甚至允许用户修改现有的统计表格和图形。下图为某用户自己设计的“自定义统计表” 。,【系统管理功能】 支持用户自定义统计表格或图形,对菜单和模块的操作包括：即：添加子菜单、修改、移动、停用、设置权限、删除。,【系统管理功能】 支持用户自定义菜单和模块,除了常规的分析项目，如平均分、四率、分数段等传统数据之外，需要全面地应用教育评价、测量和统计学的
12、理论，包含了标准参照评价与常模参照评价的各种方法和技术；采用描述统计分析方法对获得的数据进行整理、概括，显现其分布特征，用丰富的测验量表、统计表格和图形等手段展现各项数据。主要包括： 1、标准参照评价的量化指标：优秀率、及格率、； 2、常模参照评价的量化指标：导出分数（百分等级分、正态化标准分）、上线指标、； 3、测验分数分布状态的描述：频数和频率分布、； 4、测验分数分布趋势的描述：平均分、标准差、变异系数、。,二、成绩统计分析的科学理论与方法,评价标准在被评价集体之外，是预先制定的。通过与评价标准相比较，可以确定被评价对象达到目标的程度。这种评价也称为绝对评价。它主要用于合格性和达标性活动
13、。其特点是评价标准是由目标所决定的绝对标准。采用原始分数人为制定教学目标，如“优分”、“及格”、和“低分”等分数线，量化指标为相应的“优分率”、“及格率”和“低分率”等。,【成绩统计分析】 标准参照评价（绝对评价）,标准参照指标统计图包括了常规“四率”的柱状图、折线图和堆栈图。例如，下述堆栈图描述了某年级汇总及班级的优秀率（灰色）、良好率（黄色）、及格率（绿色）和不及格率（橙色，零平面之下）的分布情况。,【成绩统计分析】 标准参照指标统计图,评价标准在特定的被评价集体之内，通过与评价标准相比较，可以确定被评价对象在集体中所处的位置，以分优劣。这种评价也称为相对评价。常模参照评价采用导出分数（百
14、分等级分、标准分）和常模表作为评价工具。在团体内进行“上线指标”和“名次排序”分析也可归到本类评价的范围。常模表由原始分数和导出分数共同组成的测验量表。它是教育测量中用于比较和解释测验结果时的参照分数标准。测验分数必须与某种标准比较，才能显示出它所代表的意义。,【成绩统计分析】 常模参照评价（相对评价）,通过测验所直接得到的分数，叫原始分数。由于各个测验的难度不同，各原始分数的价值也不相同，不同测验的原始分数不能进行直接比较。例如一个在难度小的测验里得70分，并不比一个在高难度的测验里得60分的高。为使不同的原始分数可以比较，就必须把它们转换为可以比较的量表分数。这种原始分数转换成测验量表上的
15、分数，叫做导出分数。常用导出分数有：百分等级分数，标准分数。,【常模参照评价】 测验量表、导出分数,百分等级分数 原始分数仅表示分数多少，不能表明它在全体分数中的地位。而百分等级分数是一种相对地位量数，它把参加测验的全体人数作为一百分来计算，从而以某一原始分数换算出其在全体中所占的位置。说明分数比他少的人占人数的百分之几。如一学生的测验成绩为80分，经换算某百分等级分数是73分，即表示参加测验的73%的人低于80分，并说明超过他的成绩的仅有27%。百分等级分数不仅可以表示一个分数在团体中的地位，还可以比较一个人两种学科测验或两次不同测验的成绩。标准分数Z Z =（ Xi X ）/ S，是将原始
16、分数与其平均数之差除以标准差所得的商数。它是以标准差为单位度量原始分数离开平均数的量数，它可以表示一个原始分数在团体中所处的位置。即告诉我们它在平均数上多少个标准差，或是在平均数之下多少个标准差。Z的取值范围：-3.3 Z +3.3。标准分数T T = 10Z + 50 T的取值范围：17 T 83。,【常模参照评价】 百分等级分数、标准分数 Z 和 T,它形象地表示了在同一次考试中原始分数（总分、学科）与导出分数之间的对应的等值关系，以及原始分数在标准正态分布常模（即在常模团体中）的相对位置。,【常模参照评价】 正态分布常模与分数等值图,根据标准正态分布常模中的正态化标准分，学生或团体标准分内差异比较图可以直接比较出其各学科之间的差异。如图所示，语文、历史是本班的优势，水平在全校平均值（“零平面”玻璃板）之上，英语、化学是本班的薄弱环节。,
