《心理测量-项目分析课件》由会员分享,可在线阅读,更多相关《心理测量-项目分析课件(20页珍藏版)》请在金锄头文库上搜索。
1、心理测量,项目分析,项目分析及其意义,项目分析指的是对特定受测者在个别测验项目上所作反应的统计特征的计算和检验。它所要考察的项目参数通常包括难度、区分度。项目分析的基本概念和技术,能够帮助测验使用者评价所出版的各种测验,尤其适用于编制非正式的测验,包括研究者为了某一特定研究目的而编制的各种测验、教师自编的适合课堂使用的测验和考试。 如前所述,信度和效度是测验的基本属性、重要属性。任何测验的信度和效度最终都取决于测验项目的特性。通过项目分析,能够预先使得测验具有较高的信度和效度。通过选择、替代或修改项目,能够改进测验。项目分析在测验评价、编制中起着重要的作用。,Page 2,项目难度的意义与计算
2、,难度是指测验项目的难易程度。一个测验项目,如果大部分被试都能答对,则该项目的难度就小;如果大部分被试都不能答对,则该项目的难度就大。,Page 3,二分法记分项目的难度,Page 4,(1)通过率 二分法记分测验项目的难度通常用通过率来表示,即答对或通过该项目的人数的百分比来表示: 代表项目难度, 为全体被试数, 为答对通过该项目的人数。,在200个学生中,答对该项目的人数为120人,则该项目的难度为,值为完全不同领域的测验项目提供了一个一般的难度标准。,值不是根据项目的本身特征来确定难度,而是根据参加测验的人数与选对正确答案的相对频率来定。实际上,难度既是项目本身又是参加测验的人的一个特征
3、。,二分法记分项目的难度,Page 5,值越大,其难度值越小; 通过人数越少 , 值越小,其难度值越大,题目越难。,二分法记分项目的难度,(2)极端分组法 当被试人数较多时,则可以先将被试依照测验总分从高到低排列,分成三组,总分最高的27%被试称为高分组( ),总分最低的27%被试称为低分组( )。分别计算高分组和低分组的通过率,然后求项目的难度。 或,Page 6,、 分别表示高分组和低分组的通过率; 、 分别表示高分组和低分组通过该项目的人数; 、 分别表示高分组和低分组的人数。,在370名被试中,选为高分组和低分组的被试各有100人,其中高分组有70人答对第1题,低分组有40人答对第1题
4、,则第1题的难度为:,非二分法记分项目的难度,对于论述题、简答题,每个项目不止有答对和答错两种可能结果,而是从满分至零分之间有多种可能结果。对这类项目,常常用下面的公式来计算其难度。 式中, 为被试在某一项目上的平均得分; 为该项目的满分。,Page 7,例如,数学测验的第七题满分是15分,该题考生的平均得分为9.6分,则该题的难度是:,难度值的绝对量表法,Page 8,使用通过项目人数的百分率是按照顺序量表来表示项目难度的,也就是说该百分率可以正确指出项目的等级顺序即相对难度。这个问题类似于百分位分数。百分位分数也是根据各个案百分比,它并不代表相等的单位,从分布的中部到两端,单位大小有所不同
5、。假设项目所测量的特质呈正态分布,则可以参照正态分布曲线,把项目的难度水平按照单位相等的间距量表加以表示。,以百分率或正态分布曲线单位来表示的项目难度指数,都依赖于样本。若要需要测量适用于不同能力水平的样本的项目难度,比如比较儿童在连续几个年级上的分数,最好能够在一个统一的量表上。如果项目适合于所有年级,毋庸置疑的一点是,对于该团体中的每个人来说,有的项目会太难,有的项目会太容易。,Page 9,瑟斯顿提出,在统一的、适用于任何彼此联系的团体的量表上测量各个项目的难度,这种方法称为绝对量表法。具体而言,这种方法包括两个步骤:第一,在每个样本之内分别得出每个项目的量表值,把每个项目的通过率转换成
6、z分数值;第二,选取其中任何一个团体为标准化团体或参照团体,把所有这些量表值都转换成该团体的对应值。,难度对测验的影响,Page 10,难度也会影响测验的信度。,难度对测验的分布形态及离散程度都有影响。,项目的难度在一定程度上也会对项目的鉴别能力有影响。,值得说明的一点是项目的难度和测验的目的有关。由于在筛选测验中,在接收组或拒绝组之内不需要作出区别,所以如果项目都集中在临界分数附近,则能最为有效地使用测验。所以用于筛选目的的测验,应该采用难度值最接近于所要求的选择率的项目。例如,要挑选分数较高的20%的个案,最好的项目便是集中在通过率为20%左右的项目(考虑到猜测可以略高一点)。如果测验的目
7、的是确定个体是否已掌握技能的基本要素,或是否已获得必要的知识,以便进入学习计划的下一步,那么项目的通过率最好应该是0.80-0.90。,Page 11,项目区分度及其意义,一些项目在测量整个测验所要测量的属性上发挥了相当好的作用;有些项目则对测量个体差异毫无作用;另一些项目测出来的东西全然是错误的。项目分析的一个基本目标是找到哪些项目能够最好地测量测验所要测量的构念或者性质。,Page 12,测量的一个基本假设是:在所测量的特质或者内容领域上存在个体差异。心理或教育测量就是将这些差异量化的手段或者方法。,项目区分度及其意义,Page 13,如果测验和某个项目都能测量同一属性,就能预计在测验上表
8、现好的被试也能够正确回答那个项目,表现较差的被试则不能正确回答。换而言之,好的项目能把在测验上表现好的被试和表现差的被试区分开来。这就是项目区分度,或鉴别力。,区分度是指测验项目对被试心理品质水平差异的区分能力。具有良好区分度的项目,能将不同水平的被试区分开来,也就是说,在该项目上水平高的被试得高分,水平低的被试得低分。反之,区分度低的项目则对不同水平被试不能很好地鉴别,水平高的被试与水平低的被试,所得分数差不多,甚至正好相反。,项目区分度及意义,Page 14,区分度(D)的取值范围介于-1.00 +1.00之间。通常D为正值,称为积极区分;D为负值,称为消极区分;D为零则称为无区分作用。具
9、有积极区分作用的项目,其D值越大,区分效果越好。,试题的区分度是测验是否有效度的“指示器”。并作为评价项目质量、筛选项目的主要指标与依据。评价测验项目区分度高低依赖于被试水平的准确测量,通常称作效标分数。测验项目区分度的效标分数更多的是使用测验分数,称作内部效度。,区分度的计算,项目鉴别指数法(较适合于二分法记分的测验项目) 当效标成绩是连续变量时,可以从分数分布的两端各选择27%的被试,分别计算出每道题目上各自的通过率,两者之差就是鉴别力指数(D)。,Page 15,区分度的计算,相关法 在大规模或标准化的测验中,多采用相关法,即以项目分数与效标分数或测验总分的相关作为项目区分度的指标。相关
10、越高,项目区分度越高。,Page 16,点二列相关,二列相关,相关,积差相关,区分度与难度的关系,难度越接近0.50,项目潜在的区分度越大,而难度越接近1或0时,项目潜在的区分度越小。,Page 17,项目的难度与区分度有着密切的联系。,在利用项目分析选择试题时,应使项目的难度分布广一点,使整个测验的难度呈正态分布,且平均水平分布在0.50左右,这样才能把各种水平的人都区分开来,并且区分得比较细。,区分度的相对性,Page 18,不同的计算方法,所得区分度不同,样本容量大小影响相关法区分度值的大小,分组标准影响鉴别指数值,被试样本的同质性程度影响区分度值的大小,思考题,根据下面的情形,选取最合适的区分度指标: 一个咨询员想为一个态度量表选择有效的项目,用于预测男大学生的行为,项目以1至5等级记分,学生被分为某一社团“会员”和“非会员”。 一个测验编制者想提高一个行为量表的重测信度,项目为0、1记分。 一位大学教授想要提高一个包含50个项目的单元测验的内在一致性,每个项目有4个选项,每个项目回答正确记1分。 一个心理学家想要鉴定出5级记分项目中受测者的反应受年龄影响的项目。 一位心理学家编制了一个评估种族偏见的问卷。每个项目5点记分。项目来源于一个有少数民族混居的大范围的居民对一件事情所做的解释。,Page 19,20,感谢您的关注,