《心理测量学PT2010之五效度》由会员分享，可在线阅读，更多相关《心理测量学PT2010之五效度（24页珍藏版）》请在金锄头文库上搜索。
1、心理测量原理2010之五 效度 心理测量原理之二 （3）,王才康 华南师大心理系 2010-4-15,心理测验的编制过程,确定测验的目的 制定编题计划 设计测试题目 试测与项目分析 合成测验 将测验标准化 对测验的鉴定（信度与效度） 编写测验说明书,本章内容,效度的概念 效度的概念 效度与测量误差的关系 效度的种类与用途 内容效度：概念与评估方法 效标关联效度：概念与评估方法 结构效度：概念与评估方法 如何提高测验效度,效度的概念（1）,真分数理论：X=T+E 只考虑了随机误差，T是真值，但不是有效值 S2X =S2T + S2E 真分数理论的进一步推论 S2T =S2v + S2I （考虑到
2、系统误差I） S2X =S2v + S2I+ S2E,效度的概念（2）,效度的概念： 指测量工具的有效性、准确性，或反映真实值的程度 Another important concept in psychometrics is validity, which concerns the purpose of measurement; a measure is valid if it measures what it purports to measure. rxy= S2v/S2X 与效度度有关的误差： 随机误差 系统误差（这个与信度不同，也因此效度的值总是小于信度，而信度因而成为效度的必要条件。
3、P61,效度：种类与功能,内容效度：仅限于成就测验，或知识与技能测验 表面效度：所有测验 Face Validity Face validity is concerned with how a measure or procedure appears. Does it seem like a reasonable way to gain the information the researchers are attempting to obtain? Does it seem well designed? Does it seem as though it will work reliably
4、? 效标关联效度：所有测验 预测效度 同时效度 结构效度：所有测验,内容效度：概念与评估方法 Content Validity,概念： Content Validity is based on the extent to which a measurement reflects the specific intended domain of content (Carmines & Zeller, 1991). 指一个测验的内容是否合适，一般相对于教材或大纲 仅适合知识或技能考试（有大纲或教材），不适合一般的认知测验或人格测验 评定方法： 一般通过专家评定的方法：逻辑评定，即依经验评定，不用经过
5、实际施测,效标关联效度：概念 Criterion Related Validity,Criterion related validity, also referred to as instrumental validity, is used to demonstrate the accuracy of a measure or procedure by comparing it with another measure or procedure which has been demonstrated to be valid. For example, imagine a hands-on dr
6、iving test has been shown to be an accurate test of driving skills. By comparing the scores on the written driving test with the scores from the hands-on driving test, the written test can be validated by using a criterion related strategy in which the hands-on driving test is compared to the writte
7、n test,效标关联效度：评定方法（1）,数据收集与分析： 找一个效标（测验），对同一批被试，同时施测，得到两组数据； 求相关系数或进行差异比较（t检验） 效标选择： 预测效度：根据有关理论（或研究成果，或一般推理）所选效标与待研究的测验（特质）有联系，如IQ与学习成绩，个性与心理健康 同时效度：所选效标与待研究的测验（特质）内涵相同或相似,效标关联效度：评定方法（2）,会聚效度( convergent validity)与区分效度(divergent validity) 会聚效度指某一测验的分数与测量同一构想的其他测验分数之间的相似性的证据 区分（发散）效度指某一测验分数与已知的测量无关构
8、想的测验分数之间没有关系的证据 举例：一个数理推理测验与数学成绩的相关是会聚效度，而与一个阅读测验的较低或不显著的相关则是区分效度。,效标关联效度（3） 多特质多方法（MTMM）,结构效度的概念,结构效度的概念,结构效度的概念,http:/ 结构：即变量结构效度1 结构：即理论结构效度2 结构效度的含义： 结构效度1：新编制的测验能不能测某一结构（或特质）（实际上是效标关联效度，参前面聚合效度与区分效度） 结构效度2：测验的结构与理论预期的结构是否符合,结构效度的评定方法（1）,To understand whether a piece of research has construct va
9、lidity, three steps should be followed. First, the theoretical relationships must be specified. Second, the empirical relationships between the measures of the concepts must be examined. Third, the empirical evidence must be interpreted in terms of how it clarifies the construct validity of the part
10、icular measure being tested,结构效度的评定方法（2）,第一步（样本1）： 待研究量表包括那些组成部分（维度）：（探索性）因素分析（EFA） 组成部分（维度）之间关系怎样：维度之间的相关 第二步（样本2）： 维度和关系一起分析：验证性因素分析（CFA） 一般来说，这两步都完成才算完整，但能做到第一步已经算不错了,提高测验效度的方法,影响因素 测验长度 测验实施 被试特征 效标的性质 测验信度 提高方法,思考题,重要概念 效度、内容效度、表面效度、效标关联效度（实证效度）、预测效度、同时效度，结构效度 思考题： 试述效度与测量误差的关系？ 试述度效标关联效度（实证效度）
11、的含义？ 试述效标关联效度（实证效度）的评估步骤？ 结合测验编制，谈谈结构效度对于一个测验的意义？,量表的正规化,量表的正规化是指在量表编制完成后，对量表进行效度、信度检验，确保量表有效、且稳定（不受无关因素影响）。 也即我们一般所说的信、效度检验 有人称这个过程为标准化（如张厚粲，2005），个人认为这个说法并不确切。,量表的正规化：人格问卷,项目分析（区分度）：因素分析法、相关法、高低分组对照法（三者可任选一个） 效度分析： 效标关联效度：相关法 结构效度：因素分析法，维度相关法；验证性因素分析法（3个都要） 信度分析： 重测信度 内部一致性系数,量表的正规化：智力测验与考试,项目分析（区
12、分度）：因素分析法、相关法、高低分组对照法（ （三者可任选一个） 效度分析： 效标关联效度：相关法 结构效度：因素分析法，维度相关法；验证性因素分析法（3个都要） 信度分析： 重测信度 分半信度 等值性系数,量表的正规化：第一步,抽样调查：被试约300人左右 调查问卷：新编问卷测试版 数据分析： 因素分析和各种项目分析方法结合。主要是探索量表的因素结构（结构效度）。 理想的结果是当删除若干项目后，获得比较清晰的量表结构。 这时量表可定稿为正式版（当然最好在验证性因素分析也通过的时候） 可继续分析量表的信度即内在一致性系数。 可继续分析量表维度之间的相关（结构效度） 若量表结构不清晰，这一次研究
13、当作试测，须重新修改或编制问卷，重新收集数据，并进行分析，直到量表结构清晰为止。,量表的正规化：第二步,抽样调查：约5060人，须记名 调查问卷：新编问卷正式版，定稿后新编问卷与效标问卷 数据分析： 间隔一段时间，对同一组被试测试获得的两组数据，计算r(重测信度) 同时施测效标问卷（或获得校标数据），计算r(效标关联效度)。,量表的正规化：第三步,抽样调查：约300人 调查问卷：新编问卷正式版 数据分析：验证性因素分析，进一步确定量表的结构效度。若结果不理想，尚须修订正式版,量表的正规化：论文写作（结果部分）,项目分析与因素结构探索 效度：结构效度：探索性因素分析见前面、验证性因素分析（这部分可独立成篇），校标关联效度 信度：内部一致性信度，重测信度 不同人口特征被试的得分与比较,
