《内容效度教学课件》由会员分享，可在线阅读，更多相关《内容效度教学课件（57页珍藏版）》请在金锄头文库上搜索。
1、第四章 效度第一节第一节 概述概述第二节第二节 内容效度内容效度第三节第三节 效标关联效度效标关联效度第四节第四节 结构效度结构效度第五节第五节 提高测量效度的方法提高测量效度的方法第六节第六节 效度资料的概化效度资料的概化第一节 概述一、效度的含义一、效度的含义二、效度和信度的关系二、效度和信度的关系三、效度的种类三、效度的种类返回返回一、效度的含义效度（效度（validation)validation) 指测验的有效性，即测验分数能够代表指测验的有效性，即测验分数能够代表所要测量的心理特性的程度，或测验结果所要测量的心理特性的程度，或测验结果达到测验目的的程度。达到测验目的的程度。 一个测
2、验对所要测验的特性测量到什么一个测验对所要测验的特性测量到什么程度的估计。程度的估计。vvAERAAERA，APAAPA，NCMENCME（19991999，p12p12） 指根据指定用途支持分数解释的那些事指根据指定用途支持分数解释的那些事实和理论的有效程度。实和理论的有效程度。效度的数学定义n n测验分数测验分数 = = 有效分数有效分数 + + 系统误差系统误差 + + 随机误差随机误差n n测验分数的方差测验分数的方差= = 有效分数的方差有效分数的方差有效分数的方差有效分数的方差+ + + +系统误差的方差系统误差的方差系统误差的方差系统误差的方差+ + + +随机误差的方差随机误差
3、的方差随机误差的方差随机误差的方差n n效度为有效分数的方差与测验分数方差的比效度为有效分数的方差与测验分数方差的比效度为有效分数的方差与测验分数方差的比效度为有效分数的方差与测验分数方差的比返回返回二、效度和信度的关系信度高是效度高的必要条件，而非充分条件信度高是效度高的必要条件，而非充分条件信度高是效度高的必要条件，而非充分条件信度高是效度高的必要条件，而非充分条件效度不会大于信度的平方根（可由下面公式推导）效度不会大于信度的平方根（可由下面公式推导）效度不会大于信度的平方根（可由下面公式推导）效度不会大于信度的平方根（可由下面公式推导）返回返回三、效度的种类1.1.1.1.内容效度内容效
4、度2.2.2.2.效标关联效度效标关联效度3.3.3.3.结构效度结构效度返回返回第二节 内容效度一、内容效度的含义一、内容效度的含义二、验证测验内容效度的程序二、验证测验内容效度的程序三、内容效度的确定方法三、内容效度的确定方法四、适用范围四、适用范围五、表面效度五、表面效度返回返回一、内容效度的含义内容效度（内容效度（content validation） 测验项目对所要测量的内容范围的代表性程度。测验项目对所要测量的内容范围的代表性程度。测验项目对所要测量的内容范围的代表性程度。测验项目对所要测量的内容范围的代表性程度。测验的使用者希望估计测验在它所要代表的环境整测验的使用者希望估计测验
5、在它所要代表的环境整测验的使用者希望估计测验在它所要代表的环境整测验的使用者希望估计测验在它所要代表的环境整体中一个考生表现如何。体中一个考生表现如何。体中一个考生表现如何。体中一个考生表现如何。 （19741974）内容关联凭证（内容关联凭证（内容关联凭证（内容关联凭证（content-related content-related evidenceevidence）（）（）（）（19851985）基于考试内容的凭证（基于考试内容的凭证（基于考试内容的凭证（基于考试内容的凭证（evidence based on test evidence based on test content )con
6、tent )（19991999）（）（）（）（p299p299）返回返回二、验证测验内容效度的一般程序以教育测验为例以教育测验为例以教育测验为例以教育测验为例1.1.1.1.确定所要测量的全部内容范围；确定所要测量的全部内容范围；确定所要测量的全部内容范围；确定所要测量的全部内容范围；2.2.2.2.将测验目的具体化为不同层次的测验目标；将测验目的具体化为不同层次的测验目标；将测验目的具体化为不同层次的测验目标；将测验目的具体化为不同层次的测验目标；3.3.3.3.确定每一层测验目标在整个测验中的比重；确定每一层测验目标在整个测验中的比重；确定每一层测验目标在整个测验中的比重；确定每一层测验目
7、标在整个测验中的比重；4.4.4.4.编制编制编制编制双向细目表双向细目表双向细目表双向细目表；5.5.5.5.确定每一小格中的测题数量；确定每一小格中的测题数量；确定每一小格中的测题数量；确定每一小格中的测题数量；6.6.6.6.按比例随机抽取测验题目；按比例随机抽取测验题目；按比例随机抽取测验题目；按比例随机抽取测验题目；7.7.7.7.请专家对测题的代表性、适合性进行分析，并请专家对测题的代表性、适合性进行分析，并请专家对测题的代表性、适合性进行分析，并请专家对测题的代表性、适合性进行分析，并作必要的修改，直到大多数专家满意为止。作必要的修改，直到大多数专家满意为止。作必要的修改，直到大
8、多数专家满意为止。作必要的修改，直到大多数专家满意为止。返回返回双向细目表举例识记识记理解理解应用应用分析分析综合综合评价评价合计合计第一章第一章8 82 21010第二章第二章10106 62 210102828第三章第三章3 36 62 24 47 72222第四章第四章2 29 96 612125 56 64040合计合计131327271414181822226 6100100上页上页三、内容效度的确定1.1.1.1.专家判断法（如前所述）专家判断法（如前所述）2.2.2.2.复本法复本法3.3.3.3.处理后的重测法处理后的重测法4.4.4.4.内容效度比内容效度比复本法一组被试在取
9、自同样内容范围的两个测一组被试在取自同样内容范围的两个测验复本上得分的相关来估计。验复本上得分的相关来估计。n n如果相关低，则两个测验中至少一个缺如果相关低，则两个测验中至少一个缺乏内容效度。乏内容效度。n n如果相关高，一般推论测验具有内容效如果相关高，一般推论测验具有内容效度，但也可能出现两个测验有相同偏差度，但也可能出现两个测验有相同偏差的情况。的情况。处理后的重测法n n前测前测教学教学后测后测n n在教学或训练之前施测某一测验，然后对在教学或训练之前施测某一测验，然后对他们进行教学训练，结束时再测一次。如他们进行教学训练，结束时再测一次。如果成绩提高很大，则说明测验对教学具有果成绩
10、提高很大，则说明测验对教学具有较高的内容效度。较高的内容效度。内容效度比返回返回四、适用范围n n内容效度适合于测验所要测量的内容总体内容效度适合于测验所要测量的内容总体能够明确界定的情况：能够明确界定的情况： 标准参照测验标准参照测验 知识测验、技能测验等教育测验知识测验、技能测验等教育测验 工作表现可以界定的职业心理测验工作表现可以界定的职业心理测验不适合：智力测验，人格测验不适合：智力测验，人格测验返回返回五、表面效度表面效度（表面效度（face validity ） 被试主观上认为测验是否测量了所要测被试主观上认为测验是否测量了所要测量的心理特性。量的心理特性。并不是一种真正的效度。并
11、不是一种真正的效度。表面效度影响被试的测验动机。表面效度影响被试的测验动机。人格测验要求表面效度不宜过高。人格测验要求表面效度不宜过高。返回返回第三节 效标关联效度一、效标关联效度概述一、效标关联效度概述二、效标二、效标三、效标关联效度估计的方法三、效标关联效度估计的方法四、效标关联效度的应用四、效标关联效度的应用 返回返回一、效标关联效度概述效标关联效度效标关联效度（criterion-related validity） 指测验分数与外部效标之间的相关。指测验分数与外部效标之间的相关。指测验分数与外部效标之间的相关。指测验分数与外部效标之间的相关。 又称准则关联效度。又称准则关联效度。又称准
12、则关联效度。又称准则关联效度。效标即效度标准。效标即效度标准。 指独立于测验结果，反映测验目的的行为参照。指独立于测验结果，反映测验目的的行为参照。指独立于测验结果，反映测验目的的行为参照。指独立于测验结果，反映测验目的的行为参照。效标关联效度研究的一般步骤1.1.1.1.确定一种恰当的准则行为及其测量方法；确定一种恰当的准则行为及其测量方法；2.2.2.2.确定一个能代表测验最终使用对象的适合确定一个能代表测验最终使用对象的适合的受测者样本；的受测者样本；3.3.3.3.施测并记录每个受测者的得分；施测并记录每个受测者的得分；4.4.4.4.得到准则资料，对每个受测者在该准则上得到准则资料，
13、对每个受测者在该准则上的操作进行测量；的操作进行测量；5.5.5.5.确定测验分数与准则分数的相关程度。确定测验分数与准则分数的相关程度。效标关联效度的类型 预测效度预测效度（predictive validity） 测验分数与随后获得的效标分数之间的相关。测验分数与随后获得的效标分数之间的相关。测验分数与随后获得的效标分数之间的相关。测验分数与随后获得的效标分数之间的相关。 同时效度同时效度（concurrent validity） 测验分数与几乎同时获得的效标分数之间的相关。测验分数与几乎同时获得的效标分数之间的相关。测验分数与几乎同时获得的效标分数之间的相关。测验分数与几乎同时获得的效标
14、分数之间的相关。返回返回二、效标（准则）n n效标的测量效标的测量 n n常用的效标常用的效标 1效标的测量n n有效性：有效性：高效度高效度 n n可靠性：可靠性：高信度高信度 n n客观性：客观性： 效标污染效标污染效标污染效标污染（criterion contaminationcriterion contamination）：在对效标）：在对效标）：在对效标）：在对效标进行测量的过程中，由于事先知道预测源的结果，进行测量的过程中，由于事先知道预测源的结果，进行测量的过程中，由于事先知道预测源的结果，进行测量的过程中，由于事先知道预测源的结果，而对效标测量产生影响或污染的过程而对效标测量产
15、生影响或污染的过程而对效标测量产生影响或污染的过程而对效标测量产生影响或污染的过程n n实用性：实用性：方便方便, ,经济经济 2常用的效标n n学术成就学术成就学术成就学术成就（智力测验、标准化成就测验的效标）（智力测验、标准化成就测验的效标）（智力测验、标准化成就测验的效标）（智力测验、标准化成就测验的效标） n n实际工作表现实际工作表现实际工作表现实际工作表现（特殊能力测验、部分智力测验和人（特殊能力测验、部分智力测验和人（特殊能力测验、部分智力测验和人（特殊能力测验、部分智力测验和人格测验的效标）格测验的效标）格测验的效标）格测验的效标）n n团体差异团体差异团体差异团体差异（测验分
16、数能将已经知道的团体差异区分（测验分数能将已经知道的团体差异区分（测验分数能将已经知道的团体差异区分（测验分数能将已经知道的团体差异区分开来）开来）开来）开来） n n临床诊断临床诊断临床诊断临床诊断（人格测验的效标）（人格测验的效标）（人格测验的效标）（人格测验的效标） n n特殊训练的成绩特殊训练的成绩特殊训练的成绩特殊训练的成绩（特殊能力测验的效标）（特殊能力测验的效标）（特殊能力测验的效标）（特殊能力测验的效标）n n等级评定等级评定等级评定等级评定（人格测验中其他人的评定）（人格测验中其他人的评定）（人格测验中其他人的评定）（人格测验中其他人的评定） n n现有的测验现有的测验现有的
17、测验现有的测验返回返回三、效标关联效度估计的方法 n n相关系数法相关系数法 n n分组检验法分组检验法 n n命中率法命中率法 n n功利率法功利率法 返回返回1相关系数法 n n方法：方法：方法：方法： 积差相关、点二列相关、二列相关、等级相关等积差相关、点二列相关、二列相关、等级相关等积差相关、点二列相关、二列相关、等级相关等积差相关、点二列相关、二列相关、等级相关等 n n优点：优点：优点：优点： 提供了预测源与效标之间的数量关系；提供了预测源与效标之间的数量关系；提供了预测源与效标之间的数量关系；提供了预测源与效标之间的数量关系； 可利用回归方程来预测效标分数。可利用回归方程来预测效
18、标分数。可利用回归方程来预测效标分数。可利用回归方程来预测效标分数。n n缺点：缺点：缺点：缺点： 预测源与效标是非线性关系时，会低估效度；预测源与效标是非线性关系时，会低估效度；预测源与效标是非线性关系时，会低估效度；预测源与效标是非线性关系时，会低估效度； 不能提供关于取舍正确性的指标。不能提供关于取舍正确性的指标。不能提供关于取舍正确性的指标。不能提供关于取舍正确性的指标。积差相关适用条件：适用条件： 测验分数与效标分数都是正态连续变量，测验分数与效标分数都是正态连续变量，且二者存在线性关系且二者存在线性关系积距相关公式举例举例二列相关适用条件：适用条件： 两列变量均来自正态分布总体的等
19、距变量，两列变量均来自正态分布总体的等距变量，而其中一列被人为地划分为两个类别而其中一列被人为地划分为两个类别二列相关公式举例举例返回返回2分组检验法 基本思想：基本思想： 根据被试在准则上的行为表现，将他们分为根据被试在准则上的行为表现，将他们分为根据被试在准则上的行为表现，将他们分为根据被试在准则上的行为表现，将他们分为不同的组别，如果这些组的预测源分数有显著差不同的组别，如果这些组的预测源分数有显著差不同的组别，如果这些组的预测源分数有显著差不同的组别，如果这些组的预测源分数有显著差异，那么，这个测验的预测效度是较高的。异，那么，这个测验的预测效度是较高的。异，那么，这个测验的预测效度是
20、较高的。异，那么，这个测验的预测效度是较高的。步骤：步骤：依据被试在准则上的行为表现进行分组：依据被试在准则上的行为表现进行分组：依据被试在准则上的行为表现进行分组：依据被试在准则上的行为表现进行分组： 成功与失败成功与失败成功与失败成功与失败 或或或或 合格与不合格合格与不合格合格与不合格合格与不合格 两独立样组测验分数的均数差异显著性两独立样组测验分数的均数差异显著性两独立样组测验分数的均数差异显著性两独立样组测验分数的均数差异显著性t t t t检验检验检验检验计算重叠量计算重叠量计算重叠量计算重叠量独立样本t检验公式举例举例计算重叠量n n当样组规模当样组规模当样组规模当样组规模n n
21、 n n越大时，均数之差的标准误就越小。越大时，均数之差的标准误就越小。越大时，均数之差的标准误就越小。越大时，均数之差的标准误就越小。n n如果如果如果如果t t t t检验有显著性差异，还必须求两个分布的重检验有显著性差异，还必须求两个分布的重检验有显著性差异，还必须求两个分布的重检验有显著性差异，还必须求两个分布的重叠量。叠量。叠量。叠量。计算重叠量方法方法方法方法一：一：一：一：A A A A1 1 1 1= = = =失败组失败组失败组失败组中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数A A A A2
22、 2 2 2= = = =成功组成功组成功组成功组中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数中高于成功组测验成绩平均数的人数比率越低，两组差异越大比率越低，两组差异越大比率越低，两组差异越大比率越低，两组差异越大方法方法方法方法二：二：二：二： 计算两组分数分布的共同区域的人数百分比，即两组计算两组分数分布的共同区域的人数百分比，即两组计算两组分数分布的共同区域的人数百分比，即两组计算两组分数分布的共同区域的人数百分比，即两组分数分布的交叉区域的面积。共同区域的百分比越小，分数分布的交叉区域的面积。共同区域的百分比越小，分数分布的交叉区域的
23、面积。共同区域的百分比越小，分数分布的交叉区域的面积。共同区域的百分比越小，两组差异越显著。两组差异越显著。两组差异越显著。两组差异越显著。举例举例返回返回3命中率法 分类决策的正确性分类决策的正确性 举例举例返回返回4功利率法 效度的实用性效度的实用性 U=BU=B（N NS S）C C（N NU U）S S U= U= U= U=功利率功利率功利率功利率 B=B=B=B=录用一个成功的人员所产生的平均利润录用一个成功的人员所产生的平均利润录用一个成功的人员所产生的平均利润录用一个成功的人员所产生的平均利润 N N N NS S S S= = = =录用人员中成功的人数录用人员中成功的人数录
24、用人员中成功的人数录用人员中成功的人数 C=C=C=C=录用一个不合格人员所带来的损失录用一个不合格人员所带来的损失录用一个不合格人员所带来的损失录用一个不合格人员所带来的损失 N N N NU U U U= = = =录用人员中失败的人数录用人员中失败的人数录用人员中失败的人数录用人员中失败的人数 S=S=S=S=实用测验的费用实用测验的费用实用测验的费用实用测验的费用 返回返回三、效标关联效度的应用 n n对个人分数的预测对个人分数的预测n n人员的分类与安置人员的分类与安置 1对个人分数的预测 n n简单直线回归：简单直线回归： n n由直线回归方程转化为以标准分数表示的方程由直线回归方
25、程转化为以标准分数表示的方程 Z ZY Y = = rZrZX X 预测误差 效度系数的平方表示由测验分数能说明的效度系数的平方表示由测验分数能说明的准则测量方差的比例。准则测量方差的比例。 预测误差的标准误预测误差的标准误预测误差计算举例n n某智力测验与数学成绩的相关为某智力测验与数学成绩的相关为0.60，数，数学成绩的标准差为学成绩的标准差为7.0分。如果用智力测验分。如果用智力测验成绩来预测数学成绩，则预测误差的标准成绩来预测数学成绩，则预测误差的标准差为多少？差为多少？ 2人员的分类与安置 根据被试在效标上的预测结果而做出处理根据被试在效标上的预测结果而做出处理或安排。或安排。 选拔
26、（选拔（selection）：拒绝或接受）：拒绝或接受 安置（安置（placement）：根据被试在单一效标）：根据被试在单一效标上的预测结果而做出处理或安排。上的预测结果而做出处理或安排。 分类（分类（classification）：使用两个或两个）：使用两个或两个以上的效标。以上的效标。 返回返回第四节 结构效度 一、结构效度的含义一、结构效度的含义 二、确定结构效度的基本步骤二、确定结构效度的基本步骤 三、搜集结构效度资料的方法三、搜集结构效度资料的方法返回返回一、结构效度的含义 结构效度结构效度（construct validity） 指测验分数在多大程度上测量或解释了某指测验分数在多
27、大程度上测量或解释了某种理论构想。种理论构想。 又译构念效度、构想效度又译构念效度、构想效度返回返回二、确定结构效度的基本步骤 1 1建立理论框架建立理论框架 2 2提出假设提出假设 3 3检验假设检验假设 返回返回三、搜集结构效度资料的方法 1 1测验内方法测验内方法 2 2测验间方法测验间方法3 3效标关联法效标关联法 4 4实验操作法实验操作法 5 5发展水平的变化发展水平的变化 1测验内方法 n n确定测验的内容效度确定测验的内容效度 n n分析被试对项目的反应过程分析被试对项目的反应过程 n n考察测验的同质性考察测验的同质性 2测验间方法 相容效度相容效度 计算新旧同类测验分数之间
28、的相关计算新旧同类测验分数之间的相关区分效度区分效度 计算不同结构的测验之间的相关计算不同结构的测验之间的相关 因素效度因素效度 通过因素分析找到影响测验分数的共同通过因素分析找到影响测验分数的共同因素，每个测验在共同因素上的负荷量即因素，每个测验在共同因素上的负荷量即每个测验与共同因素的相关，称为测验的每个测验与共同因素的相关，称为测验的因素效度因素效度验证智力测验效度的常用方法n n相容效度法，相容效度法，相容效度法，相容效度法，即求测验结果与一种已经标准化的测验结即求测验结果与一种已经标准化的测验结即求测验结果与一种已经标准化的测验结即求测验结果与一种已经标准化的测验结果的相关果的相关果
29、的相关果的相关n n效标关联法，效标关联法，效标关联法，效标关联法，即求测验结果与学生学生学业成绩、教师即求测验结果与学生学生学业成绩、教师即求测验结果与学生学生学业成绩、教师即求测验结果与学生学生学业成绩、教师评定的相关评定的相关评定的相关评定的相关n n发展水平的变化，发展水平的变化，发展水平的变化，发展水平的变化，即整个测验的分数和每个项目的通过即整个测验的分数和每个项目的通过即整个测验的分数和每个项目的通过即整个测验的分数和每个项目的通过率是否随年龄的增长而增加率是否随年龄的增长而增加率是否随年龄的增长而增加率是否随年龄的增长而增加n n项目效度，项目效度，项目效度，项目效度，即计算项
30、目得分与测验总分的相关即计算项目得分与测验总分的相关即计算项目得分与测验总分的相关即计算项目得分与测验总分的相关n n内在一致性系数，内在一致性系数，内在一致性系数，内在一致性系数，即检验测验的同质性即检验测验的同质性即检验测验的同质性即检验测验的同质性 各种效度分析方法的比较多高的效度才算高？ 最低标准：最低标准：最低标准：最低标准： 效度系数在统计上有显著性；效度系数在统计上有显著性；效度系数在统计上有显著性；效度系数在统计上有显著性； 测验的有效性高于现有的决定工具。测验的有效性高于现有的决定工具。测验的有效性高于现有的决定工具。测验的有效性高于现有的决定工具。如果两个测验测量的是同一种
31、心理属性或特质，那如果两个测验测量的是同一种心理属性或特质，那如果两个测验测量的是同一种心理属性或特质，那如果两个测验测量的是同一种心理属性或特质，那么效标关联系数应在么效标关联系数应在么效标关联系数应在么效标关联系数应在0.600.600.600.60以上。以上。以上。以上。 如果两个测验测量的心理属性或特质不完全一样，如果两个测验测量的心理属性或特质不完全一样，如果两个测验测量的心理属性或特质不完全一样，如果两个测验测量的心理属性或特质不完全一样，只是具有一定的相似性，那么，效标关联系数的要只是具有一定的相似性，那么，效标关联系数的要只是具有一定的相似性，那么，效标关联系数的要只是具有一定
32、的相似性，那么，效标关联系数的要求会低一些，能达到求会低一些，能达到求会低一些，能达到求会低一些，能达到0.400.400.400.40以上就算是较好的。如智以上就算是较好的。如智以上就算是较好的。如智以上就算是较好的。如智力测验结果与学业成绩之间的相关。力测验结果与学业成绩之间的相关。力测验结果与学业成绩之间的相关。力测验结果与学业成绩之间的相关。返回返回第五节 提高测量效度的方法一、影响效度的因素一、影响效度的因素二、提高测量效度的方法二、提高测量效度的方法返回返回一、影响效度的因素uu测验本身测验本身测验本身测验本身 项目质量，项目数量项目质量，项目数量项目质量，项目数量项目质量，项目数
33、量 uu测验的实施测验的实施测验的实施测验的实施 测验实施的标准化程度测验实施的标准化程度测验实施的标准化程度测验实施的标准化程度uu被试被试被试被试 身心状态，样本的代表性与异质性身心状态，样本的代表性与异质性身心状态，样本的代表性与异质性身心状态，样本的代表性与异质性uu效标效标效标效标 效标测量的可靠性，与测验分数的关系类型效标测量的可靠性，与测验分数的关系类型效标测量的可靠性，与测验分数的关系类型效标测量的可靠性，与测验分数的关系类型uu测量的信度测量的信度测量的信度测量的信度 信度高是效度高的必要条件信度高是效度高的必要条件信度高是效度高的必要条件信度高是效度高的必要条件返回返回二、
34、提高测量效度的方法n n精心编制测验量表，避免出现较大的系统精心编制测验量表，避免出现较大的系统误差误差n n妥善组织测验，控制随机误差妥善组织测验，控制随机误差n n创设标准的应试情境，让每个被试都能发创设标准的应试情境，让每个被试都能发挥正常的水平挥正常的水平n n增加被试样本的规模，提高代表性增加被试样本的规模，提高代表性n n选好正确的效标，恰当地进行效标测量，选好正确的效标，恰当地进行效标测量，正确地使用有关公式正确地使用有关公式返回返回第六节 效度资料的概化所谓概化，是指在一定条件下得出的结所谓概化，是指在一定条件下得出的结论能否适用于其他情况。测验的效度和论能否适用于其他情况。测
35、验的效度和信度一样，都与特定情境有关，只有在信度一样，都与特定情境有关，只有在具体情境下的效度，而没有笼统谈论某具体情境下的效度，而没有笼统谈论某一测验的效度。一测验的效度。效度的概化效度的概化（validity generation） 在某一情境中所作的效度研究推广到其在某一情境中所作的效度研究推广到其他情境中的过程。他情境中的过程。一、效度概化的几个方面1 预测源的概化n n使用同一测验的不同复本是否同样有效？使用同一测验的不同复本是否同样有效？使用同一测验的不同复本是否同样有效？使用同一测验的不同复本是否同样有效？n n同一测验对不同分数水平的人的预测是否同样有效？同一测验对不同分数水平
36、的人的预测是否同样有效？同一测验对不同分数水平的人的预测是否同样有效？同一测验对不同分数水平的人的预测是否同样有效？2 效标的概化n n采用不同种类或不同时距的效标，测验是否同样有效？采用不同种类或不同时距的效标，测验是否同样有效？采用不同种类或不同时距的效标，测验是否同样有效？采用不同种类或不同时距的效标，测验是否同样有效？n n对于效标的不同分数水平是否预测得一样好？对于效标的不同分数水平是否预测得一样好？对于效标的不同分数水平是否预测得一样好？对于效标的不同分数水平是否预测得一样好？3 施测情境的概化n n不同的施测者、不同的施测条件以及在不同的指导语或心不同的施测者、不同的施测条件以及
37、在不同的指导语或心不同的施测者、不同的施测条件以及在不同的指导语或心不同的施测者、不同的施测条件以及在不同的指导语或心向下做测验是否同样有效？向下做测验是否同样有效？向下做测验是否同样有效？向下做测验是否同样有效？4 被试团体的概化n n测验对于取自同一总体的另一样本是否同样有效？测验对于取自同一总体的另一样本是否同样有效？测验对于取自同一总体的另一样本是否同样有效？测验对于取自同一总体的另一样本是否同样有效？n n测验对于不同性别、不同年龄、不同教育水平、不同测验对于不同性别、不同年龄、不同教育水平、不同测验对于不同性别、不同年龄、不同教育水平、不同测验对于不同性别、不同年龄、不同教育水平、
38、不同社会经济地位、不同地区、不同民族、不同学校、不社会经济地位、不同地区、不同民族、不同学校、不社会经济地位、不同地区、不同民族、不同学校、不社会经济地位、不同地区、不同民族、不同学校、不同职业的被试是否同样有效？同职业的被试是否同样有效？同职业的被试是否同样有效？同职业的被试是否同样有效？5 建立效度方法的概化n n用不同方法得到的效度指标是否一致？用不同方法得到的效度指标是否一致？用不同方法得到的效度指标是否一致？用不同方法得到的效度指标是否一致？n n不同的效度之间是否有矛盾？不同的效度之间是否有矛盾？不同的效度之间是否有矛盾？不同的效度之间是否有矛盾？二、交叉效度分析二、交叉效度分析n
39、 n交叉效度分析交叉效度分析交叉效度分析交叉效度分析是考察效度概化能力的一种方法，只是考察效度概化能力的一种方法，只是考察效度概化能力的一种方法，只是考察效度概化能力的一种方法，只涉及被试样本的概化。这种方法是对两个独立取自涉及被试样本的概化。这种方法是对两个独立取自涉及被试样本的概化。这种方法是对两个独立取自涉及被试样本的概化。这种方法是对两个独立取自同一总体的样本分别建立预测源同一总体的样本分别建立预测源同一总体的样本分别建立预测源同一总体的样本分别建立预测源- - - -效标关系，看从效标关系，看从效标关系，看从效标关系，看从一个样本中得到的效度资料是否适用于另一样本。一个样本中得到的效
40、度资料是否适用于另一样本。一个样本中得到的效度资料是否适用于另一样本。一个样本中得到的效度资料是否适用于另一样本。n n计算测验效度所依据的样本必须与选择项目所依据计算测验效度所依据的样本必须与选择项目所依据计算测验效度所依据的样本必须与选择项目所依据计算测验效度所依据的样本必须与选择项目所依据的被试样本不同。如果使用同一样本，则会使效度的被试样本不同。如果使用同一样本，则会使效度的被试样本不同。如果使用同一样本，则会使效度的被试样本不同。如果使用同一样本，则会使效度系数假性偏高，实质是循环论证。系数假性偏高，实质是循环论证。系数假性偏高，实质是循环论证。系数假性偏高，实质是循环论证。返回返回
