二、效度及其评价方法效度指测量结果的有效程度,它是指测量工具或手段能够准确测出所需测 量的事物的程度,或者说实测结果与所要测查的结果的吻合或一致程度效度 系数是指描述某种测量结果,有效性程度的数量指标,常以相关系数来表示 效度是一个相对概念,是相对于测量目的而言的主观心理测量不可能百分之 百的准确,只能达到一定的准确度效度的种类很多,分类方法也有所不同,内容效度、构想效度、预测效 度、同时效度、区别效度、收敛效度、判别效度等目前被广泛采用的是弗兰 士仃.W. French)和米希尔(B. Michel)提出的分类方法:他们将效度 分为内容效度、结构效度和效标效度内容效度,是指测验的内容对欲测范围 内内容的代表性程度;结构效度(Construct Validity),测量结果与测验的理 论假设之间的一致性程度;效标效度(Criterion-related Validity),指测量 的结果与某种外在效标之间的一致性程度,一般用测验分数与效标之间的相关 系数表示为了规范效度问题的研究与解释,美国心理学会在 1974 年将测量的 效度分为以上三大类,在以下的论述中,我们将使用这个分类体系1、内容效度 是指一个测量实际测到的内容与所要测量的内容之间的吻合程度,也称为 表面效度或逻辑效度。
对内容效度常采用逻辑分析与统计分析相结合的方法进 行评价1)逻辑分析的方法逻辑分析方法的思路是由调研人员或请专家、其他调研人员对测量项目与 原定调查目的的吻合程度做出判断,检验所选择的项目是否“看起来”符合测量 的目的和要求,所设计的题项能否代表所要测量的内容或主题主观性使其不能单独地用来衡量表的效度,但可以用来对观测结果作大致的评价为了获得足够的内容效度,要特别注意设计量表时应遵循的程序和规则2)统计分析法统计分析主要采用单项目与量表总和相关分析法获得评价结果,即计算 每个题项得分与题项总分的相关系数,根据相关性是否显著判断量表是否有 效若量表中有反意题项,应将其逆向处理后再计算总分2、 效标效度效标效度又称为准则效度或预测效度效标效度是根据已经得到确定的某 种理论,选择一种指标或测量工具作为效标(准则),分析量表得分与准则 (效标)间的相关系数即为准则效度系数在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方 法的应用受到一定限制一个好的效标需要符合以下几个条件:(1) 有效性:能够有效测量所要测量的内容;(2) 客观性:效标测量必须客观,避免偏见;(3) 可靠性:效标测量必须稳定可靠;(4) 实用性:在保证有效性的前提下,效标测量必须尽可能简单、省时、 花费少3、 结构效度又称为建构效度或构建效度,是指测量结果体现出来的某种结构与测值之 间的对应程度。
结构效度分析所采用的方法是因子分析最关心的问题是:量 表实际测量的是哪些特征?在评价建构效度时,调研人员要试图解释“量表为什么有效”这一理论问题以及考虑从这一理论问题中能得出什么推论效度的评价 方法有因子分析法和结构方程法因子分析的主要功能是从量表变量(题项)中提取一些公因子,各公因子 分别与某一组特定变量高度关联,这些公因子即代表了量表的基本结构通过 因子分析可以考察量表是否能够测量出研究者设计量表时假设的某种结构在 因子分析的结果中,用于评价结构效度的主要指标有累积贡献率、共同度和因 子负荷累积贡献率反映公因子对量表的累积有效程度,共同度反映由公因子 解释原变量的有效程度,因子负荷反映原变量与某个公因子的相关程度三、效度和信度的关系效度和信度的关系可以下面的图示说明:信度是效度的必要条件而非充分 条件如果量表的信度不足,测量结果不可能有效;如果量表是可信的,测量 结果可能有效,也可能无效;如果测量结果是有效的,则测量的工具必然是可。