《第四章人员测评系统的构建与效度信度检验》由会员分享，可在线阅读，更多相关《第四章人员测评系统的构建与效度信度检验（52页珍藏版）》请在金锄头文库上搜索。
1、第四章 人员测评系统的构建与效度信度检验本章内容人员测评系统的构建与人员测评系统的构建与效度信度检验效度信度检验1、测评系统的构成、测评系统的构成2、测评的效度、测评的效度3、测评的信度、测评的信度4、信度与效度的关系及、信度与效度的关系及提升策略提升策略一、测评系统的构成人员测评过程：测评考官根据岗位需要，运人员测评过程：测评考官根据岗位需要，运用测评工具对被测人员施以刺激，被测人用测评工具对被测人员施以刺激，被测人员对此刺激做出反应，测评考官对被测人员对此刺激做出反应，测评考官对被测人员的反应情况进行度量与评价。员的反应情况进行度量与评价。测评考官测评考官测评工具测评工具被测人员被测人员测
2、评考官测评体系的主体，是决定人员测评能否成功测评体系的主体，是决定人员测评能否成功的关键要素。的关键要素。在我国，测评考官分三类：在我国，测评考官分三类：具有人员测评专门知识的专门人士（咨询具有人员测评专门知识的专门人士（咨询师、高校教师、研究人员）师、高校教师、研究人员）从事人力资源管理实务的专业人士（从事人力资源管理实务的专业人士（HR）人员使用部门的资深人士（主管或骨干）人员使用部门的资深人士（主管或骨干）测评考官应具备的基本素质：测评考官应具备的基本素质：良好的个人品格和道德修养良好的个人品格和道德修养测评组织方面的知识（程序公平）和与测测评组织方面的知识（程序公平）和与测评内容相关的
3、知识（评分公平）评内容相关的知识（评分公平）测评技巧（无领导小组讨论中的座位摆放，测评技巧（无领导小组讨论中的座位摆放，面试中随机场景的设置等）面试中随机场景的设置等）工作经验和社会经验（经验直觉判断）工作经验和社会经验（经验直觉判断）测评工具与方法能力测验（一般能力、特殊能力）能力测验（一般能力、特殊能力）成就测验（知识测验、工作样本测试）成就测验（知识测验、工作样本测试）人格量表（自陈式量表）人格量表（自陈式量表）面试（结构化、非结构化）面试（结构化、非结构化）评价中心（针对管理者）评价中心（针对管理者）书面信息分析（申请表、履历表、人事档书面信息分析（申请表、履历表、人事档案、推荐信）案
4、、推荐信）测评客体被测人员测评焦虑测评焦虑测评前训练：测评前训练： 针对测评的项目做大量的强化练习针对测评的项目做大量的强化练习 适应性训练适应性训练 认识技能训练认识技能训练要实现人要实现人职匹配，就要对其全过程进行监职匹配，就要对其全过程进行监控，监控的依据和标准主要是测评的效度控，监控的依据和标准主要是测评的效度和信度和信度二、 测量的信度 一、信度一、信度( reliability)（一）信度的概念：（一）信度的概念：是测量结果的一致性是测量结果的一致性( consistency)或者稳定性或者稳定性( stability)程度，程度，也就是研究者对相同或者相似的测量对象也就是研究者对
5、相同或者相似的测量对象进行不同形式或不同时间的测量所得结果进行不同形式或不同时间的测量所得结果的一致性程度。的一致性程度。在测量理论中，信度是指一组测验分数的在测量理论中，信度是指一组测验分数的真变异数与总变异数的比率。在实际应用真变异数与总变异数的比率。在实际应用中，它通常以同一样本所得的两组资料的中，它通常以同一样本所得的两组资料的相关作为测量一致性的指标。相关作为测量一致性的指标。 信度能够回答测量工具是否稳定信度能够回答测量工具是否稳定;测量结果测量结果是否可以推论，也就是概化能力，即从一是否可以推论，也就是概化能力，即从一次测量来推论总体的次测量来推论总体的正确程度正确程度。 我们可
6、以举例说明信度的问题：如果想知道我们可以举例说明信度的问题：如果想知道某人的体重，我们可以叫两个人来估计，一某人的体重，我们可以叫两个人来估计，一个人的估计为个人的估计为150镑，另一个人的估计为镑，另一个人的估计为300镑，那么我们就可以认为，叫别人来估计体镑，那么我们就可以认为，叫别人来估计体重是非常不可信的方法。如果用磅秤重是非常不可信的方法。如果用磅秤 ，连续，连续测量两次的结果都是相同的，因而我们可以测量两次的结果都是相同的，因而我们可以说，在测量体重方面，用磅秤的方法要比叫说，在测量体重方面，用磅秤的方法要比叫人来估计更可信。人来估计更可信。例:如果想知道一个人的智商，首先我们请对
7、这个如果想知道一个人的智商，首先我们请对这个人熟悉的两个老师来估计，一个人的估计为人熟悉的两个老师来估计，一个人的估计为110110，另一个人的估计为另一个人的估计为150150，显然，这种巨大的差距说，显然，这种巨大的差距说明叫人来估计智商是非常不可信的方法明叫人来估计智商是非常不可信的方法。但是，用智力测量量表，连续测量两次的结果差但是，用智力测量量表，连续测量两次的结果差别却很小。别却很小。因而我们可以说，在测量智商方面，用智力测量因而我们可以说，在测量智商方面，用智力测量量表的方法要比叫人来估计具有更高的信度。在量表的方法要比叫人来估计具有更高的信度。在人员测评的过程中，人员测评的过程
8、中， 应该选择具有较高信度的测应该选择具有较高信度的测量工具，这样才能保证测量结果的可靠性。量工具，这样才能保证测量结果的可靠性。信度信度-就是对随机误差的一种测量就是对随机误差的一种测量，随机误差决，随机误差决定了信度的高低。定了信度的高低。（二）信度的种类 由于误差来源的不同，对信度的测量也有不同由于误差来源的不同，对信度的测量也有不同的方法。具体有以下的方法。具体有以下三三种不同的信度类型和相种不同的信度类型和相应的评估方法应的评估方法 。1.再测信度再测信度( testretest reliability) （与时间有关）（与时间有关）又称为又称为稳定性系数稳定性系数，它是指对同样的一
9、个测验在不同，它是指对同样的一个测验在不同的时间对相同的群的时间对相同的群 体测量两次，这两次测量的分数体测量两次，这两次测量的分数的相关系数就是再测信度。的相关系数就是再测信度。我们通过再测信度的相关系数可以了解测量结果在经我们通过再测信度的相关系数可以了解测量结果在经过一段时间后的稳定程度。过一段时间后的稳定程度。 再测信度的两次测评使用的是同一个测评工再测信度的两次测评使用的是同一个测评工具，同一种测评方式，但较难把握的是两具，同一种测评方式，但较难把握的是两次测评间隔的时间长短。次测评间隔的时间长短。时间间隔过长，被测者特征将随时间的增加而时间间隔过长，被测者特征将随时间的增加而发展变
10、化，由此计算的稳定系数将失去意义；发展变化，由此计算的稳定系数将失去意义；若时间间隔过短，又可能产生记忆与练习效应，若时间间隔过短，又可能产生记忆与练习效应，这也将影响稳定系这也将影响稳定系数。数。 2.与测评内容有关的信度与测评内容有关的信度 l单个项目的信度单个项目的信度l组成信度组成信度l内部一致性信度（内部一致性信度（主要关注的是测验内部题目主要关注的是测验内部题目之间的关系。它所考虑的问题是一个测量工具之间的关系。它所考虑的问题是一个测量工具所有的维度测量的均一性所有的维度测量的均一性）l折半信度（折半信度（将一份测验按照一定的方法分成尽将一份测验按照一定的方法分成尽可能平行的两个半
11、份测验可能平行的两个半份测验 (例如按照奇偶分半例如按照奇偶分半) ，然后计算两半之间的相关，得到的相关系数，然后计算两半之间的相关，得到的相关系数即为即为折折半信度系数半信度系数）l复本信度复本信度 3.与评分者有关的评分者信度与评分者有关的评分者信度相关系数法（随机抽取若干份答卷，有两相关系数法（随机抽取若干份答卷，有两个以上独立的评分者打分，再求每份答卷个以上独立的评分者打分，再求每份答卷两个评判分数的相关系数）两个评判分数的相关系数）概化系数和可靠性系数（相对误差概化系数和可靠性系数（相对误差概化系概化系数数常模参照测评，绝对误差常模参照测评，绝对误差可靠性系数可靠性系数标准参照测评）
12、标准参照测评）（三）影响信度的因素 1.被试者的特征被试者的特征被试者的特征对信度的影响主要表现在被试被试者的特征对信度的影响主要表现在被试者在测量属性方面的个体差异上。者在测量属性方面的个体差异上。如果一种测量工具对某种属性的测量得分的如果一种测量工具对某种属性的测量得分的差别幅度越大，那么该测量工具能区别开差别幅度越大，那么该测量工具能区别开被测量的个体，因而我们说该测量工具有被测量的个体，因而我们说该测量工具有较好的信度较好的信度; ;个体之间被测量的特征或者属个体之间被测量的特征或者属性差别差异很小，那么很难进行可靠的测性差别差异很小，那么很难进行可靠的测量，测验信度可能会很低。量，测
13、验信度可能会很低。 2.测验的长度和难度一般来说，测量分数分布越广，信度系数一般来说，测量分数分布越广，信度系数就相对越高。这就好比让你来就相对越高。这就好比让你来 速记一组数速记一组数字，随着让你观察这组数字的时间的延长，字，随着让你观察这组数字的时间的延长，你会发现你能够描述的数字的准确性和详你会发现你能够描述的数字的准确性和详细程度也在不断提高。细程度也在不断提高。一个给定的测验，当增加测验的长度并且一个给定的测验，当增加测验的长度并且相应地延长测验的时间的时候，也会发生相应地延长测验的时间的时候，也会发生上述类似的效果。上述类似的效果。 3.不同信度测验方法的选择不同信度测验方法的选择
14、 前面我们可以看到，不同的信度测量方法前面我们可以看到，不同的信度测量方法处理测量误差的方式都不同，处理测量误差的方式都不同， 这样在我们这样在我们估计信度的过程中对不同方法的选择就会估计信度的过程中对不同方法的选择就会产生不同的估计值。有产生不同的估计值。有 些方法倾向于对信些方法倾向于对信度范围做上限估计，有些倾向于做下限估度范围做上限估计，有些倾向于做下限估计，这样针对不计，这样针对不 同特点的测验我们要学会同特点的测验我们要学会选择估计方法。选择估计方法。 4.测验过程中的误差测验过程中的误差 测试现场因为照明、背景音乐、温度、噪声、测试现场因为照明、背景音乐、温度、噪声、通风、桌椅和
15、空间不符合人体工程学等原因导通风、桌椅和空间不符合人体工程学等原因导致被试精神和身体状况的不适，致被试精神和身体状况的不适，或者被试由于不熟悉答题的样式，答题经验的或者被试由于不熟悉答题的样式，答题经验的不足或者不足或者生病等突发状况的发生，都会导致测量的误差。生病等突发状况的发生，都会导致测量的误差。 三、 测量的效度 （一）效度的含义和特性（一）效度的含义和特性 效度（效度（Validity）即有效性，它是指测量工具或）即有效性，它是指测量工具或手段能够准确测出所需测量的某素质特征的程手段能够准确测出所需测量的某素质特征的程度。度。效度是指所测量到的结果反映所想要考察内容效度是指所测量到的
16、结果反映所想要考察内容的程度，测量结果与要考察的内容越吻合，则的程度，测量结果与要考察的内容越吻合，则效度越高；反之，则效度越低。效度越高；反之，则效度越低。或者简单地说是指一个测验的准确性、有用性。或者简单地说是指一个测验的准确性、有用性。 l如果我们用体重秤来测身高，显然这种测如果我们用体重秤来测身高，显然这种测量工具的选择是不正确的，量工具的选择是不正确的， 所以说这个测所以说这个测量工具没有效度。量工具没有效度。l测评过程：测评工具的研制、计分和指导测评过程：测评工具的研制、计分和指导语的标准化、被试作答反应、主试或评分语的标准化、被试作答反应、主试或评分者、测验的实施、数据整理、统计分析、者、测验的实施、数据整理、统计分析、结果的解释。每一步都要保证其科学性和结果的解释。每一步都要保证其科学性和准确性，这样才能保证测量的结果和结论准确性，这样才能保证测量的结果和结论是有效而正确的是有效而正确的。 效度的性质效度的性质1.效度具有相对性效度具有相对性 任何测验的效度是对一定的目标来说的，或者任何测验的效度是对一定的目标来说的，或者说测验只有用于与测验目标一致的目的和场合才说测验
