《不等同对照组设计》由会员分享,可在线阅读,更多相关《不等同对照组设计(40页珍藏版)》请在金锄头文库上搜索。
1、不等同对照组设计不等同对照组设计Contents:引言、概念及典型案例引言、概念及典型案例一 常见准实验设计类型及案例:常见准实验设计类型及案例:二不等同对照组设计不等同对照组设计1交叉滞后组相关设计交叉滞后组相关设计2回归间断点设计回归间断点设计3间歇时间序列设计间歇时间序列设计42v常见的实验研究分类:基于随机化程度与场地划分常见的实验研究分类:基于随机化程度与场地划分注:注:QEDFR:Quasi-Experimentation Design based Field Research,即基于准实验设计的现场研究即基于准实验设计的现场研究一、引言、概念及典型案例一、引言、概念及典型案例引言
2、:引言:3v单一问卷研究的不足:单一问卷研究的不足:适合探究“相关”;难验证“因果”关系;对“过程”、“机制”揭示的不足;方便样本(handy sample)问题;易引起共同方法变异(common method variance)4v实验室实验的局限性:实验室实验的局限性:实验情境的人为性和代表性问题;外部效度和生态效度;难做到“完全随机”;5v不同研究设计的特征对比:不同研究设计的特征对比:注:注:QEDFR:基于准实验设计的现场研究:基于准实验设计的现场研究6概念概念v现场研究(现场研究(field study):自然状态下和现场):自然状态下和现场情境中人们心理和行为规律的探索研究。情境
3、中人们心理和行为规律的探索研究。时间控制上,可以是长时程的,或纵向研究;被试特征上,嵌入性;研究对象上,自然单元;情境控制上,复杂难控制;取样上,难随机化;7v常用的现场研究手段:常用的现场研究手段:观察:结构化vs.非结构化,参与vs.非参与等;访谈:结构化、半结构化和结构化,个体和群体,焦点群体访谈(focus group),电话访谈等;准实验设计;准实验设计;配对成组的问卷;8Case 1.现场观察:陈鹤琴观察记录节选现场观察:陈鹤琴观察记录节选v第第1月月 第第1星期星期 第第1天天这个小孩子是在1920年12月26日凌晨2点09分生的。生后2秒钟就大哭,一直哭到2点19分,以后就是间
4、断地哭了。生后45分钟,打第一个哈欠。生后2小时44分钟,又打哈欠,以后再打哈欠6次。生后12小时,生殖器已能举起,大概是因为憋尿,随即就小便了。9大便是一种灰黑色的流汁。用手扇他的脸,他的皱眉肌就皱缩起来。用指触他的上唇,上唇就动。打喷嚏两次。眼睛闭着的时候,用灯光照他,眼皮就皱缩。两腿向内弯曲如弓形。头颅是很软的,皮肤带红色,四肢能动。这一天除哭之外,完全是睡眠。10v研究目的:研究目的:OCB的工具性研究的工具性研究v研究程序:一家大的国际银行研究程序:一家大的国际银行升职前3个月问卷测量、升职后3个月再测;有效调查人数333,其中80人(24)升职,直接上级(约1对4)90人;测量:-
5、 对OCB的工具性(instrumentality)认知,升职决策 前测量; - OCB,自己和直接上级均填,升职决定前后两次测.Case 2. Instrumental Values of Organizational Citizenship Behavior for Promotion: A Field Quasi-Experiment- Hui, Lam & Law, 2000; Journal of Applied Psychology11研究目的:研究目的:OCB的工具性研究的工具性研究结果结果v结果:结果:12(1)(自评和领导评)的)(自评和领导评)的OCB都与升职显著相关;都与
6、升职显著相关;(2)工具性认知高(认为)工具性认知高(认为OCB对升职有利)的员工,升对升职有利)的员工,升 职前表现出更多的职前表现出更多的OCB行为;行为;v结论:结论:(3)工具性认知高的员工,升职后)工具性认知高的员工,升职后OCB行为明显下降。行为明显下降。(4)工具性认知高的员工,没有升职的,领导评价的)工具性认知高的员工,没有升职的,领导评价的 OCB行为依然下降;自评的行为依然下降;自评的OCB差异不明显。差异不明显。13v经典现场研究案例:经典现场研究案例:霍桑实验(照明实验、福利实验、群体实验、谈话实验);斯凯伦计划(scanlon plan):参与管理(managemen
7、t by participation)能有效推进变革;(Lewin)领导风格理论:民主型风格好于放任自流型领导和专制型领导;马斯洛需求层次理论的提出;14经典书目:Cook, T. D., Campbell, D. T. Quasi-Experimentation: Design and Analysis for Field Settings M. Boston: Houghton Mifflin, 1979.Cook和Campbell(1966)讨论效度问题时首次提出;不需要随机化程序(与实验或真实验最大的区别)不需要随机化程序(与实验或真实验最大的区别);能有效解决生态效度和外部效度问题;
8、现场研究中采用最多的是准实验设计,不过准实验并不一定都在现场进行。v准实验设计(准实验设计(quasi-experimentation design)15二、常见的准实验设计二、常见的准实验设计1、不等同对照组设计(、不等同对照组设计(nonequivalent control group design)2、交叉滞后组相关设计(、交叉滞后组相关设计(cross-lagged panel correlational design)3、回归间断点设计(、回归间断点设计(regression-discontinuity design)4、间歇时间序列设计(、间歇时间序列设计(interrupted
9、time series design) 161、不等同对照组设计、不等同对照组设计v“不等同不等同”:参加研究的各组之间至少有一种特征不:参加研究的各组之间至少有一种特征不相同,不等同的程度,应通过事先测量检查被试选相同,不等同的程度,应通过事先测量检查被试选择过程的随机化程度来确定。择过程的随机化程度来确定。对照组、事前对照组、事前-事后测量事后测量经典范式:经典范式:A.实验组:O1A X O2A B.对照组:O1B O2B 注:O为观测值,X为实验处理. 17Case:薪酬与绩效的关系研究(不等同对照组设计):薪酬与绩效的关系研究(不等同对照组设计)v自变量:薪酬制度(团队薪酬、计件薪酬
10、)自变量:薪酬制度(团队薪酬、计件薪酬)v因变量:工作绩效因变量:工作绩效v程序:选择同地区两家制衣公司的生产车间作为实验组程序:选择同地区两家制衣公司的生产车间作为实验组(78人人,有有5个生产班组个生产班组)和对照组和对照组(63人人,有有4个生产班组个生产班组); 过去一直采用的是计件薪酬制度,为了证明团队薪酬的合理过去一直采用的是计件薪酬制度,为了证明团队薪酬的合理性,即根据某个班组的产量作为支付薪酬的依据,研究者对性,即根据某个班组的产量作为支付薪酬的依据,研究者对实验组的薪酬方式改成为团队薪酬方案;实验组的薪酬方式改成为团队薪酬方案; 每个员工的底薪不变,所在班组的产量超过同期每个
11、员工的底薪不变,所在班组的产量超过同期120%的的月产量的话,每超过一个百分点,所在班组将会获得月产量的话,每超过一个百分点,所在班组将会获得1000元奖励,以平均分配的方式发给组员。在团队薪酬政策推出元奖励,以平均分配的方式发给组员。在团队薪酬政策推出以前,研究者对实验组和对照组进行了事先测量。事先测量以前,研究者对实验组和对照组进行了事先测量。事先测量的数据是的数据是X年员工的个人产量。年员工的个人产量。18研究结果:研究结果:薪酬制度与员工绩效的关系研究(不等同对照组设计)薪酬制度与员工绩效的关系研究(不等同对照组设计)19 A组组 R O1A O2A B组组 R O1B O2B C组组
12、 R O2C D组组 R O2D时时 间间AB 实验处理效应实验处理效应AC 前测验的效应前测验的效应BD 前测验的效应前测验的效应AD 前测验与处理前测验与处理 的联合效应的联合效应考虑比较周全的不等同对照组设计(所罗门设计)已接近(真)实验设计20v操作建议:操作建议:尽量使得两组“同质”;谨防历史因素影响;严格控制外源变量;注意受试者的内在变化。21v我们对相同的两个变量进行重复测量时,实际上提供了我们对相同的两个变量进行重复测量时,实际上提供了有关这两个变量之间关系的某种信息;有关这两个变量之间关系的某种信息;2、交叉滞后组相关设计、交叉滞后组相关设计v在在T1时间对两个变量的关系作出
13、测定和相关分析,再在时间对两个变量的关系作出测定和相关分析,再在T2时间作相似的测定和分析;时间作相似的测定和分析;v三个基本假设三个基本假设:(:(1)因果关系不随时间的推移而变化;因果关系不随时间的推移而变化;(2)同步相关和稳定相关尽可能一致,如果出现不一)同步相关和稳定相关尽可能一致,如果出现不一致,应有合理的解释;(致,应有合理的解释;(3)交叉滞后组相关中包含了)交叉滞后组相关中包含了主要变量,并已作出相应的测量。主要变量,并已作出相应的测量。v属于纵向研究;属于纵向研究;22交叉滞后组相关设计图0.80.80.50.5A1A2B1B20.60.450.80.8 0.5A3B30.
14、60.45rA1B1、rA2B2为同步相关系数;为同步相关系数; rA1A2、rB1B2为稳定系数,重测信度;为稳定系数,重测信度;在同步相关稳定的情况下,若在同步相关稳定的情况下,若rA1B2rA2B1,则,则A引起引起B,反之则,反之则B引起引起A23 Eron等(等(1972)儿童观看暴力电影与攻击性)儿童观看暴力电影与攻击性行为之间的关系研究(行为之间的关系研究(10年的时间跨度):年的时间跨度):以三年级儿童为对象,10年后重新测量;得出了“儿童早期生活中观看暴力或凶杀片,会强化成年期的攻击性行为”的结论。Case 1:24 图:社交自我知觉与孤独感的交叉滞后回归分析图:社交自我知觉
15、与孤独感的交叉滞后回归分析(周宗奎等(周宗奎等,2006;儿童的同伴交往与孤独感;儿童的同伴交往与孤独感:一项一项2年纵向研究,年纵向研究,心理学报心理学报)Case 2:25Case 3: 图:前后测学习适应不良与学习成绩的交叉预测图:前后测学习适应不良与学习成绩的交叉预测(陈会昌等(陈会昌等,2001;对学生学习成绩与社会行为的交叉滞后分析,;对学生学习成绩与社会行为的交叉滞后分析,心理学报心理学报)26操作建议:操作建议:v实际研究中,同步系数和稳定系数较难保持稳定,实际研究中,同步系数和稳定系数较难保持稳定,对该系数的变化应有所解释,并对研究对该系数的变化应有所解释,并对研究“因果关因
16、果关系系”的解释要持谨慎态度;的解释要持谨慎态度;v可以得出可以得出“因果关系因果关系”结论,但并不能完全证明结论,但并不能完全证明因果,因此,结合其它研究手段的进一步论证更因果,因此,结合其它研究手段的进一步论证更加有意义。加有意义。27回归间断点设计实验处理时间1234567回归3、回归间断点设计、回归间断点设计28v通过实验处理与事后测量回归线的间断点的特征,通过实验处理与事后测量回归线的间断点的特征,来确定实验处理的主效应;来确定实验处理的主效应;v如果实验处理有效,那么处理前后所做测量的回如果实验处理有效,那么处理前后所做测量的回归线就会出现间断点;归线就会出现间断点;v优点:不需对
17、被试做复杂的编组或匹配;优点:不需对被试做复杂的编组或匹配;v局限:但在间断点不明显时,结果较难解释。局限:但在间断点不明显时,结果较难解释。29vCase1:奖励对工作绩效的影响研究:奖励对工作绩效的影响研究v程序:用等距量表对奖励前工作绩效进行测量,程序:用等距量表对奖励前工作绩效进行测量,做回归分析,然后实施奖励措施,之后再对工作做回归分析,然后实施奖励措施,之后再对工作绩效进行测量并做回归分析;绩效进行测量并做回归分析;v分析:比较奖励前后回归线的变化。分析:比较奖励前后回归线的变化。30Case 2: 图:组织冗余图:组织冗余(slack)对绩效的回归曲线对绩效的回归曲线蒋春燕,赵曙
18、明蒋春燕,赵曙明.(2004).组织冗余与绩效的关系:中国上市公司组织冗余与绩效的关系:中国上市公司的时间序列实证研究的时间序列实证研究. 管理世界管理世界.314、间歇时间序列设计、间歇时间序列设计v对变量的变化采取多次测量,以更为精确地刻画自对变量的变化采取多次测量,以更为精确地刻画自变量引起的效应变化程度和时间跨度;变量引起的效应变化程度和时间跨度;v在实验处理前后的一段时间内对研究对象作出多次在实验处理前后的一段时间内对研究对象作出多次重复观测,并通过对整个时间序列的测定结果的比重复观测,并通过对整个时间序列的测定结果的比较,确定实验处理的效果;较,确定实验处理的效果;v对测量的频次要
19、求比较高;对测量的频次要求比较高;v优点:能在实验处理以前评估被试的成熟趋势,并优点:能在实验处理以前评估被试的成熟趋势,并在较长时间跨度上检查自变量与因变量之间的关系,在较长时间跨度上检查自变量与因变量之间的关系,有利于做出更肯定的因果判断。有利于做出更肯定的因果判断。32时间时间O1 O2 O3 On On+1 On+2 On+3 On+mO:观察:观察 :实验处理:实验处理O1 O2 O3 On On+1 On+2 On+3 On+m123456间间歇歇时时间间序序列列设设计计33Case:薪酬制度与员工绩效的关系研究薪酬制度与员工绩效的关系研究: 间歇时间序列设计间歇时间序列设计34变
20、式变式1 伴有无处理控制组的时间序列设计伴有无处理控制组的时间序列设计O1 O2 O3 On On+1 On+2 On+3 On+mO1 O2 O3 On On+1 On+2 On+3 On+m35变式变式2 伴有撤除处理的时间序列设计伴有撤除处理的时间序列设计O1 O2 O3 On On+1 On+2 On+3 On+m On+m+1 On+m+2 On+m+3 On+m +k36v操作建议:操作建议:注意周期性因素的影响,如季节、情绪等的变化;注意周期性因素的影响,如季节、情绪等的变化;尽量使被试保持稳定,防止被试更换或淘汰的情况发尽量使被试保持稳定,防止被试更换或淘汰的情况发生;生;不要只看到实验处理相邻的前后两次观测值的差异;不要只看到实验处理相邻的前后两次观测值的差异;可采用自回归整合移动平均模型(可采用自回归整合移动平均模型(ARIMA)进行统)进行统计。计。37总结:总结:1什么是现场研究、什么是准实验设计?准实验设计与实验设计的区别是什么?2常见的准实验设计包括哪些?3什么是时间序列设计?38有梦想,就有未来!有梦想,就有未来! 39结束结束