《评价研究设计》由会员分享，可在线阅读，更多相关《评价研究设计（40页珍藏版）》请在金锄头文库上搜索。
1、 评价研究设计评价研究设计更倘虐其蚌尿耳量馒拼蚕亩沫幂寨臣编证衣往葬靡佑叛剂炬蛹镶峦云树向评价研究设计评价研究设计实验的分类实验的分类实验实验物理学研究物理学研究化学化学动物实验动物实验实验的长处和不足实验的长处和不足类实验类实验无法完全控制实验条件无法完全控制实验条件训严啄陋港慌褒禁驱阶欣梨庸婆晾骸盂肃苔碰痈殴捌宋碟锈堑蚕些清楔黍评价研究设计评价研究设计研究的两个效度研究的两个效度内部效度内部效度针对于本研究的对象，研究结果的真实度针对于本研究的对象，研究结果的真实度外部效度外部效度 研究的结果在多大程度上能推论（广）研究的结果在多大程度上能推论（广）到其他地方到其他地方胶呐贿阂氯陶挟滔譬瓜
2、淖类瞥亿蚂畴沁枣咏吠嘶拱男肃惊舵寻介翌雪修厕评价研究设计评价研究设计实验、类实验与两个效度实验、类实验与两个效度实验实验内部效度高，外部效度低内部效度高，外部效度低类实验类实验内部效度要打折，而外部效度高内部效度要打折，而外部效度高仅之庚枪雨蟹礁顶谋孤陕秩籍缨陋胜肛沿旁屡孽薛惊邻赎禽楞包钟楔从想评价研究设计评价研究设计项目（干预）成功的两个基本条件项目（干预）成功的两个基本条件1、有效的项目设计、有效的项目设计即：如果项目干预方案得到完全的实施，那即：如果项目干预方案得到完全的实施，那么，项目的目标就能实现，项目所要解决的么，项目的目标就能实现，项目所要解决的问题就能解决问题就能解决2、项目实
3、施、项目实施即：项目的方案得以按质、按量地实施、完即：项目的方案得以按质、按量地实施、完成成二者缺一不可二者缺一不可撮辨乐您甜益孽驳毯棱蘑刃球伞湍稽触兆册俯狠灾液楼纶绢旦猾队队招噶评价研究设计评价研究设计项目失败项目失败错误的项目设计有效的项目设计有效的项目设计不好的项目实施很好的项目实施项目成功项目失败很好的项目实施项目失败项目理论失败项目理论失败项目实施失败项目实施失败启商窒耽簿莉偿山镭努疤癣晤烙倪堕雷胞伞滁侣雾嗜蔼域盗知姜臂水弛们评价研究设计评价研究设计项目理论项目理论建立项目理论、进行有效干预建立项目理论、进行有效干预 基于项目理论、进行项目评价基于项目理论、进行项目评价 掇裂贬是恼兽
4、蹋搅芯蛇蓬芯滚寓践羽伊盛窒泊蜂亚玲浚涣借诛依循划屋粗评价研究设计评价研究设计项目理论的例子项目理论的例子60年代美国卫生部关注婴儿死亡率和婴儿智力低下，年代美国卫生部关注婴儿死亡率和婴儿智力低下， 拨经费开展干预项目拨经费开展干预项目前提假设前提假设婴儿死亡率及智力低下与低体重儿（早产）相关婴儿死亡率及智力低下与低体重儿（早产）相关低体重儿与孕妇孕期未及时治疗疾病和营养不良相关低体重儿与孕妇孕期未及时治疗疾病和营养不良相关这种情况可在某些人群中发现，如未成年怀孕，这种情况可在某些人群中发现，如未成年怀孕，35的的孕妇，多产孕妇，有早产史，或收入低下的家庭孕妇，多产孕妇，有早产史，或收入低下的家
5、庭基于上述相关关系。建立项目理论基于上述相关关系。建立项目理论如果找到高危母亲如果找到高危母亲如果能让她们参加项目如果能让她们参加项目如果能将针对这些因素服务有效地提供给她们如果能将针对这些因素服务有效地提供给她们那么，就能降低早产出生率那么，就能降低早产出生率那么，就可以降低婴儿死亡率和智力低下那么，就可以降低婴儿死亡率和智力低下薯下究烤菏马啄以聂望犬樱吕娥各猎群哇婴竖症囊睛剿哄审原忠砧樱涤忱评价研究设计评价研究设计社会问题及干预社会问题及干预社会问题社会问题贫穷贫穷疾病疾病失业失业犯罪犯罪项目干预设项目干预设计计需求评估需求评估项目设计项目设计项目评估项目评估项目实施项目实施项目项目产出产
6、出项目效果过程过程评价评价瘩火捐辊景削耀炊钠伍积驳舱牧代行汽豪肉累钩纯学帖躬晦陕涵惜想贵锨评价研究设计评价研究设计项目评价的基本问题项目评价的基本问题鉴定的问题鉴定的问题项目设计项目设计项目实施项目实施项目产出项目产出项目效果项目效果？1.是问题吗？问题有多严重、范围有多大、影响谁？是问题吗？问题有多严重、范围有多大、影响谁？需求评估需求评估2.项目设计有效吗？项目设计有效吗？项目论证（对设计进行评估）项目论证（对设计进行评估）3.项目执行了吗？项目执行了吗？实施评估（过程评估）实施评估（过程评估）4.项目有效果吗？项目效果评估项目有效果吗？项目效果评估5.项目干预值得吗？项目干预值得吗？ 成
7、本成本-效果分析效果分析胶决议褥桩农溢傀颜场拾掖爽旁在柯楞子天次梦释斜氦岁轴详筒喇告甫用评价研究设计评价研究设计评价设计思路评价设计思路评价设计思路评价设计思路项目设计项目设计项目实施项目实施项目产出项目产出问题问题效果评价：项目解决了问题了吗效果评价：项目解决了问题了吗需求评估需求评估方案论证方案论证实施的评价实施的评价媳税戊护论牟门垦倚耶殊芹蛛蹲敲荷墙梯茅呼镊拱涸刷外愉告台圈更赦俩评价研究设计评价研究设计京遣绥拌果社氯厩疮氧迷格芹笔蛹轨庐习中件尸路贷炔穗蚁矣阮义千套淫评价研究设计评价研究设计评价研究的目的评价研究的目的评价研究的目的是评价研究的目的是检验新的做法是否被实施检验新的做法是否被
8、实施如果被实施，效果如何？如果被实施，效果如何？目标人群是否收益？目标人群是否收益？项目的效果是否可持续？项目的效果是否可持续？如何进一步改进、完善如何进一步改进、完善汾祟矛筑捶啥雄严元骂膊戍径拇席嗜雷藩思痰甥驶欧芥莎辜堑漱宙鹿如跟评价研究设计评价研究设计评价的类型评价的类型过程评价过程评价效果评价效果评价频卸羚雄抗珐拍楷予栖阅汛粘爹阉求毋炭廓剪沮岳罢轮嚼掘纷背口环锐嚣评价研究设计评价研究设计基本评价设计基本评价设计1、前后比较、前后比较1、 O X O2、干预组与对照组比较、干预组与对照组比较2.1、 X O O2.2、 O X O O O3. 时间序列分析时间序列分析3.1. O1 O2
9、O3 X O4 O5 O63.2. O1 O2 O3 X O4 O5 O6 3.3. O1 O2 O3 O4 O5 O6士筋狮屉玲痪孪访椭认冲吮市枕楔幌宣梳篙院芍老间王厉膜航漾砂栋遏琢评价研究设计评价研究设计效果评价的任务效果评价的任务如何估计完全是由于项目干预所如何估计完全是由于项目干预所带来的效果？带来的效果？滑硬娶渠斗惊赫程桩寡妮巢哀阂贞追恨双烦煽作裙俗岳碎吠囱晦扁队唯才评价研究设计评价研究设计项目净效益项目净效益1 2 项目效益Y= 项目后(yepre ) 项目前（yepost ）=1对照组的变化(yc ) = 项目后(ycpre )_项目前（ycpost ） =2项目组的变化(ye
10、) = 项目后(yepre )_项目前（yepost ）=1项目净效益 = 2 1项目前项目后Y利用回归模型控制混杂因素，估算项目效益项目干预项目干预组对照组躬掩尹弘捧庞表蒙儿驯茄剁荆诚暴契源柏突洛钠粘皱鹊告卷呼绣诈桂予紊评价研究设计评价研究设计变量的分类变量的分类项目目标变量、干预变量、控制变量项目目标变量、干预变量、控制变量1.因变量因变量Y：早产儿出生率早产儿出生率婴儿死亡率，智力低下婴儿死亡率，智力低下2.干预变量干预变量X：针对各种因素的服务干预：针对各种因素的服务干预参加项目（是，参加项目（是， 否）否）3.控制变量控制变量年龄、教育、性别年龄、教育、性别当地经济增长当地经济增长交
11、通交通镑枫筛释龟渍陕嗜揍俏徽晌嫉谁盾惺员氖臆孝帛涩的迂程鄙遮彼讳郎蒲钾评价研究设计评价研究设计利益相关者评价方法利益相关者评价方法确定利益相关者确定利益相关者澄清利益相关者的关注点澄清利益相关者的关注点定义评价研究所要问答的问题定义评价研究所要问答的问题 （研究课题）（研究课题）如何回答评价研究所要回答的问题如何回答评价研究所要回答的问题选择指标选择指标选择评价设计选择评价设计数据分析方案数据分析方案田壕瘸沦杨姑颤诬嘴为羚狰劈欢愿哗挂暮司葡胶胜级熙蛀绸验狞恿屋拥素评价研究设计评价研究设计利益相关者评价方法的评价步骤利益相关者评价方法的评价步骤1. 确定利益相关者确定利益相关者2. 澄清利益相关
12、者澄清利益相关者的关注点的关注点3. 定义评价研究所定义评价研究所要问答的问题（研要问答的问题（研究课题）究课题）4. 如何回答评价研如何回答评价研究所要回答的问题究所要回答的问题a. 选择指标选择指标b. 选择评价设计选择评价设计c. 数据分析方案数据分析方案d. 数据收集方案数据收集方案5. 过程评价过程评价澄清项目理论澄清项目理论澄清项目干预关键澄清项目干预关键流程流程按照干预流程，检按照干预流程，检查干预的实施查干预的实施评价目标人群是否评价目标人群是否得到干预服务得到干预服务6. 项目效果评价项目效果评价7. 撰写项目评价报告撰写项目评价报告8. 报告的散发报告的散发绍洽克涪珠蚤砚罗
13、拭嫂墨讹誓妓搜咳憾阅像群蛊牟休罕敷烘枝延络劲电剿评价研究设计评价研究设计利益相关者及其关注点和评价课题利益相关者及其关注点和评价课题利益相关者利益相关者 关注关注 评价命题评价命题 农民农民 能否看得起病？能否看得起病？ 能不能看好病能不能看好病 项目合作医疗是否会降低农民项目合作医疗是否会降低农民看病的费看病的费用？ 合作医疗对服务的质量是否合作医疗对服务的质量是否有所改进？有所改进？ 卫生局、卫生局、政府政府 农村卫生服务的改进农村卫生服务的改进 服务的利用服务的利用 有哪些新服务开展？有哪些新服务开展？ 服务的质量高吗？服务的质量高吗？ 谁利用卫生服务？谁利用卫生服务？ 服务成本效益吗？
14、服务成本效益吗？- 怒从挛蔗桓委臭染蛊葫度和霸玖砒痊千帽创廖捌侵懊印趟老昼垃肄镊促德评价研究设计评价研究设计讨论题讨论题中关村地区高血压患病率较高，当地中关村地区高血压患病率较高，当地卫生部门拟开展试点，寻求有效的、卫生部门拟开展试点，寻求有效的、经济的可持续的高血压干预方法，以经济的可持续的高血压干预方法，以便在面上推广应用。便在面上推广应用。1、你如何设计干预试点项目，请列出、你如何设计干预试点项目，请列出步骤及每一步骤期望的结果；步骤及每一步骤期望的结果；2、你如何设计试点评价方案，请列出、你如何设计试点评价方案，请列出步骤及每一步骤期望的结果。步骤及每一步骤期望的结果。狸眯严订世乙即寅
15、希眶聘寡翠播面寸铅逞傅谗稳诀辆缮怀楷末习琵揩联萨评价研究设计评价研究设计利益相关者评价方法利益相关者评价方法确定利益相关者确定利益相关者澄清利益相关者的关注点澄清利益相关者的关注点定义评价研究所要问答的问题定义评价研究所要问答的问题 （研究课题）（研究课题）如何回答评价研究所要回答的问题如何回答评价研究所要回答的问题选择指标选择指标选择评价设计选择评价设计数据分析方案数据分析方案釜崭绰椭痔疮涌搽曹渭峻瓜忽址喧绵猩肆酒践马钉州坏再表骄贫宜壮肯汀评价研究设计评价研究设计利益相关者及其关注点和评价课题利益相关者及其关注点和评价课题兹剿射类巾性汛内社嫉脏较姨明扩泣帛惨硷浅纺靡茫擂彰禽芬淳答钳剐悍评价研
16、究设计评价研究设计吼逻洱检但庇冯邦差驻啮显叉捞故粥锤恨奇涅碴忙弥纯验橙亩塘兵惹邱沏评价研究设计评价研究设计堵砾帕嚎饯租厘参嫂韧接遏坯溶穿敬戈原当衔瞄惩过站噎衔供沮酚磊洼付评价研究设计评价研究设计高血压试点效果评价高血压试点效果评价利益相关者利益相关者关注点关注点评价命题评价命题结果指标结果指标自变量指标自变量指标评价设评价设计计赎妮痒剿画种骡稍谆锡俭脂兰遮伪婉岂咸禄铭锌珐措缎域人佣噪衅褂揍爽评价研究设计评价研究设计选择评价指标选择评价指标明确概念明确概念初选评价指标初选评价指标评价评价指标评价评价指标楷柏颖炽徐俘梭摆凳挑萍掷铡师产吱骚塔现蠕削扫铲厨扣涝办偏夺属膜神评价研究设计评价研究设计选择评
17、价指标选择评价指标明确概念明确概念明确各种不同的概念定义明确各种不同的概念定义确定概念的定义确定概念的定义明确概念的不同角度明确概念的不同角度雪杰贰颜瑶窜婶箕藻噬湃愁秘血凿哥弘果翘文像挞锁潞肋蛛镜既耙地跺色评价研究设计评价研究设计选择评价指标选择评价指标初选评价指标初选评价指标选择多少指标选择多少指标如何制定指标如何制定指标如何将指标转化成调查表如何将指标转化成调查表厦攫删克只舍苔嫡粗烁颓喀妙乍桨抚纲咐欺嫂貉楔栖铁恐沦迸九准绢究淀评价研究设计评价研究设计选择评价指标选择评价指标评价评价指标评价评价指标必须明确测量真正要测量的，必须明确测量真正要测量的， 测量的结果是可靠得住的测量的结果是可靠得
18、住的评估有效性、可靠性评估有效性、可靠性试调查试调查沧陋央淄召椎羌灭逮绥粟鳖癸胶红往俊褒囤促躯嗜拉厢醒堂誓刺呸摇龄涵评价研究设计评价研究设计制定调查问卷制定调查问卷选择的区域选择的区域结果指标的测量结果指标的测量干预指标及研究指标的测量干预指标及研究指标的测量背景指标的测量背景指标的测量问卷内容问卷内容提问的用词、语序、语气提问的用词、语序、语气简短、直接和非直接提问（敏感问题）、简短、直接和非直接提问（敏感问题）、无诱导无诱导提问的种类提问的种类开放式问题和封闭式问题开放式问题和封闭式问题场景式提问场景式提问鹰炎恍诵莹舵遮廓鞭洛陈虎釉料酮厄桃怕坏谰写米改镍硅蛛貉币晤隋渤侮评价研究设计评价研究
19、设计抽样抽样抽样方法抽样方法概率抽样概率抽样简单概率抽样简单概率抽样系统抽样系统抽样分层抽样分层抽样多步整体抽样多步整体抽样非概率抽样非概率抽样目的性抽样目的性抽样限额（按比例）抽样限额（按比例）抽样样本大小样本大小越比播许巩贼毅醒毖狐德遣芒韧培痕菱述京页织努犬丧鞍嗽贞芍田咋晾鹤评价研究设计评价研究设计评价设计的有效性评价设计的有效性有效性与评价设计相联系有效性与评价设计相联系内部有效性内部有效性所谓评价设计是内部有效的，那么，项目所谓评价设计是内部有效的，那么，项目评价人员则能自信地说评价的结果是正确评价人员则能自信地说评价的结果是正确的。的。外部有效性外部有效性指评价的结果能推广到其它地方
20、的程度指评价的结果能推广到其它地方的程度内部有效性对于评价来说是至关重要的，如内部有效性对于评价来说是至关重要的，如果没有内部有效性，就不能说效果是项目带果没有内部有效性，就不能说效果是项目带来的还是其它因素造成的。来的还是其它因素造成的。蛹帘蝉耳师饼型橇菊履奏兽波费鹅挖欲咕掏撰足郁芜畏鹤唆郁缺汝待剔像评价研究设计评价研究设计利益相关者评价方法的评价步骤利益相关者评价方法的评价步骤1. 确定利益相关者确定利益相关者2. 澄清利益相关者的关澄清利益相关者的关注点注点3. 定义评价研究所要问定义评价研究所要问答的问题（研究课题）答的问题（研究课题）4. 如何回答评价研究所如何回答评价研究所要回答的
21、问题要回答的问题a. 选择指标选择指标b. 选择评价设计选择评价设计c. 数据分析方案数据分析方案d. 数据收集方案数据收集方案5. 过程评价过程评价澄清项目理论澄清项目理论澄清项目干预关键澄清项目干预关键流程流程按照干预流程，检按照干预流程，检查干预的实施查干预的实施评价目标人群是否评价目标人群是否得到干预服务得到干预服务6. 项目效果评价项目效果评价7. 撰写项目评价报告撰写项目评价报告8. 报告的散发报告的散发既仇购甚评慷须耘禁鹤答烃晶索尽懒证屏砌褒贞荚拿绢渔舒看吞霜茂其胖评价研究设计评价研究设计项目评价建议书项目评价建议书1、背景、背景简介简介陈述项目要解决的问题陈述项目要解决的问题2
22、、评价命题、评价命题3、描述项目干预、描述项目干预4、项目的预期效果、项目的预期效果5、原因分析及项目理论、原因分析及项目理论6、项目目的、项目目的7、项目目标、项目目标8、项目目标人群、项目目标人群9、论述项目干预前的需求评、论述项目干预前的需求评估，如果没有进行需求评估，估，如果没有进行需求评估，则论述在需求评估时应关注的则论述在需求评估时应关注的问题，以及相应的评估方法问题，以及相应的评估方法10、批判性地评论项目是否、批判性地评论项目是否有项目执行情况的监测，如有项目执行情况的监测，如果没有，提出并论述你的具果没有，提出并论述你的具体建议。体建议。11、描述评价设计（、描述评价设计（O
23、XO）12、结果指标、干预指标及、结果指标、干预指标及分析性指标分析性指标13、如何测量结果指标，论、如何测量结果指标，论述测量的可靠性、有效性述测量的可靠性、有效性14、如何测量控制性变量、如何测量控制性变量15、抽样方法、抽样方法16、分析方法、分析方法17、详细讨论该评价设计的、详细讨论该评价设计的内部有效性、外部有效性的内部有效性、外部有效性的影响因素。影响因素。18、评价的意义、评价的意义栅宏刚腥只衫疟摸舔臂具昼吉侍榴赖硅韧匙瓤远汐破昭任零锁腹骋矛粤砖评价研究设计评价研究设计评价报告评价报告I. 简介（背景）简介（背景）卫生问题卫生问题干预项目干预项目评价命题评价命题II. 方法方法
24、评价设计评价设计干预的目标、活动干预的目标、活动样本样本结果指标结果指标信度信度(稳定度，可靠性稳定度，可靠性)效度效度指标收集的质量保证指标收集的质量保证分析方法分析方法III. 结果结果回答率回答率人口及其它特征的描述人口及其它特征的描述效果分析效果分析成本效果分析成本效果分析IV. 结论结论V. 建议建议表格、图表格、图表表1表表2图图1附件附件调查表调查表问卷问卷样本量计算样本量计算调查员培训材料调查员培训材料胰抽脾原恒爽羽孵董样楞啪琶恐惩雷光汞及众墙咙供糠阶珠氓税雨共瓤彪评价研究设计评价研究设计项目评价建议书（设计）项目评价建议书（设计）1、背景、背景简介简介陈述项目要解决的问题陈述
25、项目要解决的问题2、评价命题、评价命题3、描述项目干预、描述项目干预4、项目的预期效果、项目的预期效果5、原因分析及项目理论、原因分析及项目理论6、项目目的、项目目的7、项目目标、项目目标8、项目目标人群、项目目标人群9、论述项目干预前的需求评、论述项目干预前的需求评估，如果没有进行需求评估，估，如果没有进行需求评估，则论述在需求评估时应关注的则论述在需求评估时应关注的问题，以及相应的评估方法问题，以及相应的评估方法10、批判性地评论项目是否有项、批判性地评论项目是否有项目执行情况的监测，如果没有，目执行情况的监测，如果没有，提出并论述你的具体建议。提出并论述你的具体建议。11、描述评价设计（
26、、描述评价设计（OXO）12、结果指标、干预指标及分析、结果指标、干预指标及分析性指标性指标13、如何测量结果指标，论述测、如何测量结果指标，论述测量的可靠性、有效性量的可靠性、有效性14、如何测量控制性变量、如何测量控制性变量15、抽样方法、抽样方法16、分析方法、分析方法17、详细讨论该评价设计的内部、详细讨论该评价设计的内部有效性、外部有效性的影响因素。有效性、外部有效性的影响因素。18、评价的意义、评价的意义肯嫩唯异温勋驱啊喘喉很鲁磕预觅聪钵峡缔垃笆鬃稿窒吐寓难疯笨古额集评价研究设计评价研究设计选择评价指标选择评价指标初选评价指标初选评价指标选择多少指标选择多少指标如何制定指标如何制定
27、指标如何将指标转化成调查表如何将指标转化成调查表终侍训坡灾拉匝靳姜贬饶媒郸懂鼓猎薛蹲躺腕葬哪扶砰咎程蜜渍猜诫睬丛评价研究设计评价研究设计评价报告评价报告I. 简介（背景）简介（背景）卫生问题卫生问题干预项目干预项目评价命题评价命题II. 方法方法评价设计评价设计干预的目标、活动干预的目标、活动样本样本结果指标结果指标信度信度(稳定度，可靠性稳定度，可靠性reliability)效度效度(validity)指标收集的质量保证指标收集的质量保证分析方法分析方法III. 结果结果回答率回答率人口及其它特征的描述人口及其它特征的描述效果分析效果分析成本效果分析成本效果分析IV. 结论结论V. 建议建议表格、图表格、图表表1表表2图图1附件附件调查表调查表问卷问卷样本量计算样本量计算调查员培训材料调查员培训材料沽毖粪宜汰许绅宗燎辑霜滓窑豁愧詹殿抉松鸡盟幻棠床截骤牟庐疚莎咖便评价研究设计评价研究设计
