《常用综合评价方法7》由会员分享，可在线阅读，更多相关《常用综合评价方法7（48页珍藏版）》请在金锄头文库上搜索。
1、常用综合评价方法常用综合评价方法SyntheticalEvaluation例如，某人英语考试成绩例如，某人英语考试成绩58分分是否对照某标是否对照某标准判断此结果准判断此结果是是否否评评价价（evaluation)仅是描述，反仅是描述，反映现状映现状一、一、综合评价方法的基本概念综合评价方法的基本概念 综合评价的问题综合评价的问题: :对被评价对象所进行的客观、对被评价对象所进行的客观、公正、合理的全面评价。通常的综合评价问题都是公正、合理的全面评价。通常的综合评价问题都是有若干个同类的被评价对象有若干个同类的被评价对象( (或系统或系统) )，每个被评价，每个被评价对象往往都涉及到多个属性（
2、或指标）。对象往往都涉及到多个属性（或指标）。 综合评价的目的综合评价的目的: :根据系统的属性判断确定这些根据系统的属性判断确定这些系统的运行（或发展）状况哪个优，哪个劣，即按系统的运行（或发展）状况哪个优，哪个劣，即按优劣对各被评价对象进排序或分类。这类问题又称优劣对各被评价对象进排序或分类。这类问题又称为为多属性（或多指标）的综合评价问题多属性（或多指标）的综合评价问题。 综合评价的应用综合评价的应用: :研究多目标决策问题的前提，研究多目标决策问题的前提，因此研究解决这类问题在实际中是很有意义的，特因此研究解决这类问题在实际中是很有意义的，特别是在政治、经济、社会及军事管理、工程技术及
3、别是在政治、经济、社会及军事管理、工程技术及科学决策等领域都有重要的应用价值。科学决策等领域都有重要的应用价值。 构成综合评价问题的构成综合评价问题的五个要素五个要素分别为分别为: :被评价对象被评价对象、评价指标、权重系数、综合评价模型和评价者。、评价指标、权重系数、综合评价模型和评价者。一、一、综合评价方法的基本概念综合评价方法的基本概念 1 1 构成综合评价问题的五个要素构成综合评价问题的五个要素 1 1 构成综合评价问题的五个要素构成综合评价问题的五个要素 （2 2）评价指标）评价指标 评价指标评价指标是反映被评价对象是反映被评价对象( (或系统或系统) )的运行的运行( (或发展或发
4、展) )状况状况的基本要素。通常的问题都是有多项指标构成，每一项指标都的基本要素。通常的问题都是有多项指标构成，每一项指标都是从不同的侧面刻画系统所具有某种特征大小的一个度量。是从不同的侧面刻画系统所具有某种特征大小的一个度量。 一个综合评价问题的评价指标一般可用一个一个综合评价问题的评价指标一般可用一个向量向量表示，其表示，其中每一个分量就是从一个侧面反映系统的状态，即称为中每一个分量就是从一个侧面反映系统的状态，即称为综合评综合评价的指标体系价的指标体系。 注注意意到到: :当当各各被被评评价价对对象象和和评评价价指指标标值值都都确确定定以以后后，问问题题的的综综合合评评价价结结果果就就完
5、完全全依依赖赖于于权权重重系系数数的的取取值值了了，即即权权重重系系数数确确定定的的合合理理与与否否，直直接接关关系系到到综综合合评评价价结结果果的的可可信度，甚至影响到最后决策的正确性。信度，甚至影响到最后决策的正确性。1 1 构成综合评价问题的五个要素构成综合评价问题的五个要素 （4 4）综合评价模型）综合评价模型 对于多指标（或多因素）的综合评价问题对于多指标（或多因素）的综合评价问题, ,就是要就是要通过建立合适的综合评价数学模型将多个评价指标综合通过建立合适的综合评价数学模型将多个评价指标综合成为一个整体的综合评价指标，作为综合评价的依据，成为一个整体的综合评价指标，作为综合评价的依
6、据，从而得到相应的评价结果。从而得到相应的评价结果。 （5 5）评价者）评价者 评价者是直接参与评价的人，可以是某一个人，评价者是直接参与评价的人，可以是某一个人，也可以是一个团体。对于评价目的选择、评价指标体也可以是一个团体。对于评价目的选择、评价指标体系确定、评价模型的建立和权重系数的确定都与评价系确定、评价模型的建立和权重系数的确定都与评价者有关。者有关。 1 1 构成综合评价问题的五个要素构成综合评价问题的五个要素返回返回2.1综合评价的一般步骤综合评价的一般步骤对某事件进行多因素综合评价的过程，实质上就是对某事件进行多因素综合评价的过程，实质上就是科学研究与科学研究与决策决策的过程，
7、原则上应包括的过程，原则上应包括设计、收集资料和分析资料设计、收集资料和分析资料几个基几个基本阶段，实施中应着重注意以下几个本阶段，实施中应着重注意以下几个基本环节基本环节。选择恰当的评价指标选择恰当的评价指标(evaluation indicator)(evaluation indicator)确定各评价指标权重确定各评价指标权重合理确定各单个指标的评价等级合理确定各单个指标的评价等级(evaluation grade)(evaluation grade)及其界限及其界限建立综合评价模型建立综合评价模型( (syntheticalsynthetical evaluation model) e
8、valuation model)确定多指标综合评价的等级数量界限，并根据实践对已建立模确定多指标综合评价的等级数量界限，并根据实践对已建立模 型考察、修改及完善。型考察、修改及完善。研研究究目目的的2.1例：学生综合测评（综合评分）例：学生综合测评（综合评分）u评价指标：德育总分、智育总分、体育 总分（加分：CET）u权重： 方案1：德育0.3 智育0.6 体育0.1 方案2：德育0.1 智育0.8 体育0.1 方案3：德育0.3 智育0.6 体育0.1 加分u评价模型：评分法、总分为100，加分不封顶，累加法。 u评价结果: 学生甲：德育90 智育70 体育80 学生乙：德育70 智育80
9、体育702.2综合评价一般步骤示例综合评价一般步骤示例研研制制新新生生儿儿缺缺氧氧状状况况的的Apgar评评分分方方法法研研究究目目的的据专业知识，选择据专业知识，选择5 5个指标个指标 心率心率 呼吸呼吸肌张力肌张力 反射反射 皮肤颜皮肤颜色色 5个指标具有相等权重个指标具有相等权重选择指标选择指标确定权重确定权重以累加法累计总分：以累加法累计总分：810分为正常；分为正常；47分为轻度缺氧；分为轻度缺氧；03分为重度缺氧。分为重度缺氧。确确定定指指标标评评价价等等级级及及界界限限建立模型建立模型3.1评价指标的基本要求评价指标的基本要求基基本本要要求求代表性代表性：各层次指标能最：各层次指
10、标能最好地表达所代表的层次。好地表达所代表的层次。确定性确定性：指指标值确定，：指指标值确定，其高低在评价中有确切含义。其高低在评价中有确切含义。区别能力区别能力/灵敏性灵敏性：即指标：即指标值有一定的波动范围，而且其值有一定的波动范围，而且其高低在评价中有确切的含义。高低在评价中有确切的含义。独立性独立性：即选入的指标各：即选入的指标各有所用，相互不能替代。有所用，相互不能替代。选选择择综综合合评评价价指指标标3.2系统分析法及文献资料系统分析法及文献资料分析优选法筛选指标分析优选法筛选指标缺乏缺乏有关有关历史历史资料，资料，或指或指标难标难以数以数量化量化时时系统分析法系统分析法(syst
11、ematicanalysismethod)：是一种常用的是一种常用的凭经验挑选指标凭经验挑选指标的方法的方法，首先将所有备选指标按系统，首先将所有备选指标按系统（或属性、类别）划分，再通过座谈或（或属性、类别）划分，再通过座谈或填调查表的方法获得对各指标的专家评填调查表的方法获得对各指标的专家评分，确定主次，再从各系统内挑选主要分，确定主次，再从各系统内挑选主要的指标作为评价指标。的指标作为评价指标。文献资料分析优选法文献资料分析优选法：即全面查阅有关即全面查阅有关评价指标设置的文献资料，分析各指标评价指标设置的文献资料，分析各指标的优缺点并加以取舍。的优缺点并加以取舍。3.3常用客观筛选指标
12、方法常用客观筛选指标方法逐个指标进行假设检验的方法逐个指标进行假设检验的方法：是在掌握有关历史资料基础上，依照可能的评价结果将评价对象分组，并对各指标进行假设检验，挑选有统计意义的指标有统计意义的指标作为评价指标。多元回归与逐步回归法多元回归与逐步回归法：多元回归分析挑选标准化偏回归系数绝对值较大或偏回归系数假设检验有显著性的指标作为评价指标；逐步回归有自动挑选主要影响指标的功能，是目前最常用的指标挑选方法最常用的指标挑选方法。指标聚类法指标聚类法：在存在众多指标的情况下，可将相似指标聚成类，再从每类中找一个典型指标作为代表，从而用少量几个典型指标少量几个典型指标作为评价指标来代表原来众多的指
13、标建立评价模型。3.5 评价指标的权重估计评价指标的权重估计 确定指标权重方法确定指标权重方法主观定权法主观定权法客观定权法客观定权法专专家家评评分分法法成成对对比比较较法法Saaty权权重重法法秩秩和和比比法法相相关关系系数数法法其其它它方方法法模模糊糊定定权权法法熵熵权权法法 定权带有一定的主观性，用不同方法确定的权重分配，可能不尽一定权带有一定的主观性，用不同方法确定的权重分配，可能不尽一致，这将导致权重分配的不确定性，最终可能导致评价结果的不确定致，这将导致权重分配的不确定性，最终可能导致评价结果的不确定性。因而在实际工作中，不论用哪种方法确定权重分配，都应当性。因而在实际工作中，不论
14、用哪种方法确定权重分配，都应当依赖依赖于较为合理的专业解释于较为合理的专业解释。 3.6专家评分法评分方式专家评分法评分方式1）专家个人判断专家个人判断即分别征求专家个人意见，在专家各自单独给即分别征求专家个人意见，在专家各自单独给评价指标的相对重要性打分的基础上，进行统计处理，以确定评价指标的相对重要性打分的基础上，进行统计处理，以确定各指标的权重。各指标的权重。优点优点：专家打分时专家打分时不受外界影响不受外界影响，没有心理压力，可以最，没有心理压力，可以最大限度地发挥个人创造能力。大限度地发挥个人创造能力。缺点缺点：仅凭个人判断，易受仅凭个人判断，易受专家知识深度与广度专家知识深度与广度
15、的影响，的影响，难免带有片面性。难免带有片面性。2）专家会议专家会议即召开所有被挑选专家，以集体讨论的方式进行即召开所有被挑选专家，以集体讨论的方式进行评分，然后再以统计手段确定各指标的权重。评分，然后再以统计手段确定各指标的权重。优点优点：可以交换意见，可以交换意见，相互启发，弥补个人之不足相互启发，弥补个人之不足。缺点缺点：主要表现在易受主要表现在易受心理因素的影响心理因素的影响，如，如屈从于权威屈从于权威和和大多数人的意见，受劝说性意见的影响，不愿公开修正已发表大多数人的意见，受劝说性意见的影响，不愿公开修正已发表的意见等等。的意见等等。6个专家对4个评价指标的重要性评价结果得分不考虑专
16、家权威程度：权重分别是不考虑专家权威程度：权重分别是0.41,0.31,0.18,0.103.7常用的客观定权方法常用的客观定权方法某些统计方法分析结果，可提供有关因素权重分某些统计方法分析结果，可提供有关因素权重分配的客观信息配的客观信息: :1)1)多元回归分析及逐步回归分析中，各自变量的标准多元回归分析及逐步回归分析中，各自变量的标准化偏回归系数值以及由此而推算的贡献率；化偏回归系数值以及由此而推算的贡献率；2)2)计数资料判别分析中的指数，计量资料判别分析中计数资料判别分析中的指数，计量资料判别分析中各因子的贡献率；各因子的贡献率；3)3)主成分分析中得到的因子载荷和贡献率。主成分分析
17、中得到的因子载荷和贡献率。某些特定的统计方法某些特定的统计方法 例如去某死因后期望寿命例如去某死因后期望寿命的增量、减寿年数的增量、减寿年数( (Potential Years of Life Potential Years of Life LostLost,PYLL),PYLL)都可为各死因的相对重要性提供有关都可为各死因的相对重要性提供有关权重分配的信息献率。权重分配的信息献率。 3.8组合权重及其计算方法组合权重及其计算方法组合权重组合权重(combined weight) (combined weight) 当评价指标可分层时，即某项或某几项评价指当评价指标可分层时，即某项或某几项评价
18、指标可再分为次级评价指标时，则次级评价指标的标可再分为次级评价指标时，则次级评价指标的权重既应考虑其本身在所有次级评价指标中的权权重既应考虑其本身在所有次级评价指标中的权重分配，又要考虑其高层评价指标在所有评价指重分配，又要考虑其高层评价指标在所有评价指标中的权重分配。标中的权重分配。组合权重有两种求法：组合权重有两种求法：1)1)代数和法代数和法 2)2)乘积法乘积法 组合权重计算表组合权重计算表几种常用综合评价方法几种常用综合评价方法1.1.现有的统计方法现有的统计方法： 主要为多元统计方法，主要为多元统计方法，如多元回归、逐步回归分析、判别分析、因子分如多元回归、逐步回归分析、判别分析、
19、因子分析、时间序列分析等。析、时间序列分析等。2.2.模糊多元分析方法模糊多元分析方法：由模糊数学发展而来，由模糊数学发展而来，包括模糊聚类、模糊判别、模糊综合评价等方法。包括模糊聚类、模糊判别、模糊综合评价等方法。3 3简易方法简易方法：主要包括综合评分法、综合指数法、：主要包括综合评分法、综合指数法、层次分析法、层次分析法、TopsisTopsis法、秩和比法等。法、秩和比法等。 特点特点：简单实用；简单实用；适用于各种资料；适用于各种资料；存在存在一定的局限性。一定的局限性。4.1层次分析法概念层次分析法概念 层次分析法层次分析法(AnalyticHierarchyProcess,简称简
20、称AHP)：由美国科学家由美国科学家T.L.Saaty于于20世纪世纪70年年代提出代提出,是用是用系统分析的方法系统分析的方法，对评价对象依，对评价对象依评价目的所确定的总评价目标进行评价目的所确定的总评价目标进行连续性分连续性分解解,得到各级（各层）评价目标，并以得到各级（各层）评价目标，并以最下层最下层指标指标作为衡量目标达到程度的评价指标。然作为衡量目标达到程度的评价指标。然后依据这些指标计算出后依据这些指标计算出一综合评分指数一综合评分指数对评对评价对象的总评价目标进行评价，依其大小来价对象的总评价目标进行评价，依其大小来确定评价对象的优劣等级。确定评价对象的优劣等级。4.2层次分析
21、法示例层次分析法示例例例4 4：拟采用层次分析法建立一个评价综合：拟采用层次分析法建立一个评价综合医院工作质量的综合指标，并采用该指医院工作质量的综合指标，并采用该指标对某市标对某市6 6所综合医院的工作质量进行综所综合医院的工作质量进行综合评价。合评价。医院工作质量综合评价的基本步骤：医院工作质量综合评价的基本步骤： 1）对总评价目标进行连续性分解连续性分解以得到不同层次的评价目标，将各层评价目标用图有机地标示出来，即建立目标树图，见图1。 4.3建立目标图建立目标图4.4计算权重系数计算权重系数2)对目标树自上而下分层次一一对比打分，建立对目标树自上而下分层次一一对比打分，建立成对比较判断
22、优选矩阵成对比较判断优选矩阵。各层评分标准见表3,表4为第一层子目标成对比较判断优选矩阵。表3 目标树图各层次评分标准 对比打分对比打分相对重要程度相对重要程度说说明明1同等重要同等重要两者对目标的贡献相同两者对目标的贡献相同3略为重要略为重要根据经验一个比另一个评价稍有利根据经验一个比另一个评价稍有利5基本重要基本重要根据经验一个比另一个评价更为有利根据经验一个比另一个评价更为有利7确实重要确实重要一个比另一个评价更有利，且在实践中证明一个比另一个评价更有利，且在实践中证明9绝对重要绝对重要重要程度明显重要程度明显两相邻程度的两相邻程度的中间值中间值需要折衷时采用需要折衷时采用表4 第一层子
23、目标成对比较判断优选矩阵 医疗工作医疗工作护理工作护理工作膳食供应膳食供应医疗工作医疗工作1(a11)3(a12)5(a13)护理工作护理工作1/3(a12)1(a22)3(a23)膳食供应膳食供应1/5(a13)1/3(a23)1(a33)4.4计算权重系数计算权重系数(续续1)(2)按公式按公式计算计算初始权重系数初始权重系数得得(3)按公式按公式计算计算归一化权重系数归一化权重系数得得用同样方法可获得其他分层中各项目指标的权重系数，现用同样方法可获得其他分层中各项目指标的权重系数，现以医疗工作一项为例说明，见表以医疗工作一项为例说明，见表5。4.4计算权重系数计算权重系数(续续2)表表5
24、医疗工作第二层、第三层子目标权重系数医疗工作第二层、第三层子目标权重系数层层次次评价目标及权重系数评价目标及权重系数第二层第二层医疗制度医疗制度医疗质量医疗质量病床使用病床使用0.16340.53960.2970第三层第三层疗疗效效重症收容重症收容0.66700.3330(4)计算各个评价指标的计算各个评价指标的组合权重系数组合权重系数，见图，见图2。膳食供应优良率的组合权重系数膳食供应优良率的组合权重系数C1=0.1047护理制度优良执行率的组合权重系数护理制度优良执行率的组合权重系数C2=0.2583治疗有效率的组合权重系数治疗有效率的组合权重系数C6=0.22924.4计算权重系数计算权
25、重系数(续续3)图图2乘积法求各层次评价指标的组合权重乘积法求各层次评价指标的组合权重4.5求综合评分指数求综合评分指数(5)对对评评价价对对象象的的总总评评价价目目标标进进行行综综合合评评估估。综综合合评评分分指指数数GIGI的的计算公式如下：计算公式如下：其中其中Pi为第为第i个评价指标的测量值，为评价指标的个数。个评价指标的测量值，为评价指标的个数。例例4某某市市有有6所所综综合合医医院院，试试对对其其医医院院工工作作质质量量进进行行综综合合评评价价,医医院院的的6项项评评价价指指标标分分别别为为病病床床使使用用率率(P1)95%，治治疗疗有有效效率率(P2)88.1%，重重症症收收容容
26、率率(P3)15.4%，医医疗疗制制度度执执行行优优良良率率(P4)74.7%，护护理理制制度度执执行行优优良良率率(P5)54.7%，膳膳食食供供应应优良率优良率(P6)41.3%,其综合评分指数为：其综合评分指数为：其他医院综合评分指数其他医院综合评分指数GI的计算结果见表的计算结果见表6。4.5求综合评分指数求综合评分指数(续续1）由由表表6工工作作质质量量顺顺位位可可见见，A医医院院工工作作质质量量最最佳佳，D医院医院工作质量最差。工作质量最差。表6 某市6所医院工作质量的综合评价表 评价指标评价指标组合权重组合权重医医院院A ABCDEF病床使用率病床使用率0.189295.092.
27、094.895.689.177.4治疗有效率治疗有效率0.229288.191.290.094.093.692.2重症收容率重症收容率0.114515.48.37.93.19.53.7医疗制度执行优良率医疗制度执行优良率0.104174.753.461.950.061.967.1护理制度执行优良率护理制度执行优良率0.258354.720.726.120.027.435.5膳食供应优良率膳食供应优良率0.104741.341.422.820.034.030.3综合评分指数综合评分指数66.254.555.052.556.555.5工作质量顺位工作质量顺位1546234.6层次分析法评价层次分析
28、法评价1、应用层次分析法时，注意在计算归一化权重系数后，应检验所、应用层次分析法时，注意在计算归一化权重系数后，应检验所计算得出的计算得出的权重系数是否符合逻辑权重系数是否符合逻辑。通常用一致性指标检验该。通常用一致性指标检验该项目的相对优先顺序有无逻辑混乱，一般认为，当项目的相对优先顺序有无逻辑混乱，一般认为，当CI0.10时，时，可能无逻辑混乱，即计算得的各项权重可以接受。可能无逻辑混乱，即计算得的各项权重可以接受。按下述公式可计算按下述公式可计算一致性指标一致性指标：其中其中m为受检验层次的子目标数，为受检验层次的子目标数，为最大特征为最大特征根根,为该层子目标成对比较判断优选矩阵的特征
29、根。为该层子目标成对比较判断优选矩阵的特征根。4.6层次分析法评价（续层次分析法评价（续1） 2、为了度量不同阶判断矩阵是否具有满意的一致性，我们还为了度量不同阶判断矩阵是否具有满意的一致性，我们还需引入判断矩阵的需引入判断矩阵的平均随机一致性指标值平均随机一致性指标值。对于对于1，2阶判断阶判断矩阵，只是形式上的，因为矩阵，只是形式上的，因为1，2阶判断矩阵总具有完全一致阶判断矩阵总具有完全一致性。当阶数大于性。当阶数大于2时，判断矩阵一致性指标与同阶平均随机时，判断矩阵一致性指标与同阶平均随机一致性指标之比称为一致性指标之比称为随机一致性比率随机一致性比率，记为，记为CR，其计算公其计算公
30、式为：式为：如本例第一层：如本例第一层：4.6层次分析法评价（续层次分析法评价（续2）对于对于19阶判断矩阵，阶判断矩阵，RI值值见表见表7。表 7 19阶平均随机一致性指标的取值 阶数 123456789RI0.000.000.580.901.121.241.321.411.45当当CR0.10时，即认为判断矩阵时，即认为判断矩阵具有满意的一致性具有满意的一致性，否则就需，否则就需要要调整判断矩阵调整判断矩阵，并使之具有满意的一致性。以本例第一层为例：，并使之具有满意的一致性。以本例第一层为例：认为第一层子目标各项权重判断无逻辑错误。依此类推，认为第一层子目标各项权重判断无逻辑错误。依此类推
31、，运用此法运用此法逐步逐步检测检测每一层每一层子目标权重系数，判断它们子目标权重系数，判断它们是否都是否都合乎逻辑合乎逻辑。 线性加权综合法的线性加权综合法的适用条件适用条件: :各评价指标之间各评价指标之间相互独立。相互独立。 对于不完全独立的情况采用该方法，其结果将对于不完全独立的情况采用该方法，其结果将导致各指标间信息的重复，使得评价结果不能客观导致各指标间信息的重复，使得评价结果不能客观地反映实际。地反映实际。三、综合评价的数学模型三、综合评价的数学模型 1.线性加权综合法线性加权综合法 2.非非线性加权综合法线性加权综合法 1. 1. 评价指标类型的一致化评价指标类型的一致化 极大型
32、指标极大型指标: :总是期望指标的取值越大越好；总是期望指标的取值越大越好； 极小型指标极小型指标: :总是期望指标的取值越小越好；总是期望指标的取值越小越好； 中间型指标中间型指标: :总是期望指标的取值既不要太大，也不要总是期望指标的取值既不要太大，也不要太小为好，即取适当的中间值为最好太小为好，即取适当的中间值为最好; ; 区间型指标区间型指标: :总是期望指标的取值最好是落在某一个确总是期望指标的取值最好是落在某一个确定的区间内为最好。定的区间内为最好。 二、评价指标的规范化处理二、评价指标的规范化处理 1.评价指标类型的一致化评价指标类型的一致化1.评价指标类型的一致化评价指标类型的
33、一致化2.评价指标的无量纲化评价指标的无量纲化二、评价指标的规范化处理二、评价指标的规范化处理 如果不对这些指标作相应的无量纲处理，则在综合评如果不对这些指标作相应的无量纲处理，则在综合评价过程中就会出价过程中就会出“大数吃小数大数吃小数”的错误结果，从而导致最的错误结果，从而导致最后得到错误的评价结论。后得到错误的评价结论。 无量纲化处理又称为指标数据的无量纲化处理又称为指标数据的标准化标准化, ,或或规范化规范化处理。处理。 常用方法常用方法: :标准差方法、极值差方法和功效系数方法等。标准差方法、极值差方法和功效系数方法等。 2.评价指标的无量纲化评价指标的无量纲化2.评价指标的无量纲化评价指标的无量纲化返回返回评价指标的标准化处理评价指标的标准化处理2.1评价指标的标准化处理评价指标的标准化处理 五、长江水质的综合评价模型 五、长江水质的综合评价模型 1.指标数据的标准化处理指标数据的标准化处理1.指标数据的标准化处理指标数据的标准化处理1.指标数据的标准化处理指标数据的标准化处理
