《第八章评价方法t.ppt》由会员分享,可在线阅读,更多相关《第八章评价方法t.ppt(52页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、第八章第八章 系统评价系统评价系统评价的概念系统评价的概念系统评价的概念系统评价的概念 1.1.1.1.系统评价就是根据确定的目的,利用最优化的结果和系统评价就是根据确定的目的,利用最优化的结果和系统评价就是根据确定的目的,利用最优化的结果和系统评价就是根据确定的目的,利用最优化的结果和各种资料,用技术经济的观点对比各种代替方案,考虑成本各种资料,用技术经济的观点对比各种代替方案,考虑成本各种资料,用技术经济的观点对比各种代替方案,考虑成本各种资料,用技术经济的观点对比各种代替方案,考虑成本与效果之间的关系,权衡各个方案的利弊得失,选择出技术与效果之间的关系,权衡各个方案的利弊得失,选择出技术
2、与效果之间的关系,权衡各个方案的利弊得失,选择出技术与效果之间的关系,权衡各个方案的利弊得失,选择出技术上先进、经济上合理、现实中可行的或满意的方案。上先进、经济上合理、现实中可行的或满意的方案。上先进、经济上合理、现实中可行的或满意的方案。上先进、经济上合理、现实中可行的或满意的方案。2.2.2.2.对新开发的或改建的系统对新开发的或改建的系统对新开发的或改建的系统对新开发的或改建的系统,根据预定的系统目标根据预定的系统目标根据预定的系统目标根据预定的系统目标,用系用系用系用系统分析的方法,从技术、经济、社会、生态等方面对系统设统分析的方法,从技术、经济、社会、生态等方面对系统设统分析的方法
3、,从技术、经济、社会、生态等方面对系统设统分析的方法,从技术、经济、社会、生态等方面对系统设计的各种方案进行评审和选择,以确定最优或次优或满意的计的各种方案进行评审和选择,以确定最优或次优或满意的计的各种方案进行评审和选择,以确定最优或次优或满意的计的各种方案进行评审和选择,以确定最优或次优或满意的系统方案。系统方案。系统方案。系统方案。由于各个国家社会制度、资源条件、经济发展状况、教由于各个国家社会制度、资源条件、经济发展状况、教育水平和民族传统等各不相同,所以没有统一的系统评价模育水平和民族传统等各不相同,所以没有统一的系统评价模式。评价项目、评价标准和评价方法也不尽相同。式。评价项目、评
4、价标准和评价方法也不尽相同。本章内容提示:本章内容提示:n n系统评价的原理(总论)本章学习的主线本章学习的主线n n系统评价的指标体系n n评价指标的权重n n系统综合评价n n层次分析法 主成分分析 数据包络分析n n模糊评价法n n可能-满意度法8.1系统评价的原理系统评价的原理n n系统评价的概念n n系统评价的分类n n系统评价的重要性和复杂性n n系统评价的原则n n系统评价的程序9.1.2系统评价的分类系统评价的分类n n按照评价内容评价内容对系统评价进行分类:经济评价经济评价 社会评价社会评价 技术评价技术评价 财务评价财务评价 可持续评价可持续评价 综合评价综合评价n n按照
5、评价时间评价时间对系统评价进行分类:事前评价事前评价 事中评价事中评价 事后评价事后评价 n n根据评价和决策的关系评价和决策的关系:决策前评价决策前评价 决策中评价决策中评价 决策后评价决策后评价n n根据评价系统中的信息特征评价系统中的信息特征:基于数据的评价、基于模型的评价、基于专家知识的评价基于数据的评价、基于模型的评价、基于专家知识的评价以及基于数据、模型和专家知识的评价。以及基于数据、模型和专家知识的评价。n n事前评价:是指方案的预评价,通常称为可行性研究。事前评价:是指方案的预评价,通常称为可行性研究。事前评价:是指方案的预评价,通常称为可行性研究。事前评价:是指方案的预评价,
6、通常称为可行性研究。在在计划阶段的评价,这时由于没有实际的系统,一般只能参考已计划阶段的评价,这时由于没有实际的系统,一般只能参考已有资料或者用仿真的方法进行预测评价,有时也用投标表决的有资料或者用仿真的方法进行预测评价,有时也用投标表决的方法,综合人们的直观判断而进行评价。如在制定新产品开发方法,综合人们的直观判断而进行评价。如在制定新产品开发方案时所进行的评价,目的是为了及早沟通设计、制造、供销方案时所进行的评价,目的是为了及早沟通设计、制造、供销等部门的意见,并从系统总体出发来研讨与方案有关的各种重等部门的意见,并从系统总体出发来研讨与方案有关的各种重要问题。要问题。n n事中评价:在计
7、划实施阶段进行的评价,着重检验是否按事中评价:在计划实施阶段进行的评价,着重检验是否按事中评价:在计划实施阶段进行的评价,着重检验是否按事中评价:在计划实施阶段进行的评价,着重检验是否按照计划实施。照计划实施。照计划实施。照计划实施。在方案实施过程中,由于评价环境重大变化,如在方案实施过程中,由于评价环境重大变化,如政策变化、市场变化或评价要素估计偏差等,需要对方案做出政策变化、市场变化或评价要素估计偏差等,需要对方案做出评价,进行灵敏度分析,判断方案的满意性是否发生质的变化,评价,进行灵敏度分析,判断方案的满意性是否发生质的变化,以确定是继续实施方案、修改方案还是选择新方案。以确定是继续实施
8、方案、修改方案还是选择新方案。n n事后评价:是指方案实施以后,对照系统目标和决策主事后评价:是指方案实施以后,对照系统目标和决策主事后评价:是指方案实施以后,对照系统目标和决策主事后评价:是指方案实施以后,对照系统目标和决策主体要求,评价实施结果与预期效果是否一致,测定方案设体要求,评价实施结果与预期效果是否一致,测定方案设体要求,评价实施结果与预期效果是否一致,测定方案设体要求,评价实施结果与预期效果是否一致,测定方案设计的合理性,实施计划安排是否周全,风险分析是否与实计的合理性,实施计划安排是否周全,风险分析是否与实计的合理性,实施计划安排是否周全,风险分析是否与实计的合理性,实施计划安
9、排是否周全,风险分析是否与实际情况相吻合,为进一步开发新方案提供依据。际情况相吻合,为进一步开发新方案提供依据。际情况相吻合,为进一步开发新方案提供依据。际情况相吻合,为进一步开发新方案提供依据。在系统实在系统实在系统实在系统实施即工程完成之后进行的评价,评价系统是否达到了预期施即工程完成之后进行的评价,评价系统是否达到了预期施即工程完成之后进行的评价,评价系统是否达到了预期施即工程完成之后进行的评价,评价系统是否达到了预期目标。因为可以测定实际系统的性能,所以作出评价较为目标。因为可以测定实际系统的性能,所以作出评价较为目标。因为可以测定实际系统的性能,所以作出评价较为目标。因为可以测定实际
10、系统的性能,所以作出评价较为容易。对于系统有关社会因素的定性评价,也可通过调查容易。对于系统有关社会因素的定性评价,也可通过调查容易。对于系统有关社会因素的定性评价,也可通过调查容易。对于系统有关社会因素的定性评价,也可通过调查接触该系统的人们的意见来进行。接触该系统的人们的意见来进行。接触该系统的人们的意见来进行。接触该系统的人们的意见来进行。n n跟踪评价:系统投入运行后对其他方面造成的影响的评跟踪评价:系统投入运行后对其他方面造成的影响的评跟踪评价:系统投入运行后对其他方面造成的影响的评跟踪评价:系统投入运行后对其他方面造成的影响的评价。如大型水利工程完成后对生态造成的影响。价。如大型水
11、利工程完成后对生态造成的影响。价。如大型水利工程完成后对生态造成的影响。价。如大型水利工程完成后对生态造成的影响。8.1.28.1.2系统评价的重要性和复杂性系统评价的重要性和复杂性 在系统的设计、开发和实施过程中,经常要进行系统决策。在系统的设计、开发和实施过程中,经常要进行系统决策。系统决策系统决策系统决策系统决策是指通过系统评价技术从众多的替代方案中找出最是指通过系统评价技术从众多的替代方案中找出最优的方案。要决定哪一个方案最优却并不容易。尤其对于复优的方案。要决定哪一个方案最优却并不容易。尤其对于复杂大系统来说,杂大系统来说,“最优最优”这个词确是并不明显,而且评价是这个词确是并不明显
12、,而且评价是否否“最优的标准最优的标准”(尺度)也是随着时间而变化和发展的。(尺度)也是随着时间而变化和发展的。系统评价的重要性:系统评价的重要性:系统评价的重要性:系统评价的重要性:1.1.系统评价是系统决策的基础,是方案实施的前提。系统评价是系统决策的基础,是方案实施的前提。2 2.系统评价是决策人员进行理性决策的依据:以系统目标系统评价是决策人员进行理性决策的依据:以系统目标为依据,从多个角度对多个方案理性评估,选择出最优方案为依据,从多个角度对多个方案理性评估,选择出最优方案进行实施。进行实施。3 3.系统评价是决策者和方案执行者之间相互沟通的关键:系统评价是决策者和方案执行者之间相互
13、沟通的关键:决策者为了使执行人员信服并积极完成任务,可以通过评价决策者为了使执行人员信服并积极完成任务,可以通过评价活动促进执行人员对方案的理解。活动促进执行人员对方案的理解。4 4.系统评价有利于事先发现问题,并对问题加以解决:在系统评价有利于事先发现问题,并对问题加以解决:在系统评价过程中可进一步发现问题,有利于进一步改进系统。系统评价过程中可进一步发现问题,有利于进一步改进系统。8.1.28.1.2系统评价的重要性和复杂性系统评价的重要性和复杂性 系统评价固然重要,但它同时也是一件很复杂的事情。其复杂性主要来系统评价固然重要,但它同时也是一件很复杂的事情。其复杂性主要来自以下几个方面:自
14、以下几个方面:1.1.系统评价的多目标性。系统评价的多目标性。系统评价的多目标性。系统评价的多目标性。当系统为单目标时,其评价工作是容易进行的。当系统为单目标时,其评价工作是容易进行的。但是实际系统中的问题要复杂得多,系统评价的目标往往不止一个。而但是实际系统中的问题要复杂得多,系统评价的目标往往不止一个。而且各个方案往往各有所长、各有千秋:在某些指标上,方案甲比方案乙且各个方案往往各有所长、各有千秋:在某些指标上,方案甲比方案乙优越;而在另一些指标上,方案乙又比方案甲优越,这时就难定夺。指优越;而在另一些指标上,方案乙又比方案甲优越,这时就难定夺。指标越多,方案越多,问题就越复杂。标越多,方
15、案越多,问题就越复杂。2.2.系统评价指标体系中不仅有系统评价指标体系中不仅有系统评价指标体系中不仅有系统评价指标体系中不仅有定量指标定量指标定量指标定量指标而且又而且又而且又而且又定性指标定性指标定性指标定性指标。对定量指标,对定量指标,通过比较标准,能很容易地得出其优劣顺序;但对于定性指标,由于没通过比较标准,能很容易地得出其优劣顺序;但对于定性指标,由于没有明确的数量表示,往往凭人的主观感觉和经验进行评价。如评价一辆有明确的数量表示,往往凭人的主观感觉和经验进行评价。如评价一辆汽车的方便性、舒适性这些指标。传统的评价往往偏重于单一的定量指汽车的方便性、舒适性这些指标。传统的评价往往偏重于
16、单一的定量指标,而忽视定性、难以量化的但对系统是至关重要的指标。标,而忽视定性、难以量化的但对系统是至关重要的指标。3.3.人的价值观念在评价中往往会起重大影响。人的价值观念在评价中往往会起重大影响。人的价值观念在评价中往往会起重大影响。人的价值观念在评价中往往会起重大影响。评价活动是由人来进行的,评价活动是由人来进行的,评价指标体系和方案是由人确定的,在许多情况下,评价对象对于某些评价指标体系和方案是由人确定的,在许多情况下,评价对象对于某些指标的实现程度(指标值)也是人为确定的,因此人的价值观在评价中指标的实现程度(指标值)也是人为确定的,因此人的价值观在评价中起很大作用。由于在大多数情况
17、各人有各人的观点、立场、标准,因此起很大作用。由于在大多数情况各人有各人的观点、立场、标准,因此需要有一个共同的尺度来把各人的价值观统一起来,这是评价工作的一需要有一个共同的尺度来把各人的价值观统一起来,这是评价工作的一项重要任务。项重要任务。基于系统评价的重要性和复杂性,为了更好的做好系统基于系统评价的重要性和复杂性,为了更好的做好系统基于系统评价的重要性和复杂性,为了更好的做好系统基于系统评价的重要性和复杂性,为了更好的做好系统评价,基本原则如下:评价,基本原则如下:评价,基本原则如下:评价,基本原则如下:1.1.1.1.评价的客观性评价的客观性评价的客观性评价的客观性:评价的目的是为了决
18、策,因此评价的好坏直接影响评价的目的是为了决策,因此评价的好坏直接影响到决策的正确与否。评价必须客观反映实际,为此需注意以下几点:到决策的正确与否。评价必须客观反映实际,为此需注意以下几点:(1 1)保证评价资料的全面性和可靠性;)保证评价资料的全面性和可靠性;(2 2)防止评价人员的)防止评价人员的倾向性倾向性;(3 3)评价人员的组成要有代表性、全面性;)评价人员的组成要有代表性、全面性;(4 4)保证人员能自由发表观点;)保证人员能自由发表观点;(5 5)保证专家人数在评价人员中占有一定比例。)保证专家人数在评价人员中占有一定比例。2.2.2.2.要保证方案的可比性:要保证方案的可比性:
19、要保证方案的可比性:要保证方案的可比性:替代方案在保证实现系统的基本功能上替代方案在保证实现系统的基本功能上要有可比性和一致性。评价时绝不能以点盖面、要有可比性和一致性。评价时绝不能以点盖面、“一俊遮百丑一俊遮百丑”。个别。个别功能的突出只能说明其相关方面,不能代替其他方面的得分。功能的突出只能说明其相关方面,不能代替其他方面的得分。8.1.4系统评价的原则8.1.48.1.4系统评价的原则系统评价的原则 2.2.2.2.要保证方案的可比性要保证方案的可比性要保证方案的可比性要保证方案的可比性:可比性的另一个方面是可比性的另一个方面是可比性的另一个方面是可比性的另一个方面是指对于某个指标,我们
20、必须指对于某个指标,我们必须能够对方案作出比较,不能比较的方案当然谈不上评价,但是实际上有很多能够对方案作出比较,不能比较的方案当然谈不上评价,但是实际上有很多问题是不能做出比较或者不容易做出比较的,对这一点必须有所共识(根据问题是不能做出比较或者不容易做出比较的,对这一点必须有所共识(根据体统评价的目的)。体统评价的目的)。3.3.3.3.指标要成系统:指标要成系统:指标要成系统:指标要成系统:评价指标自身应为一个系统,具有系统的一切特征。另外评价指标自身应为一个系统,具有系统的一切特征。另外评价指标必须反映系统目标,因此应包括系统目标所涉及的一切方面。由于评价指标必须反映系统目标,因此应包
21、括系统目标所涉及的一切方面。由于系统目标是多元的、多层次的、多时序的,因此评价指标往往也具有多元、系统目标是多元的、多层次的、多时序的,因此评价指标往往也具有多元、多层次、多时序的特点。但这些指标并不是错乱无章的,而是一个有机的整多层次、多时序的特点。但这些指标并不是错乱无章的,而是一个有机的整体。因此制定评价指标必须注意它的系统性,即使对定性问题也应有恰当的体。因此制定评价指标必须注意它的系统性,即使对定性问题也应有恰当的评价指标或者规范化的描述,以保证评价不出现片面性。其次,评价指标必评价指标或者规范化的描述,以保证评价不出现片面性。其次,评价指标必须与所在地区和国家的方针、政策、法令的要
22、求相一致,不允许有相悖和疏须与所在地区和国家的方针、政策、法令的要求相一致,不允许有相悖和疏漏之处。漏之处。在实际应用中关于评价的原则问题,视具体问题不同应有所侧重。在实际应用中关于评价的原则问题,视具体问题不同应有所侧重。在实际应用中关于评价的原则问题,视具体问题不同应有所侧重。在实际应用中关于评价的原则问题,视具体问题不同应有所侧重。8.1.58.1.5系统评价的程序系统评价的程序系统评价是一项复杂的系统工程,为了保证整个过程高效、系统评价是一项复杂的系统工程,为了保证整个过程高效、有序的进行,往往应遵循以下步骤:有序的进行,往往应遵循以下步骤:1 1 1 1.确定评价目标:确定评价目标:
23、确定评价目标:确定评价目标:其目的是为了更好的决策,目标是评价其目的是为了更好的决策,目标是评价的依据,大致从四方面设置评价目标:的依据,大致从四方面设置评价目标:使评价系统达到最优;使评价系统达到最优;对决策的支持;对决策的支持;对决定行为的说明;对决定行为的说明;问题的分析。问题的分析。通常评价目标按照构成层次可分为总体目标、分层目标和通常评价目标按照构成层次可分为总体目标、分层目标和具体目标,这样就构成了具体目标,这样就构成了层次目标体系层次目标体系。2.2.2.2.提出评价方案:提出评价方案:提出评价方案:提出评价方案:根据系统目标,在分析各种信息的基础根据系统目标,在分析各种信息的基
24、础上,提出评价方案并对各评价方案做出简要说明,使方上,提出评价方案并对各评价方案做出简要说明,使方案的优缺点清晰明了,便于评价人员掌握。案的优缺点清晰明了,便于评价人员掌握。8.1.58.1.5系统评价的程序系统评价的程序3.3.3.3.确定指标体系:确定指标体系:确定指标体系:确定指标体系:评价指标体系是根据系统目标的层次、结构、特点、类型评价指标体系是根据系统目标的层次、结构、特点、类型来设置的,评价指标体系设置要注意全面和重点结合,绝对目量标和相对来设置的,评价指标体系设置要注意全面和重点结合,绝对目量标和相对量指标结合,定量指标和定性指标结合。具体选择应注意以下几点:量指标结合,定量指
25、标和定性指标结合。具体选择应注意以下几点:评价指标必须与评价目的和目标密切相关;评价指标必须与评价目的和目标密切相关;评价指标应当构成一个完整的体系,即全面地反映所需评价对象的各个方评价指标应当构成一个完整的体系,即全面地反映所需评价对象的各个方面;面;评价指标应当尽可能的少,以降低评价负担;评价指标应当尽可能的少,以降低评价负担;确定评价指标时,要注意指标数据的可得性。确定评价指标时,要注意指标数据的可得性。4.4.4.4.选择评价模型选择评价模型选择评价模型选择评价模型(多属性多目标的):多属性多目标的):模型模型模型模型是系统评价的工具。是系统评价的工具。评价模评价模型本身是多属性、多目
26、标的。不同问题使用的评价模型可能不同,型本身是多属性、多目标的。不同问题使用的评价模型可能不同,同一个评价问题也可以使用不同的评价模型。同一个评价问题也可以使用不同的评价模型。因此,对选用什么评因此,对选用什么评价模型本身也要做出评价。一般应选用能更好地达到评价目的的评价模型本身也要做出评价。一般应选用能更好地达到评价目的的评价模型或其他适应的评价模型。价模型或其他适应的评价模型。趣味题:你会选择哪个方案?趣味题:你会选择哪个方案?目标目标 A B C DA B C D月薪(元)月薪(元)2200 2400 1800 22002200 2400 1800 2200工作弹性工作弹性 适中适中 低
27、低 高高 无无技能培训技能培训 计算机计算机 人员管理人员管理 计算机业务计算机业务 组织组织年假(天)年假(天)14 12 10 1214 12 10 12福利福利 健康牙科退休健康牙科退休 健康牙科健康牙科 健康健康 健康退休健康退休乐趣乐趣 很好很好 好好 好好 令人生厌令人生厌以一个理性人的角度,如何从以一个理性人的角度,如何从4 4个方案中选择最优决策?个方案中选择最优决策?8.28.2系统评价的指标体系系统评价的指标体系n n评价指标体系的确定n n构建评价指标体系应遵循的原则n n建立系统评价指标体系的方法8.2.18.2.1评价指标体系的确定评价指标体系的确定n n进行评价时首
28、先要确定评价指标,评价指标是衡量评价对象进行评价时首先要确定评价指标,评价指标是衡量评价对象优劣的依据。如果评价的指标不止一个,则这些评价指标就优劣的依据。如果评价的指标不止一个,则这些评价指标就构成了一个构成了一个评价指标体系评价指标体系评价指标体系评价指标体系。目标目标3目标目标4目标目标1目标目标2目标目标5目标目标6目标目标7目标目标88.2.18.2.1评价指标体系的确定评价指标体系的确定(续续)n n评价指标/体系如果不同,尽管评价方法相同,也会导致评价结果的差异或根本不同。n n评价指标的不同选择,有时直接决定了评价对象的优劣,因此,选择评价指标体系时,一定要尊重科学。n n若涉
29、及到拟评价问题过大或过复杂时,可以将指标分层。常用的指标(熟悉):n经济性指标:经济性指标:包括方案成本、产值、利润、投资额、税金、包括方案成本、产值、利润、投资额、税金、流动资源占用额、投资回收期、建设周期、地方性间接收益流动资源占用额、投资回收期、建设周期、地方性间接收益等。等。n社会性指标:社会性指标:包括社会福利、社会节约、综合发展、就业机包括社会福利、社会节约、综合发展、就业机会、社会安定、生态环境、污染治理等。会、社会安定、生态环境、污染治理等。n技术性指标:技术性指标:包括产品的性能、寿命、可靠性、安全性,以包括产品的性能、寿命、可靠性、安全性,以及工程的地质条件、设施、设备、建
30、筑物、运输等技术性指及工程的地质条件、设施、设备、建筑物、运输等技术性指标。标。n n资源性指标:资源性指标:资源性指标:资源性指标:包括项目所涉及的物资、水源、能源、信息、包括项目所涉及的物资、水源、能源、信息、土地等。土地等。n政策性指标:政策性指标:包括政府的方针、政策、法令、法律约束、发包括政府的方针、政策、法令、法律约束、发展规划等。展规划等。n时间性指标:时间性指标:如工程进度、时间节点、周期等。如工程进度、时间节点、周期等。n其他值指标:其他值指标:主要是针对具体项目的某些指标。主要是针对具体项目的某些指标。8.2.28.2.2构建评价指标体系应遵循的原则构建评价指标体系应遵循的
31、原则 评价指标是作为一种尺度来考核各备选方案的,并且要依据评价指标是作为一种尺度来考核各备选方案的,并且要依据考核的结果,来作为系统优选和决策的依据,因此确定指标考核的结果,来作为系统优选和决策的依据,因此确定指标体系应遵循一些普遍性的基本原则。体系应遵循一些普遍性的基本原则。uu整体性原则整体性原则整体性原则整体性原则:指标体系是从指标体系是从整体上整体上反映各个方案的效果,所以要构建反映各个方案的效果,所以要构建层次清楚、结构合理、相互关联、协调一致的指标体系,保证对方案评层次清楚、结构合理、相互关联、协调一致的指标体系,保证对方案评价的全面性和可信度。价的全面性和可信度。uu科学性原则科
32、学性原则科学性原则科学性原则:以以科学理论科学理论为指导,按照统一标准将指标进行划分层次为指导,按照统一标准将指标进行划分层次和类别,使得整体指标体系能将定性指标和定量指标结合,正确反映系和类别,使得整体指标体系能将定性指标和定量指标结合,正确反映系统整体和各要素之间的相互联系。统整体和各要素之间的相互联系。uu可比性原则可比性原则可比性原则可比性原则:指标体系的建立是为了评价,所以建立指标的时候要考指标体系的建立是为了评价,所以建立指标的时候要考虑各个指标的可比性。虑各个指标的可比性。uu实用性原则实用性原则实用性原则实用性原则:建立指标体系是为了进行方案评价,所以指标的含义必建立指标体系是
33、为了进行方案评价,所以指标的含义必须明确,还要考虑须明确,还要考虑数据资料的可得性数据资料的可得性,另外指标设计必须符合国家和地,另外指标设计必须符合国家和地方的方针、政策、法规,口径和计算要与通用的会计、统计、业务核算方的方针、政策、法规,口径和计算要与通用的会计、统计、业务核算协调一致。协调一致。小结:指标选择的要求n n 指标宜少不宜多指标宜少不宜多,宜简不宜繁宜简不宜繁n n 指标应具有独立性指标应具有独立性n n指标应具有代表性指标应具有代表性:反映评价对象某方面反映评价对象某方面的特性的特性n n指标应具有可比性指标应具有可比性n n指标应具有可测性指标应具有可测性:有稳定的数据来
34、源有稳定的数据来源8.2.38.2.3建立系统评价指标体系的方法建立系统评价指标体系的方法 用于建立系统评价指标体系的方法很多,本节将着重介绍以下三种方法:n n目标分析法n n输出分析法n n德尔菲方法8.2.38.2.3建立系统评价指标体系的方法建立系统评价指标体系的方法n目标分析法:目标分析法:首先确定系统目标,然后从系统目首先确定系统目标,然后从系统目标入手,通过对目标进行分解来建立系统综合评标入手,通过对目标进行分解来建立系统综合评价指标体系。步骤如下:价指标体系。步骤如下:(1 1)建立系统目标;)建立系统目标;(2 2)对系统目标不断分解,直到认为各子目标能够)对系统目标不断分解
35、,直到认为各子目标能够用定量或定性的指标衡量为止;用定量或定性的指标衡量为止;(3 3)根据分解得到的目标体系,建立评价指标体系。)根据分解得到的目标体系,建立评价指标体系。举例见课本举例见课本P200P200:n n例如例如,某企业由于生产规模的扩大,考虑新建一个厂部,用某企业由于生产规模的扩大,考虑新建一个厂部,用于生产加工。厂址选择是一个多目标决策问题。于生产加工。厂址选择是一个多目标决策问题。n n这些目标包括这些目标包括技术、经济、环境、与国家政策一致性等几个技术、经济、环境、与国家政策一致性等几个方面,方面,由于它们很难直接用一个或几个指标来衡量,所以,由于它们很难直接用一个或几个
36、指标来衡量,所以,应进一步分解成更加具体的子目标,直到可便于处理的一个应进一步分解成更加具体的子目标,直到可便于处理的一个或几个评价指标来衡量这些子目标为止。或几个评价指标来衡量这些子目标为止。如何建立指标体系合适的厂址合适的厂址合适的厂址合适的厂址技术技术技术技术经济经济环境环境直接效益直接效益间接效益间接效益投资额投资额建设周期建设周期资金回收期资金回收期每年可创利润和税金每年可创利润和税金抗风险能力增强抗风险能力增强企业影响力的增长企业影响力的增长交通交通资源资源空中交通空中交通公路和铁路交通公路和铁路交通河海交通河海交通土地土地各种各资源n n输出分析法:1.1.适用于:对系统的内容、
37、结构不了解或不需要更多了解适用于:对系统的内容、结构不了解或不需要更多了解的情况下来建立系统的评价指标。的情况下来建立系统的评价指标。2.2.主要根据系统的输出特性,从技术、经济、社会、生态主要根据系统的输出特性,从技术、经济、社会、生态环境、风险方面来建立系统综合评价指标体系。环境、风险方面来建立系统综合评价指标体系。举例:用输出分析法建立一个企业信息系统的评价指标体举例:用输出分析法建立一个企业信息系统的评价指标体系。系。经济方面、技术方面、社会方面、生态方面如何设经济方面、技术方面、社会方面、生态方面如何设置指标:置指标:经济方面经济方面 可以用利润、成本、资金流动可以用利润、成本、资金
38、流动率等指标率等指标 技术方面技术方面 集成实现能力等指标集成实现能力等指标 社会方面社会方面 企业形象等指标反映企业形象等指标反映 生态环境生态环境 环境污染指标环境污染指标n n德尔菲方法(理论应用广泛):1.1.概念:德尔菲方法是通过反复征求专家意见建立系统评价指概念:德尔菲方法是通过反复征求专家意见建立系统评价指标的一种方法。标的一种方法。2.2.应用步骤:应用步骤:组成专家小组;组成专家小组;向所有专家提出问题及有关要求,并附上有关问题的所有向所有专家提出问题及有关要求,并附上有关问题的所有背景材料;背景材料;各个专家根据他们所收到的材料,提出自己的意见;各个专家根据他们所收到的材料
39、,提出自己的意见;让专家比较自己同他人的不同意见,修改自己的意见和判让专家比较自己同他人的不同意见,修改自己的意见和判断;断;将所有的专家意见收集起来,汇总,再次分发给各位专家,将所有的专家意见收集起来,汇总,再次分发给各位专家,以便第二次修改;以便第二次修改;对专家意见做综合处理。对专家意见做综合处理。8.38.3评价指标的权重(重点节)评价指标的权重(重点节)n n1.1.确定评价指标权重的重要性和基本原则确定评价指标权重的重要性和基本原则n n2.2.系统评价指标权重的确定系统评价指标权重的确定 相对比较法相对比较法 连环比率法连环比率法 判断矩阵法判断矩阵法 德尔费法德尔费法指标权重的
40、确定n n确定评价指标权重的重要性确定评价指标权重的重要性:在整个评价指标体系中,确定各评价指标的权重,就是要确定各评价对象在总体评价中的重要程度,并对这种重要程度做出量化。我们把各评价指标在现实系统目标和功能上的重要程度定义为权重权重。权重确定的是否合理,往往直接关系到评价的质量,影响到最终的决策。n n权重差异的原因:权重差异的原因:(1 1)评价者对各指标的重视程度不同)评价者对各指标的重视程度不同,反映评价者的主观差异反映评价者的主观差异 (2 2)各指标在评价中所起是作用不同)各指标在评价中所起是作用不同,反映各指标间的客观差异反映各指标间的客观差异(3 3)各指标的可靠程度不同)各
41、指标的可靠程度不同,反映各指标所提供信息的可靠性不反映各指标所提供信息的可靠性不同同n n确定评价指标权重的基本原则:确定评价指标权重的基本原则:n n 1.1.权数的取值范围应尽量方便于综合评价值得计算。权数的取值范围应尽量方便于综合评价值得计算。权数总值一般取权数总值一般取1 1,1010,100100或或10001000等。当评价指标等。当评价指标数值接近时,权重的取值范围应适当大些,以拉近数值接近时,权重的取值范围应适当大些,以拉近各个方案的差距,另外还要和指标评价值相配合,各个方案的差距,另外还要和指标评价值相配合,二者不能相差太大,否则会削弱指标评价值的重要二者不能相差太大,否则会
42、削弱指标评价值的重要性。性。n n2 2.指标的权数分配应反复听取各种意见并灵活处理。指标的权数分配应反复听取各种意见并灵活处理。避免为了取得一致意见而轻率地作出决定。为此可避免为了取得一致意见而轻率地作出决定。为此可采用采用DelphiDelphi法广泛征求意见,使权数分配尽量达到法广泛征求意见,使权数分配尽量达到合理。合理。n n3.3.权数的分配方式,应采采取从粗到细的给值方式。权数的分配方式,应采采取从粗到细的给值方式。先粗略地把权数分配到指标大类,然后再把大类所先粗略地把权数分配到指标大类,然后再把大类所得到的权数细分到各个指标。保持大类指标权数的得到的权数细分到各个指标。保持大类指
43、标权数的比例就从整体上保证了评价指标的协调和评价的合比例就从整体上保证了评价指标的协调和评价的合理。(见课本理。(见课本9-19-1所示)。所示)。指标权重的确定方法之一:相对比较法指标权重的确定方法之一:相对比较法1.1.1.1.方法介绍:方法介绍:方法介绍:方法介绍:相对比较法是一种经验评分法。它将所有指标列出来,组成相对比较法是一种经验评分法。它将所有指标列出来,组成相对比较法是一种经验评分法。它将所有指标列出来,组成相对比较法是一种经验评分法。它将所有指标列出来,组成一个一个一个一个N*NN*NN*NN*N的方阵;然后对各指标两两比较并打分;最后对各指标的得分的方阵;然后对各指标两两比
44、较并打分;最后对各指标的得分的方阵;然后对各指标两两比较并打分;最后对各指标的得分的方阵;然后对各指标两两比较并打分;最后对各指标的得分求和,并做规范化处理。需要注意的是方阵的对角上的元素可以不填求和,并做规范化处理。需要注意的是方阵的对角上的元素可以不填求和,并做规范化处理。需要注意的是方阵的对角上的元素可以不填求和,并做规范化处理。需要注意的是方阵的对角上的元素可以不填写,也不参加运算;打分时可采用写,也不参加运算;打分时可采用写,也不参加运算;打分时可采用写,也不参加运算;打分时可采用0-10-10-10-1打分法;方阵中元素可以按照下打分法;方阵中元素可以按照下打分法;方阵中元素可以按
45、照下打分法;方阵中元素可以按照下面的规则进行确定,并满足面的规则进行确定,并满足面的规则进行确定,并满足面的规则进行确定,并满足a a a aijijijij+a+a+a+ajijijiji=1=1=1=1。a a a aij=ij=2.2.2.2.计算计算计算计算i i i i的权数系数:的权数系数:的权数系数:的权数系数:3.3.3.3.实际中应注意实际中应注意实际中应注意实际中应注意:各指标间相对重要程度要有可比性:指标体系中任意两个指标能通过各指标间相对重要程度要有可比性:指标体系中任意两个指标能通过各指标间相对重要程度要有可比性:指标体系中任意两个指标能通过各指标间相对重要程度要有可
46、比性:指标体系中任意两个指标能通过主观判断确定彼此重要性的差异;主观判断确定彼此重要性的差异;主观判断确定彼此重要性的差异;主观判断确定彼此重要性的差异;应满足指标比较的传递性:应满足指标比较的传递性:应满足指标比较的传递性:应满足指标比较的传递性:f f f f1 1 1 1比比f f f f2 2 2 2 重要,重要,重要,重要,f f f f2 2 2 2比比f f f f3 3 3 3重要,则重要,则重要,则重要,则f f f f1 1 1 1 比比比比f f f f3 3 3 3重要。重要。重要。重要。看课本中的例题看课本中的例题看课本中的例题看课本中的例题P203P203P203P
47、203:专家打分方法确定权重专家打分方法确定权重 各评价因子权重比例为各评价因子权重比例为A A:B B:C C:D=75D=75:5757:3333:1818,经归一化处理后,权重分配为经归一化处理后,权重分配为 A A:B B:C C:D=0.41D=0.41:0.310.31:0.180.18:0.100.10。指标权重的确定方法之二:连环比率法指标权重的确定方法之二:连环比率法1.1.方法解释:方法解释:连环比率法连环比率法以任意顺序排列指标,按此顺序从以任意顺序排列指标,按此顺序从前到后,相邻两指标比较其相对重要性,依次赋以比率前到后,相邻两指标比较其相对重要性,依次赋以比率值,并赋
48、以最后一个指标得分值为值,并赋以最后一个指标得分值为1 1。从后到前,按比。从后到前,按比率值依次求出各指标的修正评分值。最后归一化处理得率值依次求出各指标的修正评分值。最后归一化处理得到各指标的权重。到各指标的权重。2.2.步骤:步骤:(1 1)以任意顺序排列)以任意顺序排列n n各指标,不妨设为各指标,不妨设为f f1 1,f f2 2,f fn n。(2 2)填写暂定分数列()填写暂定分数列(RiRi)。)。(3 3)填写修正分数列)填写修正分数列(KiKi),),k ki i=r ri i*k*ki+1 i+1 (i=1,2i=1,2,n-1n-1)。)。(4 4)对所有修正分数求和并
49、计算得分系数)对所有修正分数求和并计算得分系数w wi i,W Wi i =kiki/(i=1,2,i=1,2,n n)。)。P203P203例题例题8.4系统综合评价系统综合评价系系统统综综合合评评价价就就是是利利用用模模型型和和各各种种资资料料将将评评价价对对象象在在系系统统各各项项指指标标上上的的特特征征进进行行综综合合处处理理的的方方法法,因因此此综综合合评评价价要要从从系系统统整整体体的观点出发,综合分析对象的利弊得失。的观点出发,综合分析对象的利弊得失。系统评价的步骤系统评价的步骤系统评价的步骤系统评价的步骤 系统评价方法:系统评价方法:系统评价方法:系统评价方法:(关联矩阵法(关
50、联矩阵法(关联矩阵法(关联矩阵法 相关系数法相关系数法相关系数法相关系数法 功效系数法功效系数法功效系数法功效系数法)8.4.1系统评价的步骤系统评价的步骤一般的系统评价主要有以下几步一般的系统评价主要有以下几步(1)评价系统分析评价系统分析 这是在进行系统评价时所必须进行的工作,以达到明这是在进行系统评价时所必须进行的工作,以达到明这是在进行系统评价时所必须进行的工作,以达到明这是在进行系统评价时所必须进行的工作,以达到明确系统目标,熟悉系统方案。在这一步中主要进行评价目确系统目标,熟悉系统方案。在这一步中主要进行评价目确系统目标,熟悉系统方案。在这一步中主要进行评价目确系统目标,熟悉系统方