公共组织目标多样性和功能结构复杂性的特点,决定了公共组织效能评估方法的多样性和复杂性。公共组织效能评估的方法主要包括: 指标要素的构建过程、技术指标的确定过程、组织实施的过程和再评估过程。
1. 构建指标要素的方法
在构建公共组织效能评估的指标要素过程中,可以有多种多样的方法,一般有以下几种常用的方法:
(1) 文献调查法。文献调查法也称历史文献法,就是通过搜集各种文献资料,摘取与调查和公共组织有关的信息,比如考评政府部门的教育局,首先必须查阅有关教育局的材料和信息,了解教育局的功能。
(2) 问卷调查法。为了科学地评估公共组织的效能,收集充分而有效的基础信息资料,保证评估结果的客观公正,问卷调查法也是一种比较常用的指标构建方法。问卷调查法是指评估者将一些需要了解的信息设计成书面问卷向被调查者 (通常是公共组织的服务对象) 询问,并要求被调查者以书面文字或符号形式做出回答,然后进行归纳整理分析,并得出一定结论的方法。
(3) 访谈法。访谈法是指评估主体通过和评估对象及有关人员进行面对面交谈、讨论并收集与评估有关的信息资料,并就评估对象的情况做出评估的一种方法。访谈法的最大特点在于,整个过程是评估者与被访问者在访谈过程中相互影响、相互作用的过程,因此它所获取的信息更全面、更直接和更真实。但是,此评估方法也是一种难度比较大的方法。
(4) 观察法。观察法是指评估者在一定时间内,对评估对象在一定状态下的特定表现情况进行观察、考察、分析,从而获得第一手资料的方法。
(5) 测量法。测量法是指运用各种测量工具 (教育、心理测验和其他量表) 测定评价对象的某些重要特征,从而搜集到有关评价信息的方法。所谓测量,就是按照一定的法则和程序给将要评估的对象属性和特征分配数值。而测验是对行为团体进行客观、科学和标准化测量的系统程序。
2. 确立技术指标的方法
(1) 指标权重的运用方法。指标权重,就是衡量指标在整个指标体系中所处位置的重要程度的数值表示。确定权重常用的方法有五种[3]: 定量统计法、专家评定法、比较平均法、对偶比较法以及层次分析法。
(2) 指标等级的运用方法。所谓指标的等级,就是指按照指标在指标体系中的重要程度进行的一种由高到低或者由低到高的排列或者顺序。常见的等级有百分等级,百分等级是一种常用的表示评估结果的方法。一个分数的百分等级可定义为: 在一个常模团体(即由具有某种共同特征的人所组成的一个群体或群体的一个样本) 中低于该分数的人数的百分比。常用的等级运用方法主要有以下几种:
第一,等级鉴定法。等级鉴定法是一种历史悠久、应用广泛的效能评估方法。在实施此评估方法时,评估者首先确定效能评估的标准,然后对于每个评估职能列出几个行为程度供评估者选择,最后给出总的评估。这种方法所需要的费用较少,使用方便。
第二,指标分值的运用方法。所谓指标的分值,就是反映达到指标的程度的大小或者多少的数值表示。这是技术指标中最重要的一种类型,运用十分广泛。其常用的方法有:一是,累积分数法。所谓累积分数法,就是根据评估标准对评估对象进行逐项评分,然后将各项所得的分数相加,就可以得到评估对象应得总分的方法。二是,标准分数法。由一般统计学和心理测量的知识可知,中等难度水平的测评指标所测评出来的结果的标准差较大,较易或较难水平的测评指标,所测评出来的结果的标准差较小。三是,模糊综合评估法。所谓模糊综合评估法,就是用模糊数学对受到多种因素制约的事物或对象作出一个总体的评估。模糊综合评估可以用来对公共管理中的人、事、物进行比较全面、正确的定量评估。
3. 组织实施评估的方法
评估实施方法是公共组织实施的基本条件,是评估顺利进行的基础,也是评估结果准确全面的保障。评估实施方法是对评估对象进行客观公正的评估的前提,为评估结果的分析和比较提供可能,从而达到评估应有的效果。由于公共组织的指标有量的方面,也有行为的方面,因此,公共组织效能的评估也必须采取有针对性的评估方法。(www.xing528.com)
(1) 选择评估对象的方法。评估实施过程中,首先要面对的是如何确定实施评估的对象。而确定评估对象的方法,主要是如何抽取样本和确定样本数的方法。抽样的方法主要有简单的随机抽样和等距抽样。
(2) 评估实施中的一般方法。包括:
第一,主观评估法。主观评估法是在被评估对象进行相互比较的基础上进行排序,提供一个被评估对象的相对优劣的评估结果。它主要包括图尺度评价法 (Graphic Rating Scale)、交错分布法 (Alternative Ranking Method)、成对比较法 (Paired Comparison Method) 和强制分布法 (Forced Distribution Method)。
第二,客观评估法。客观评估法是按照评估的标准给出一个量化的分数或程度判断,然后再将评估对象在各个方面的分数相加,即为评估对象的最后评估结果。它主要包括关键事件法和行为锚定法 (BARS)。
第三,目标管理法。目标管理法是根据部门领导与部门预先确定的目标作为标准,评估者根据衡量评估对象在规定时间内的目标实现程度来评估其效能的一种评估方法。它是一整套计划和控制系统,同时也是一套完整的科学管理体系。主要有以下六个实施步骤:确定组织目标,确定部门目标,讨论部门目标,对预期成果的鉴定,工作效能评价,提供反馈。
(3) 检验评估结果的方法。在评估对象确定,并且运用了各种评估实施的方法之后,我们就得到了评估的结果。但这并不意味着评估实施的过程已经结束,因为我们还需要对这个评估结果进行反馈。只有进行这种必要的结果反馈,评估实施过程才是完整的。而要获得评估结果的反馈信息,就要对其进行检验,这里主要采用正态分布的方法。
4. 进行再评估的方法
与其他的专业活动一样,公共组织效能评估活动在其实施的过程中难免会存在一些偏差,如: 评估信息不完整、评估方法不妥当、评估指标的设计过于主观等,这些偏差的存在不仅造成极大的资源浪费,而且更为严重的是,由低劣的评估所得出来的错误结论,将产生极大的误导,造成十分恶劣的影响。因此,评估活动本身也就应当成为评估对象,以保证评估工作的质量。
(1) 效度鉴定。评估效度是判断评估质量的重要技术指标。它是评估结果的有效性和准确性,即评估对其所要评判的特性准确评估的程度。也就是说,评估效度要求评估结果应当符合评估目的,并且与评估对象的实际情况相一致。如果评估效度很低,其实际效果必然不佳。
(2) 信度鉴定。评估信度也是判断评估质量的重要技术指标。它是指评估指标的可靠性、一致性和稳定性程度。评估如果信度很低,其结果就缺乏可靠性。
[1] 张建东: 《公共组织学》,高等教育出版社,2003年版,第280~284页。
[2] [美]马克·霍哲著,张梦中译: 《公共部门业绩评估与改善》,载《中国行政管理》,2000年第3期,第38~40页。
[3] 卓越: 《公共部门绩效评估》,中国人民大学出版社,2004年版,第102~110页。
免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。