高等学校绩效评价报告.docx

1、高等学校绩效评价报告高等学校绩效评价报告高等教育研究中心简介：本报告为全国教育科学规划国家重点课题“高校绩效评价研究”(批准号:AI090007)的研究成果。本课题由中央教育科学研究所高等教育研究中心承担，研究报告于2009年12月9日在中国教育报第1版上发表.高校评价是保证高校办学质量、提高高校办学效益的重要手段,对促进高校发展具有重要意义.目前的评价与排行大都是依据高校既有存量进行的绝对评价，此类评价在提高高等教育质量方面发挥了重要作用,但也应看到绝对评价的缺陷非常明显,它不关注高校发展的条件和发展效益.开展绩效评价是对绝对评价的有益补充.我们针对72所教育部直属高校进行了绩效评价尝试。一

2、、高校绩效评价可以弥补绝对评价的不足随着我国高等教育进入大众化阶段,各种民间机构组织实施的高校评价及排行日益增多。这些评价对促进高校发展发挥了积极作用，但也存在着明显的不足。一是偏向以绝对量为评价标准,二是偏向对绝对量进行累加。由于存在上述偏向,其结果很容易导致一些负面影响。第一,形成评价的“马太效应。产出绝对量增加慢,绝对评价越低，获得资源的条件越弱;获得资源的条件越弱,产出绝对量增加越慢，绝对评价越低。这不仅不能充分体现高校办学资源的“边际效应”,而且还会损害高校的办学积极性。第二,加重资源的“自然获得”。长期以来，在我国高校财政资源配置上受建校历史、认定性重点、地区发展需要以及现有发展实

3、力等自然性因素影响很大,高校的资源获得并未进入完全竞争状态。绝对评价支持并加重了资源自然获得的惯性，绝对评价低的学校很难获得国家资源的有利配置,将陷入更为艰难的办学境地.第三,强化高校的“利益聚集”.学者维斯曾指出，在评估那些得到公共力量支持的实体时,会盘根错节地牵扯到政策的形成过程以及相关的利益群体.事实正是如此,作为高等教育的主要承担者,我国公立高校以及一些重点高校也得到了公共权力的绝对支持，并进而借助相关利益群体及其所附着的政治力量来影响决策并获得政策倾斜。绝对评价强化了高校的“利益聚集，绝对评价高的学校更容易聚集和壮大利益群体,并借此获得更多的政策支持和社会资源二、高校绩效评价可以满足

4、政府和高校新需要绝对评价自身的不足使其较难满足现实中以下两个方面的新需要,但高校绩效评价则可以从中发挥优势。一是满足政府实施高校绩效拨款的需要。政府有限的但仍然在逐年增加的财政拨款究竟发挥了多大作用?如何促使国拨资源配置向发展效益好的学校倾斜?如何为政府实施绩效拨款提供依据?高校绩效评价能够为政府解决这些问题提供有益的信息和数据支撑。二是满足高校了解办学资源利用情况的需要。高校或出于缺乏对资金支出绩效的认识,或出于追求近期发展效果的目的,在办学过程存在忽视资源利用效益的现象.如有的高校资金到账以后缺乏控制,突击花钱;有的改变资金使用方向，资金结构性浪费;专项拨款获得学校则凭借既定获得身份更加关

5、注怎样“多获得”而无暇顾及资金的使用效益,等等。高校的资金使用效益状况必然波及人力、物力配置的有效程度,从而影响高校的发展.绩效评价可以反映高校的资源利用情况，为高校调整与配置办学资源提供参考。三、高校绩效评价的基本思想与思路(一）基本思想高校绩效评价是运用一定的评价方法和标准，对高校利用办学资源实现其职能的效益进行综合性评价。本研究的高校绩效评价是基于投入产出理论的绩效评价,其基本思想是将投入向量与产出向量组成二维结构，依据“产出/投入”的数学模型构建体现高校绩效的“投入产出关系值”来评价高校的绩效,即从高校资源利用效益方面评价高校的绩效.(二)基本思路依据文献和专家讨论筛选出最初的投入和产

6、出指标,通过典型相关方法、聚类分析方法再次筛选并确立指标，选取主成分分析法获得投入综合指标得分和产出综合指标得分，运用“高校绩效得分产出综合指标得分/投入综合指标得分”（产出/投入）数学模型测算出高校的绩效值。1 评价方法的选择选择绩效评价方法有两个准则:第一,评价方法能综合体现投入与产出在数量、质量、功效、价值等方面的统一关系；第二,评价方法有助于将多产出、多投入比的问题,转化为单产出（函数）和单投入（函数)比,进而得到高校绩效值。为此,本研究选择的评价方法有典型相关方法、聚类分析方法、主成分分析法,以便于设计和筛选投入、产出指标,将其降维后计算投入综合指标得分和产出综合指标得分，再运用“产

7、出/投入”数学模型计算出高校的绩效分值。2 评价指标的确定(1)初设指标投入指标确立的依据是能重点反映高校办学在人力、物力、财力三方面的投入，产出指标的确立依据是能重点反映高校在人才培养、科学研究与社会服务三方面的职能。为此，结合相关文献研究成果,经过专家讨论设立的最初投入指标14项和产出指标16项。其中，当量在校生数=普通本、专（高职)生数+硕士生数1.+博士生数+留学生数+预科生数+进修生数+成人脱产班学生数+夜大（业余)0。+函授生0。当量学历在校留学生数=本、专留学生数+硕士留学生数1.+博士留学生数2。初设的投入指标(14个） 初设的产出指标(16个）校本部教职工总数(nm） 当量在

8、校生数(su) 博士学历教师占专任教师比例(dc_pe) 当量学历在校留学生数(orsu)副高以上比例(fg_pr) 百篇优秀博士学位论文数（hundeds_doc）研究与发展全时人年数（_d) 国内学术刊物发表论文数(homepaper)社科/科技活动人员数(s_) 国外学术刊物发表论文数(forpaper）科研经费投入（ript） 国际学术会议提交论文数（iner_co）教育经费投入（du_int) 出版专著数(ok） 其他经费拨款投入(other_npu） 国家最高科学技术奖特等奖数(m_prize）本年完成基建投资总额（bnwcz) 国家三大科技奖一等奖数（_prize)固定资产总额(

9、cap_assert) 国家三大科技奖二等奖数（spz）实验室(实习场所)面积(lab） 省部级科学研究与发展成果奖数(pp_prz)图书册数（li_boo) 发明专利授权数(iht)图书馆面积（lib_are） 鉴定成果数(iden_rs）教室面积（lroo) 国家级项目验收数（country_p)技术转让当年实际收入金额(tehinom） 专利出售当年实际收入金额（ih_incom)(2）筛选与确定指标第一轮筛选：典型相关分析典型相关是研究两组变量之间相关性的一种统计学分析方法。在统计分析中,针对单一变量间的相关关系可以计算简单相关系数，针对单一变量与一组变量之间的关系可以计算复相关系数或

10、者回归，但是计算两组变量之间的相关系数要计算典型相关系数。典型相关方法可以将多变量与多变量的相关转变为两组典型变量间的相关,典型相关分析建立的第一对典型变量的原则，是尽量使所建立的两个典型变量之间的相关系数最大化,即在两个变量组各自的总变化中寻找它们之间最大的一部分共变关系，并用一对典型变量所描述。然后,继续在两组变量剩余的变化中寻找第二个最大的共变部分，形成第二对典型变量,并解出第二维度上的典型相关。这样的过程不断继续，直至所有变化部分被提取完毕.第二轮筛选：聚类分析聚类分析是多元统计分析中的一种定量分类方法，旨在把“性质相近”或“相似”的变量（型聚类针对变量）聚在一起,使每一类变量之间具有

11、较大的相似性,更具代表性和简明性,既能保留指标信息,又能避免指标信息的重复。在进入指标的聚类分析前，先将投入指标和产出指标进行标准化处理(Z分数转换)，目的是消除各指标的量纲影响,使指标之间具有可比性。聚类分析的过程:基于R型聚类，分别对投入指标和产出指标进行聚类；基于产出指标组和投入指标组的阕值，分别确定产出指标组以及投入指标组划分的类别,每一类通过计算相关系数、变异系数等方法进行分析,确定筛掉的指标;基于筛选前指标对样本进行聚类，并基于筛选后指标对样本进行分类,比较前后分类结果，如果结果较为稳定，则说明所挑选指标在最具代表性的同时,保留了原有指标信息的最大化。四、高校绩效评价的尝试为了使高

12、校绩效评价思想和方法不停留于描述层次，本研究对72所高校2006208三年的投入与产出进行了绩效评价的初步尝试，数据来源为0年、007年、2008年三年的教育部直属高校基本情况统计资料汇编.(一）筛选评价指标 第一轮基于典型相关分析的指标筛选：相关性角度在最初确定的投入指标组(14个指标)和产出指标组(1个指标)之间,采用STATA统计软件的anon命令进行处理,得出如下结果。（1）典型相关系数及其检验表典型相关系数序号典型相关系数Pr10。97190.000*2089800.000*3.84160.000*40.61420.000*50。53220。00060.4181。004*70.320

13、.0070*0。510。036490.3040。474由表1可知,经过2统计量检验,以0.0为显著性水平,前八对典型变量间的相关系数较高，因此,我们基于前八对典型变量作进一步的投入与产出变量筛选。（2）投入与产出变量的选择分别计算每一个投入变量和每一个产出变量与前八组典型变量之间的典型负荷,在P0.5的显著性水平,除鉴定成果(idn_res)这项指标外，其余的投入(产出）指标间都与某项典型投入（产出）变量之间存在显著的相关关系，这说明所选择的产出指标组和投入指标组之间存在不同程度的相关关系.因此，经过投入产出指标组相关性的筛选后，有项产出指标和1项投入指标进入下一轮的筛选。2 第二轮基于聚类分

14、析的指标筛选：代表性的角度在进入指标的聚类分析前，先将投入指标和产出指标进行标准化处理（计算Z分数），目的是消除各个指标的量纲影响，从而使得指标之间具有可比性。在图1和图2中，我们呈现了基于平均距离的聚类方法的分类结果，直观地看,在2。5的闋值下,投入指标分为11类，其中校本部教职工总数、研究与发展全时人员、社科/科技活动人员为一类，教育经费投入、固定资产总额为一类，其余指标各为1类；产出指标分为类,其中当量在校生数、国内学术刊物发表论文数为一类，国外学术刊物发表论文数、发明专利授权数为一类，其余指标各为类.图1投入指标的聚类图图2产出指标的聚类图基于指标聚类分析结果，需要在投入指标类校本部教

15、职工总数、研究与发展全时人员数、社科/科技活动人员数,教育事业经费投入、固定资产总额,以及产出指标类当量在校生数、国内学术刊物发表论文数、国外学术刊物发表论文数、发明专利授权数中分别挑出最具代表性的指标.经过统计分析与研究，从这三类指标组中最后挑选出的指标为:校本部教职工总数、研究与发展全时人员、当量在校生数、国外学术刊物发表论文数。其余指标落选的原因如下: “社科/科技活动人员数”指标的落选原因:一是该指标与“校本部教职工总数”的相关系数高达0.97,与“研究与发展全时人员数”的相关系数为0.918,“校本部教职工总数”与“研究与发展全时人员数的相关系数为0.3，这说明这三项指标间的信息重叠

16、性非常大;二是该指标与“校本部教职工总数”、“研究与发展全时人员数”指标的原始数据变异系数依次为0。64、0.630和0.，从变异系数越大指标区分度越高的角度来看,“社科/科技活动人员数”的代表性较低。“固定资产总额指标落选原因:高校财力成本主要表现为教育投入、科研投入以及基建投入,固定资产来自于这三方面投入的多年累积，它与教育投入、科研投入以及基建投入的相关性都比较大,其所含信息可以由其余几项指标包含。 “国内学术刊物发表论文数”指标落选原因：该指标与“当量在校生数”的相关性高达。91，说明这两项指标所含信息重叠较大；该指标更多体现了学校产出的规模特点，而当量学生数是衡量学校规模的传统指标。

17、“发明专利授权数”指标落选原因:该指标与“国外学术刊物发表论文数”指标的相关系数高达0.8，说明“发明专利授权数与“国外学术刊物发表论文数”两项指标的信息重叠量非常之大；1所财经类院校在这项指标上全为0,从可比性而言，该项指标并不理想;“专利出售当年实际收入较好地体现了学校发明专利的质量状况。（二)验证与确定评价指标1 入选指标包含的信息量分析为了衡量删除指标后样本信息的流失情况,我们基于原始的14项投入指标、6项产出指标,以及筛选后的12项投入指标、13项产出指标,在每一年度，分别对所高校进行快速聚类分析（均分为类，共进行了1次快速聚类).表2呈现了各个年度基于投入（产出)指标组进行聚类分析

18、所得到的学校所属类别间的简单相关系数,从中可以看出，前后两次样本聚类信息的相关系数最低为。6 5,最高达到0.5 2，表明删除两个投入指标以及3个产出指标并未对样本聚类情况造成太大的影响,这说明筛选的指标代表性比较好,基本包含了分析对象具有代表性的特征信息,能够较好满足指标设计的特异性原则和代表性原则。表2原始指标样本聚类信息与筛选后指标样本聚类信息间的相关系数原始14项投入指标06年投入指标20年投入指标08年投入指标筛选后12项投入指标2006年投入指标0.43-207年投入指标-0。 6165-208年投入指标-0.9752原始1项产出指标00年产出指标2007年产出指标2008年产出指

19、标筛选后13项产出指标206年产出指标0。8-207年产出指标。9341-208年产出指标-0。8332 入选指标对落选指标的替代性分析用筛选前的1项投入指标对样本进行主成分分析，其中前三个主成分合计包含了78 77的信息；用筛选后12项投入指标进行主成分分析，包含了9.34的信息。将两组主成分得分进行典型相关分析,计算得到三对典型变量间的相关系数分别为0。999（.000）、.994（0000）以及97 9（。000），其中括号外的数字为对应的相关系数，括号内的数字为该相关系数对应的显著性水平。接下来,用筛选前的16个产出指标对样本进行主成分分析，其中前四个主成分合计包含了79.64%的信息

20、,用筛选后的个产出指标对样本进行主成分分析，其中前四个主成分合计包含了81。1%的信息;将两组主成分得分进行典型相关分析，计算得到四对典型变量间的相关系数分别为0999 (0。000)、0。95 9(000）、0.984 9（.000）以及0.823（0.0),其中括号外的数字为对应的相关系数,括号内的数字为该相关系数对应的显著性水平。经过这样的筛选和验证之后，最后确立的12项投入指标和13项产出指标将放入绩效评价模型运行。（三)测算产出和投入得分要计算投入指标的综合得分以及产出指标的综合得分,关键在于如何确定单个投入指标和单个产出指标的权重。权重用于衡量在综合指标中单个指标的贡献程度，研究所

21、确定的权重合理与否，将直接影响到结论的公正性和准确性.本研究选择兼有信息量权数和系统效用权数性质的主成分分析权数。为了能尽可能保留已确立指标的信息，我们运用主成分分析法分别计算年度产出、投入指标得分。1 产出指标得分对3项产出指标进行主成分分析,计算得到各个主成分的特征值及其方差贡献率,如表3。表3产出主成分的特征值及其方差贡献率主成分原始特征值及方程贡献率特征值方差贡献率累计方差贡献率16。0830。483320。6833221.140.136260.606931.5400.150。72454117950。97310.861895.54689。041130.853196。4520270.34

22、710.92070.3962.027530.96280。2751011160。9074390。2573380.7950。6053810.219260.691.97410129768.99820。9874312。107150。007740.9185主成分个数提取的一个原则是提取主成分对应的特征值大于的前几个主成分。因此,只需要用四个主成分就可以替代原先3个指标所包含的81。6的信息。通过因子载荷矩阵,将因子负荷除以对应特征值的平方根,就可以得到每一个主成分对应的特征向量表，进而分别得到3个主成分对应的函数(函数式略）。然后，将20062008年各学校的各项产出指标数据代入个主成分函数中，即可计算

23、出各年度各学校的个主成分得分由于方差贡献率描述了各主成分在反映各个原始指标信息量方面的能力大小，所以，将各主成分的方差贡献率作为各主成分的权重,实际上就是一种客观赋权。因此, 以各主成分的方差贡献率比重为权数,对个主成分进行加权平均，就可得到产出指标得分。计算公式为：Y=(0。468 3F11 6 +0。1185F+0。07 F4)0。816 2,其中，Y表示产出指标的综合得分,1表示第一主成分得分(0.468 3为第一主成分的方差贡献率),F表示第二主成分得分(0。3 为其对应的方差贡献率）,3为第三主成分得分(0。1185是对应的方差贡献率),F4为第四主成分得分（0.0 是对应的方差贡献

24、率）,0。816 2是前4个主成分的累计贡献率。将各产出指标的值代入公式即可得到各学校各年度的产出指标综合得分,基于各指标的三年算术平均值可得到三年整体产出综合得分.2 投入指标得分对项投入指标进行主成分分析,计算得到各个主成分的特征值及其方差贡献率，如表。表4投入主成分的特征值及其方差贡献率主成分原始特征值及方程贡献率特征值方差贡献率累计方差贡献率16.10。5595960。559962。040.1257880.685333。296040.1080090.733940.804224.07190。6115043911036560。970060。881610.240130。921027。6850

25、.021509431480。2384。8630.961828。19340。061120.79410。147950。023290。990611。019。058430.96112。046650.0038881基于在产出指标中提取主成分同样的准则，我们对投入指标也取前3个主成分替代原先的1个指标,可以包含全部指标的9。33%的信息。将2062008年各学校的各项投入指标数据代入3个主成分的函数中，计算出各年度各学校的个主成分得分，以各主成分的方差贡献率比重为权数,对3个主成分进行加权平均,得到投入指标综合得分.投入指标综合得分的计算公式为:=(。559 1.15 F2+0。180F3)0.7934，

26、其中,Y表示投入指标的综合得分,1表示第一主成分得分(559 为第一主成分的方差贡献率）,F2表示第二主成分得分(.12 7为其对应的方差贡献率）,F3为第三主成分得分（0.108 是对应的方差贡献率）,0。93 4是前个主成分的累计贡献率。将各投入指标的值代入公式即可得到各学校各年度的投入指标综合得分,基于各指标的三年算术平均值可得到三年整体投入综合得分.(四)测算高校绩效得分在计算绩效得分之前，先将前面研究中得到的投入指标综合得分和产出指标综合得分进行T分数的折算,使其均为正值。运用高校绩效得分=men（TOutome）man(Tnpt）i数学模型,测算出72所高校006-2008年三年的

27、绩效得分。7所高校的三年整体投入综合得分、三年整体产出综合得分、三年绩效整体得分及排序如表所示.表5 72所高校绩效评价结果与排序三年整体投入综合得分三年整体产出综合得分三年整体绩效得分分值排序分值排序分值排序清华大学1。0000011.000001。00001北京大学0。1102.77092.848东北大学0。271928.226610。83813中国人民大学0.304270.083990.83254电子科技大学0。73.2189200。803075复旦大学0。0607.454075336北京语言大学0。498470。071362。745007中南大学。45860。321720.1558浙江

28、大学。84430.5841230.69189北京科技大学0。3114831.2114220.65750华中农业大学。1881530.1148338。635911山东大学0.800.334460。608912天津大学。39070250。22688150。58013中国矿业大学。32070300.185844。7974东华大学。209834019670733华东理工大学0.30932.1743260。5681916南京农业大学0。20350.113540055917合肥工业大学.17391580。09469450.544018西安交通大学0.286200。2081.52119华中科技大学.576711