英国高等教育机构科研卓越框架体系评估分析 2014年底，英国备受瞩目的“科研卓越框架”(Research Excellence Framework, REF)评估结果公布，标志着REF取代“研究评估考核”(Research Assessment Exercise, RAE)登上了英国高校科研评估历史的舞台，也标志着英国高等教育机构科研评估体制完成了又一次改革一、REF评估体系概述英国高校的科研评估制度是英国政府通过高等教育拨款委员会对英国高校的科研活动质量进行综合评判的一种评估体制，旨在保证并提高英国高校科研活动的质量和高校科研活动资助经费的使用效率评估结果将直接决定英国政府对英国高校科研活动拨款的额度这种评估制度始于20世纪80年代1986年，英国开始实施面向大学的RAE体系，由英格兰高等教育拨款委员会(Higher Education Funding Council for England, HEFCE)、苏格兰拨款委员会(Scottish Funding Council, SFC)、威尔士高等教育拨款委员会(Higher Education Funding Council for Wales, HEFCW)和北爱尔兰学习就业部(Department for Employment and Learning，Northern Ireland, DEL)联合组织实施，以便政府能够根据各高等教育机构的实际研究水平拨付科研经费。
在RAE连续开展6次后，英国政府又于2008年委托英格兰高等教育拨款委员会和其他54所高等教育资助机构联合提出了一种新的科研评估与经费分配制度—REF体系，以改进和取代实施了20多年的RAE体系英国政府推出REF体系，主要目的是增强科研经费分配的公平性和简化经费申请过程，使其程序更为简洁，评估更为准确按照英国高等教育拨款委员会公布的评估实施时间表，该体系于2013年第一次运行，自2014年起，根据其评估结果分配每年17.6亿英镑的英国大学研究资金，并每隔4～6年开展一次评估一)评估目的REF评估体系通过专家小组来开展评估活动，专家小组对各高等教育机构提交的科学研究项目、活动和成果进行客观、科学、公正的评价，并作出判断，力求使评估活动达到以下四个方面要求：一是对英国高等教育所有高等教育机构提供权威、综合的卓越研究评级；二是向英国高等教育拨款机构提供有关研究资助分配方面的建议；三是向公众和学校提供有用的信息以及关于卓越研究的标准；四是解释高等教育领域内有关研究的公共支出等行为二)评估单元2014年的REF分为4个主要学科小组(Main Panels)：A组(Panel A)，以医药卫生等学科为主；B组(Panel B)，以工程学科为主；C组(Panel C)，以社会学科为主；D组(Panel D)，以人文艺术学科为主。
4个主要学科小组下又设立具体的36个分支小组(Sub-panels)，以及36个评价单位(Units of Assessment, UoA)，具体承担评估任务4大学科群基本涵盖了英国目前科研亟须发展的主要领域，36个评估单元为学科的拓展提供了更大的空间，减少了评估对科研细化的束缚，更为重要的是可以更好地促进交叉学科、多学科科研项目的发展，从而有效满足社会对科研的全方位需求三)评审委员会4个主要学科小组共设4位主要学科小组主席(Main Panel Chairs)、23名国际评审专家(International Members)、17名使用者成员(User Members)；36个分支小组共设36位分支小组主席(Sub-panel Chairs)36个评审单位共设1052位成员及评审委员(Members and Assessors)，其中77%是学术人员(Academics)，23%是使用者(Users)，以及25位专家咨询顾问(Specialists and Advisers)四)评估对象此次评审对象包括研究成果(Research Outputs)和影响力个案(Impact Case Studies)两大类。
2014年，REF评估共接受了154所英国高等教育机构的52061名专职学术人员(含教师及研究人员)提交的1911份评估申请其中，共有191150项研究成果和6975件影响力个案参与评审五)评估指标REF对评估对象的研究成果以综合质量(Overall Quality Profile)的方式来呈现，具体指标由科研成果质量(Quality of Research Outputs)、科研环境(Research Environment)、学术之外的影响力(Impact of Research Beyond Academia)三个部分构成其中，科研成果质量占评估权重的65%，是REF评估的核心要素，但其只关注代表性研究成果，并不是对参评者的全部科研成果进行综合评价；科研环境占评估权重的15%，主要评估科研资源、科研管理和科研业务三个方面；学术之外的影响力占评估权重的20%，主要集中评价科研单位在某一学科领域所开展的科研活动对经济、社会及文化等各领域所产生的重要影响以上每个指标按照4*世界顶尖(Worldleading)、3*国际卓越(Internationally Excellent)、2*国际认可(Recognized Internationally)、1*国内认可(Recognized Nationally)和无法分类(UnClassified，U/C)五个等级来评分，再根据权重加总，形成总评价结果，用来确定各大学在各个专业组的排名。
但这种排名只是针对某个专业和学校而不是某个科学家，并由此确定在下次评比之前某所大学的相关专业和整个大学从国家获得的研究经费六)评估方法在REF评估体系中，各学科组和小组可自行确定评价方法为了保证评价结果的可信度，评价委员会成员由从事高水平研究的专家组成，尽管这些专家会借助某些定量指标来辅助其专业判断，但同行评议是决定性的虽然诸如医药、科学、工程等学科的评估小组能够获得大量关于论文引用率的信息，在具体评估过程中往往会引入引用率等文献计量方法(艺术、人文以及许多其他学科小组一般不会这样做)，但REF体系已充分认识使用引用率进行评价的局限性，要求评估小组不仅依据引用率信息对研究成果的质量作出判断，同时要参考专家的主观判断评价委员会也主要依赖同行专家评价来评判研究的原创性、重要性和严谨性七)整体评估结果此次评审的结果显示，30%的参审项目得到4*；46%的项目得到3*；20%的项目得到2*；只有3%的项目得到1*；1%的项目得到U/C(详见表1)表1 2014 REF评估整体结果(单位：%)项目/权重4*3*2*1*U/C综合品质/10030.046.020.03.01.0科研成果质量/6522.449.523.93.6.6学术之外的影响/2044.039.913.02.40.7科研环境/1544.639.913.22.20.1二、2014 REF评估结果高校排名：以《卫报》REF排名为例英国每年有各类对高等教育机构的排名，与其他排行榜徒有“虚”名不同，REF体系的评审结果可谓是实实在在的“金”榜，它是2015-2016财年开始每年约20亿英镑的高校学术科研经费拨款的重要依据。
因此，REF排名引起了英国社会，尤其是各高等教育机构的空前关注虽然REF评估结果公布时，只提及各参评学校在各评审项目中的等级，并没有给出高校排名，但英国各媒体自然不会错过大好时机，纷纷根据REF的评审结果，依其自身设计指标，从不同角度给英国高等教育机构作出各自排名英国聚焦研究政策制定和科研资金的出版物《研究双周》(Research Fortnight)对REF的结果进行了数据分析，并通过英国《卫报》(The Guardian)发布了2014年英国154所大学排名(见表2)表2 《研究双周》2008年、2014年REF英国前10名大学2014年排名2008年排名学院名称4*占比（%）3*占比(%)11牛津大学48.1039.1023伦敦大学学院42.6039.5032剑桥大学46.8040.4045爱丁堡大学37.6044.9054曼彻斯特大学35.3047.3066帝国理工学院46.4044.20711伦敦大学国王学院40.2045.0087诺丁汉大学31.6048.60910布里斯托大学36.0047.30108利兹大学32.4050.40根据此排名(英国各媒体最广泛采用的排名)，英国高校学术研究质量呈现出三大发展趋势。
第一，牛津和剑桥大学虽名列前茅，但其传统霸主地位已受到挑战从表2可以看出，牛津大学始终保持第一，伦敦大学学院升至第二，剑桥大学排名第三，爱丁堡大学排名再升一位其他伦敦高校在学术研究质量方面对牛剑大学传统霸主地位的挑战也越发明显帝国理工学院和伦敦大学国王学院都位居前10名世界一流的学术研究在帝国理工学院最为集中，但因其师资相对较少，未能挤进前三名第二，英国高校的学术研究质量总体继续稳步提高22%的研究课题处于世界领先水平，而2008年时该数据为14%；其余研究课题中50%均被评为国际认可，比2008年提高了13%与其他国家相比，英国高校的每份学术报告平均比其他国家高校的学术报告被多引用6次，在全球最高引用率学术报告中，英国高校的学术报告占16%第三，在英国高校的学术研究质量总体稳步提高的背景下，北方的大学却在退步曼彻斯特大学从第4名降到第5名，利兹大学从第8名滑到第10名，谢菲尔德大学从第9名落到第12名，利物浦大学则从第18名落到第22名对此，《研究双周》创办人威廉鲍恩(William C Bown)表示，最大的输家是曼彻斯特大学、利物浦大学、谢菲尔德大学、伯明翰大学和利兹大学，北方受到了重创；牛津大学、剑桥大学胜出，伦敦大学学院是更大的赢家。
三、2014 REF评估对英国高校科研拨款的影响2015年3月，英格兰高等教育拨款委员会公布了2015-2016财年全英高校拨款计划在总额39.7亿英镑的拨款经费中，科研拨款超过16亿英镑，包括15.558亿英镑的常规性拨款(Recurrent Funding)以及5200万英镑的过渡性研究拨款(Transitional Research Funding)英格兰高等教育拨款委员会依旧是英格兰最大科研拨款机构根据2014 REF评估结果，英格兰高等教育拨款委员会拟定了2015-2016财年英国各高校所获得科研拨款的具体金额原则上，英格兰高等教育拨款委员会只对REF评为3*以上的学科及科研项目提供资助同时，不同星级的资助差距进一步拉大，4*和3*项目的资助差距将由往年的3倍提高至4倍从拨款分配结果来看，罗素集团(Russell Group)高校的科研实力最强，经费最为充足，共获得11亿英镑(70.8%)的科研拨款，其他1992年前成立的高校(Other Pre-92s)分得2750万英镑(17.7%)，大学联盟(University Alliance)高校获得780万英镑，百万强集团(Million+)高校表现欠佳，只获得210万英镑(1.4%)拨款，名列所有大学集团末位(见图1)。
图1 大学集团科研拨款分配图 -全文完-。