衡量科学影响力：简介 2014 年英国研究卓越框架（REF）报告

研究在科学以外的影响有多大？科学的影响力是可以量化的吗？自从有科学研究以来学者及一直在思考这些典型问题。然而，科学全球化使得评估在科学的投资产生什么样和多大的影响有其必要，于是乎，许多国家的基金单位都承担了评估研究质量以及研究对社会可能产生的潜在影响的任务，其中一例就是最近由英国高等教育基金委员会推动的大学研究审计活动：研究卓越框架（Research Excellence Framework，REF）。

衡量了英国高等教育机构进行的研究造成的影响，并帮助基金单位决定如何分配六年期的基金给各大学。以大学提交的研究为样本，REF 评估小组成员（包括学术界和产业界的专家）分析进行的研究和它产生的影响。他们评价研究在各个学科领域的影响，以及执行研究的大学的可信度。最近公布的 REF 报告是号称科研带给社的影响的集合，并以这些资料产生 REF 影响案例研究数据库，该数据库是一个检索工具，能分析案例研究并自动挖掘其中的内容文字，英国及国际上任何有兴趣的团体都可以使用数据库，进行进一步分析。提交的研究产出包括一些能影响全球的研究项目，如提高水质和水工业表现、在卫生保健中心的保健服务质量等。

关于 2014 REF 报告

REF 项目是一个浩大的工程，评委需要花费一年的时间审查提交的研究成果，以下是 2014 REF 报告的基本信息：

• 共有 154 个英国高等教育机构参与了这项活动。
• 共有 1,911 个提交，其中包括 191,150 份研究产出和6,975 个影响案例研究。
• 共有 4个主要评委和36个子评委会来审查提交的工作，组成人员包含 898 位学术成员和 259 位研究人员。
• 评委以“原创性、重要性和严谨性”为标准评估产出质量。

报告的主要发现

REF 报告指出，相较于英國學術研究評估（Research Assessment Exercise）早前进行过的分析，这次收到的研究产出质量大幅提高。报告中的其他重点：

• 被判定为世界领先的输出亚型的平均比例从 2008 年 RAE 的 14 个百分点上升到 2014 年 REF 的 22 个百分点。被判定为国际杰出的平均比例从 37 个百分点上升到 50 个百分点。
• 研究资金来源部分，38% 来自英国研究理事会（UK Research Councils）、19% 来自英国政府机构、19% 来自英国慈善机构、6% 来自英国工业和9% 欧盟政府机构。
• 超过 80% 的 REF 影响案例研究包括多个学科的基础研究。
• 影响案例研究多元且广泛，共找到超过 60 个独立的“影响主题”。
• 各个类型形式的研究都有亮眼表现，包括应用、基础、实践和战略研究，在研究的形式上付出的努力有合作、跨学科和多学科的研究。
• 递交的研究影响范围横跨多个学科领域，找出从研究到产生影响的途径超过 3,700 个。
• 在英国高等教育机构（UK higher education institutions，HEIs）进行的研究已在世界各国做出了贡献。

报告反映出研究的质量如何影响基金补助政策，并为研究的商业化提供方向。报告总结道，英国的研究已经对社会、经济、以及国内与全球的人民生活质量带来好处。

专家对 REF 报告的看法

虽然 REF 的报告中详细介绍了在英国进行的研究的质量和价值，一些专家仍指出了项目中的缺陷，准备和提交研究产出以及花一年的时间进行分析花费了大量的时间和金钱。英国兰卡斯特大学（Lancaster University）的历史学教授 Derek Sayer 就说：「根据官方资料，六年学术大逃杀的花费比例大约有 470 万英镑在大学，另外有 120 万英镑是英格兰高等教育基金管理委员会（HEFCE）的行政支出，其中的来源大部分是纳税人的钱。」

有些批评也指向研究产出的评估方法。Sayer 指出 REF 不借鉴国际同行评审的标准，评委会成员主要是隶属于英国大学的专家。此外，有些评委会中只有一个评委员评估提交的研究产出，这很有可能限制了整体性评估。如同《自然》（Nature）社论中提到的，可能，这可能是影响评估的表达方式背后缺乏标准化的原因。

要找出研究的定性和定量成果，需要一个广泛同意的方法。有些专家在意的另一个问题是 REF 的说法可能会阻碍创新，由于提交研究产出会直接影响高校经费，他们会猜想评委会认可的研究是哪些，然后调整提交的研究。在这场活动中，重新定义领域或开展了新领域的研究可能不会被拿出来。

尽管如此，REF 的报告表明，研究对社会和人类的生活质量带来的全球影响是可以被记录的，对了解科学如何进展的全局又向前进一步，令人欣喜，并对科研进展的脚步和方向提供指引。