破“SCI至上”，科研评估如何改进
【思想汇】
编者按
近日，教育部、科技部印发《关于规范高等学校SCI论文相关指标使用树立正确评价导向的若干意见》，旨在破除唯分数、唯升学、唯文凭、唯论文、唯帽子的顽瘴痼疾，“双一流”建设高校也被要求限期进行系统改进。“五唯”是片面理解和执行教育政策、功利主义泛滥的自然后果。解铃还须系铃人，教育及科技主管部门及时主导纠偏，引起了社会的广泛赞同。可以说，《意见》对扭转当前科研评价中存在的SCI论文相关指标片面、过度、扭曲使用等现象有喝止的功效，但破除论文“SCI至上”之后，如何探索建立起科学的评价体系，推动高等学校回归学术初心，净化学术风气，优化学术生态，绝非一日之功。为此，本刊将刊出系列文章，就破除“SCI至上”之后如何建立起科学的评价体系展开讨论。
作者：李军（加拿大西安大略大学教育政策与领导学系主任、全球教育合作中心主任、国际高等教育政策与领导学终身教授）
1.如何树立正确的科研评价导向？
近年来，大学在知识创新和转移方面的功能被矮化成细小的量化指标，科研活动被各种评估体系所掣肘，SCI变成横行大学和科研的指挥棒，学术生态被改写，大学的真正使命受到极大挑战。（详见拙作《全球排名和科研评估使大学深处危机》，载《光明日报》2016年8月23日第13版）。近日，教育部和科技部共同印发《关于规范高等学校SCI论文相关指标使用树立正确评价导向的若干意见》（以下简称《意见》），及时主导纠偏，引起了社会的广泛赞同。
合肥展出诺贝尔奖获得者画像展 光明图片
《意见》提出，破除论文“SCI至上”，探索建立科学的评价体系。达成这一目标，需要树立正确的科研评价导向，此中，有5个原则需要遵循。
囿于评估本身的局限，没有一项体系或模式可以对评估对象进行完美的评估。科研评估也不例外。换句话说，一个科研评估体系或模式必须预载并匹配评估目的，否则科研评估的信度和效度都将无从谈起。如何确立清晰且能够被广泛接受的、具有可行性的评估目的，就变得至关重要。这是必须首要树立的科研评估原则。
跟随评估目的而来的，是评估目的预载及体系匹配的复杂性。政府部门的评估，其目的应该更多体现在监管和促进国家宏观科研目标与任务的达成，并勇于承担公共问责。对于各大学而言，其评估目的则完全不同，要侧重于科研过程和产出，以促进院校的进一步发展和社会贡献为首要功能。评估的复杂性决定了这两个不同主体的评估体系或模式，必须是有差别同时有协同关联的。此外，即便考虑到目的的正确预载和方案的合理匹配，作为公共政策实施的一个重要环节，科研评估还会受到各种各样因素的制约，如体制框架、学科领域、院校特点、持份者、时空差乃至国际政治等等，进一步增加了其复杂性。
再次，正如绩效评估的天然局限一样，科研评估虽然是科研事业发展的必要环节，我们不能也不应该过分强调它的功能，而应该注意其应用的合理性与适切性，避免评估在科研和高教发展中的过于强势，导致评估主义的泛滥。日本的科研审计文化、台湾的SSCI综合症、香港的科研绩效主义都受到社会各界及专业团体的广泛批评，为我们提供了这方面的负面典型和前车之鉴。
科研评估的目的性、复杂性和合理性，决定了科研评估的第四个原则——创建和采用各类科研评估体系的慎重性。在采用某一种评估体系或模式之前，对它的背景、原理、适切度、正负面效应都应该作全面、科学和文化的综合了解，而不是仅仅限于技术操作层面上的肤浅理解，避免只见树木不见森林。对于借鉴而来的国际经验（包括SCI论文指标体系），这点尤为重要，而文化理解就显得十分关键。吃透其原理、精神及背后的复杂背景，才不至于盲目模仿、食洋不化。解决之道，当然不是坐井观天、闭门造车，而是拿出勇气、敞开胸怀、面向世界，强化和海外华人学者的深度合作。
任何一个科研评估体系或模式的成功应用，都离不开小范围、小类别的预运行。在获得充分的反馈之后，进行调整和完善，然后才能逐渐推广。这些步骤都是科研评估必经的科学之路。在此过程中，应当特别注意前面所提到的第二个原则，也就是科研评估的复杂性。考虑到我国科研、高教国情的复杂多元、参差不齐和超级体量，即便到了广泛推行的阶段，仍然不能一刀切，必须注意科学的限度与界度。这些就构成了科研评估不得不尊重的第五个原则——科学性。
令人乐观的是，教育界、科技界甚至公众都已清醒认识到科研评估的边限，不再迷信SCI论文的相关指标。正如教育部科技司负责人就《意见》答记者问时所说，SCI论文指标体系并非评价系统，不能对应于创新水平和实质贡献，也不能全面反映科技创新贡献，更不能把SCI论文简单等同于高水平论文；高引论文可能反映的是学术研究热点，但并不说明论文的创新贡献价值，也不适用对技术创新、成果转化等工作的评价；论文主要是基础研究成果的表达形式，SCI论文相关指标并不能全面反映科技创新贡献。这些都具有正本清源的积极意义。
2.后SCI时代如何改进科研评估？
对于后SCI时代的科研乃至大学评估，除了进行评估原则、限度的思考之外，还可以有什么改进方案呢？笔者多次受邀参加各大学的科研、教学或职称评估，曾先后在华东师大、香港大学、东京大学、马里兰大学、多伦多大学、香港教育大学、香港中文大学，以及现在的西安大略大学工作或学习。这些大学都符合中国的“双一流”大学标准和范畴，分别属于下述五个高等教育系统：中国内地、日本、中国香港、美国和加拿大。结合在这些大学的切身经历，笔者就科研评估提出以下四点改进建议，抛砖引玉。
第一，不忘初心是科研评估体系建设的根本出发点。在新管理主义盛行的时代，决策者和评估者常犯的一个共同错误，是把评估体系当作纯粹的管理工具，评估对象被野蛮地简单物化。后果当然是适得其反：被评估者或机构感到缺少应有的尊重，会产生应付评估、甚至弄虚作假的反效果。这种反效果对科研产出的负面影响不难想象。事实上，近些年来屡禁不止的数据造假、论文抄袭、友情引用、学术泡沫等等令人痛心的堕落现象，都是与初心渐行渐远的恶果之一。
中国内地、日本以及中国香港的大学都非常强调科研业绩，并与职称晋升、院校排名紧密挂钩，在科研评估中体现得淋漓尽致。“工作狂”“教授累如狗”是真实的写照，单身、无子、家庭或社区责任漠然、甚至变态，都是见怪不怪。美国情形稍好，但薪水通常只支九个半月，暑假一到教授们就被逼满世界找工作，非常影响工作状态。相较而言，教育和科研工作最令人舒畅的是加拿大的大学。笔者跟同事或上级谈及SCI论文或大学排名，大家常常不知我所言何物。这大概与加拿大是一个“享受型”的国家文化有关。作为一名学者，在这里能真切感受大脑是用来自由思考问题的，而非用来接受科研评估。因此，科研和教学反而有身心和工作环境的最好保障。
第二，牧羊式的代表作制度是相对合理的科研评估模式。自八十年代以来，笔者从来没有离开过大学的校园生活。四十年来的切身经历证明：学者可能在某个时期会出一些好的成果，但是不可能一辈子都出好成果——这是符合人的基本自然规律的！科研评估应该尊重和利用好这一自然规律，而代表作制度就是尊重这一自然规律的很好体现，有利于培育放养式、宽松良好的科研制度环境。这是为什么在科研评估体系中，代表作是被各国大学采用最广泛的一个基本制度。同样道理，代表作制度也适用于院校的科研评估，有利于把科研发展的自主权还给各大学。这样的院校赋权还能有益于促进高校的制度改进。
第三，与代表作制度相关的是同行评议。同行评议是科研评估最为常见的制度之一，国内个别高校也有试行，但却面临着不小的挑战。个中缘由，不言而喻。但是，也并非没有可替代的办法。其中，利用“互联网+”时代的网络共享技术和大数据平台，根据不同的学科领域，建立期刊论文（及其他学术成果）的国家专业评审人数据库，为学术成果评审搭建基于网络、开放式的国家管理平台，积极利用海外华人学者的科研资源，进一步强化盲审的透明制度建设，设立编辑和作者的问责机制，杜绝利益输送、裙带关系、人情发表等学术腐败现象，真正体现质量是期刊和出版社发表的唯一标准，让学术在阳光下健康地运行。
第四，制定激励科研成果国内优先发表的国家战略。在采用代表作制度的时候，如何取舍服务本土和面向世界之间的张力十分关键。科学知识是没有国界的，但科技的应用却是有疆界的。一个简单的道理是，科研工作必须有巨量人力和经费的投入成本。在美国总统特朗普上台后，美国对知识产权进行更为强力的保护和本土强化——包括采取对中国留学生的签证限制措施，就是最为直接的证明。
转变科研评估的观念，有利于制定激励科研成果国内优先发表的国家战略。其实施，可以帮助中国收回科研成本和知识产权，真正服务于本土的社会发展，增强中国的文化自信，增强全球科技界、教育界、知识界乃至普通民众对中国文化的兴趣、重视与行动。
与此同时，应该大力推动中文学术期刊的数量扩张、质量整顿与提升，提倡编辑工作专业化的出版模式，加强对学术期刊的制度监管。同时，创办和充实更多、具有本土知识产权的英文期刊，积极引领英文期刊的国际话语权。
3.以评促建、评建共赢才是改进的成功
“SCI至上”现象，背离了当年它曾给中国大学带来的积极作用，早该被扫入历史。《意见》的颁布与实施，终于开启了“后SCI时代”，应该说亡羊补牢、未为晚矣。依笔者拙见，《新规》的步子甚至还可以再大一些，把大学排名乱象一并规范，同样在制度上进行治理。比如，不允许公立高校（尤其是“双一流”大学）为国外排名公司提供院校数据，也不允许购买这些排名公司的相关数据，严禁各校官网、招聘、招生等传媒材料上引用或标识大学排行榜的名次，斩断经济输血，从而根除它们对科研评估带来的负面影响。
在何处发表、用什么语言发表、发表之后是否被关注、如何受到关注等等，与知识创新的科学价值本无关系，不应该被曲解成科研评估的标准。实践已经反复证明，在名不见经传刊物发表的科学新知无以计数，发表之后沉寂多年然后再受热捧的科学新知也并不稀少。这些都不应该影响知识创新固有的科学价值，更不应该成为科研评估的金科玉律。
这也启示我们，科研评估本身不应该是目的。它应有的目的在于以评促建、评建相长，以此促动知识创新和转移，服务于人类生活的终极福祉。正如教育改进科学学者、卡耐基教学基金会主席安东尼·布拉克所指出的那样：现有的改进问题都是系统自身造成的。成功的评估，常常不仅取决于评估体系自身的好坏，还在于能否调动评估对象的热忱和投入，赢得广泛的认可与支持，以达到系统改进的根本目的。因此，反思科研评价的五大原则，以及后SCI时代科研评估的四大改进举措，杜绝暴力式、整齐划一、失去文化内涵的评估方式，倡扬“板凳要坐十年冷、文章不写一句空”的治学精神与文化，才能真正达到中国科研评估的终极目的。
相关文章：①理性对待“SCI” 用好“同行评议” ②评价与时俱进 科研回归初心
