斯坦福前化学系主任Zare教授:如何评价研究者学术水平
戴德昌(译)
Stanford 教授的文章 “Assessing Academic Researchers”看全文
http://onlinelibrary.wiley.com/doi/10.1002/anie.201201011/abstract
这篇文章的作者,斯坦福大学的Richard N. Zare,是我的同行,更是前辈。他当年的工作致力于激光控制化学反应,虽然后来的研究证明,这是一个很难的题目,一时半会做不成,但是这必竟开辟了一个很有重大科学意义的研究方向,相信后来人经过努力,将来一定能实现,那个时候使用激光分子剪刀手术,相信可以很容易修改基因中的坏份子,由此治疗一些遗传性的疾病,至于治疗癌症,艾滋病等等,更是小菜一碟。科普 Zare的工作,相信科学网上大博主王鸿飞更有资格。
激光控制化学反应,其实是在李远哲的交叉分子束化学反应之后的又一重大进步。与之平行的工作,是加州理工Zewail教授的飞秒化学(1999年诺贝尔化学奖)。Zewail的工作是在时间尺度上让人类更深一步地认识到了化学反应的本质,由此也说明了Zare的激光控制化学反应一时半会做不成。
闲话少说,回到正体。该文章发表于Angew. Chem. Int. Ed. 2012, 51, 7338 – 7339。由于是匆忙翻译,请以英文为主。
Assessing Academic Researchers,评价研究者的学术水平
Richard N. Zare,Department of Chemistry,Stanford University, 斯坦福大学化学系
In judging researchers early in their career, the h-index seems to be a poor measure。在评价处于早期职业生涯的研究者的学术水平方面,使用h-index看起来是一种不靠谱的方法。
Not being highly cited does not mean that someone’s work will never have value。没有高引用率并不意味着某人的科学研究工作永远没有价值
最近到中国和印度旅行,有了很多机会和年轻的研究人员一起讨论怎样达到职业上的成功。他们中的很多人认为,通向成功的重要标准,是需要通过各种形式的科学计量数据(“scientometric” data)评估,比如 h-index 因子,发表论文的引用次数。我认为这些科学计量数据评估有他们的用处,但是,我个人很不喜欢对此的过分使用甚至滥用。
这些让我感觉到,十分有必要分享一下斯坦福大学化学系对教授评定终身职务(tenure)所使用的一些尺度标准,因为我曾经做了六年的系主任。请不要误解,我不是鼓吹大家使用我们的方式和标准,这也只是眼下美国大学中的终身职务(tenure)制度而已,我觉得认真分析研究一下是肯定大有帮助的。我当然认识到我们现在的这种制度中的一些内在的深层次问题。同时我也知道,有些外国人对其他国家的文化和做事方式不感兴趣,甚至傲慢地歧视(意思是说,对作者讨论美国的tenure制度不感兴趣)。尽管如此,还是让我来说些建议和忠告。
在当前美国大学的终身制度中,我们先聘用研究者为助理教授,在之后的7年中再决定是否转成永久职务。这是比较难的事情,因为我们要综合评估这个人的学术质量,学术声誉, 并紧密结合本系的氛围。这些人总是通过工作刻苦得到永久职位,如果出现误判的后果是严重的,受到损害的不只是一个研究人员,而是整个系的层面的损失。因此,重中之重放在如何判断一个研究人员的真正价值,这就需要格外注意评估过程的公平,透明,整个系里标准尺度的一致性。我们一贯致力于消除这些教员和系里老教授之间的友谊,个人喜好等因素对做出最终决定的影响。
在斯坦福化学系,我告诉这些新教员有三个标准用来评估晋升永久职位。新人要得到永久职位需要做到:
1. 成为系里的突出人物。我们的系很小,因此需要每位成员和大家一起协调工作达到共赢。
2. 成为好老师。是的,我们喜欢每位成员都是一位伟大的教师。但是,我们只要求所有立志成为好老师的教授能真正做到这一点。对我们这样的教学和科研兼重的大学,教学是一项关键任务,并且,应该把学生教到最好。
3. 成为模范研究人员。这项成为关键要求是因为斯坦福大学是一所研究型的大学。但是,这很难评估,并且也是评估中的最大挑战。
我们怎样评判某个人是一位很有价值的研究人员?当然,是系里的每位永久人员投票选出,但是这个过程需要通过大学设立的多级考核。因此,对上面第三点的要求是,没有最好,只有更好。某位需要晋升的人员的真正价值不只是通过本系成员的判断,更重要的,还需要考虑10到15份系外专家的评审意见,这些专家或者是美国本土的,或者是国际上的。我要求这些专家从正方面的眼光来审查是否某位人员的科学研究改变了化学领域的主流观点。
我们不去审查某位人员给大学申请来了多少项目,多少钱。我们不去数发表论文的数目。我们更不根据作者排名位置来给论文排名一二三。我们不使用期刊杂志的影响因子来衡量高论文的质量高低。我们几乎没有用过h-index因子去衡量一个人的论文。我们只是简单的问系里系外的评审专家,是不是这人确凿的改变了我们化学上的主流看法。
所有这些都和在国外(中国,印度)旅行中听到的明显大相径庭。看起来在如何评价一个研究人员的真正价值方面,有太多偏重于看待发表论文的数量,而不是研究工作本身的质量和原创性。就像智商并不能说明一个人的研究工作是具有多么的开创性和原创性,h-index因子也不是一个全面的衡量,粗略地看这里有大概的联系,但是用它来评估一个早期的研究人员,h-index是不靠谱。在衡量职业成功方面,h-index 看起来更象是一个盖棺定论性的指标,而不一个衡量领先科学研究的指标。
不可否认,从论文引用次数可以看出一份科研工作的知名度,以及该篇论文的影响。没有高引用率不是说某人的科研工作永远没有价值。很多例子说明引用次数并不能立即说明该篇论文是否有价值。我想举出一个实际例子说明,是化学领域外的一个专门例子,来说明这一点。S. Weinberg 有一篇论文,发表于Phys. Rev. Lett. 1967, 19, 1264–1266,题目是:轻子的一个模型。这个期刊大家都知道。这篇论文中,Steven Weinberg (当时是麻省理工的一位访问教授)说,弱的核力和强的电磁力可以通过交换亚原子粒子方式被统一,尽管二者的强度有天壤之别。这篇论文成为粒子物理的标准模型的基石,因此Steven Weinberg分享了1979年的诺贝尔物理学奖。1967和1968年,没有引用,1969 和 1970 各引用了一次,1971年引用了4 次,其中还有一篇自引。现在,根据Web of Knowledge的数据,这篇论文引用了5224次。很容易找到其他更多的例子说明,引用次数的上升需要一个慢的引导期,因为这些新想法和实验测量都不是当时的主流观点。
其他大学或许使用不同的评估方法,比如研究课题组的大小,或者发表论文数量,这些很简单,可以让不懂行的大学管理者很容易明白。然而,我相信我们的评估标准能真正有助于找到最好的教授。我也认为我们的这些尺度最接近那些各种科技奖的评选程序,并且也很接近美国各个科学院选举院士的程序。
我不想给你们一个印象说,我们的程序是完美的。我们也晋升了几个人,后来发现他们不再积极致力于科研和教学。不管怎样,我认为这套晋升程序对我们来说是最好的。我们的尺度并不是想每个人都追随着做,但是,我充分相信,这些实实在在的帮助我们把研究工作做到真正的卓越和杰出。