引文索引的功能与科学评价
――以美国《基本科学指标》引文数据库为例(下)
邱均平 马瑞敏
(武汉大学中国科学评价研究中心 武汉 430072)
2.2.2 利用ESI进行世界大学科研竞争力评价
在不少关于SCI功能方面讨论的文章,大家基本达成这样的共识:“SCI比较适合国家、机构、期刊等宏观对象的评价”。由于ESI是基于SCI和SSCI的,并且是一个国际性的数据库,利用其进行世界大学评价是可行的。武汉大学的硕士研究生熊璐在其毕业论文中,曾设置了“论文总数,论文被引频次总数,论文篇均被引频次,顶尖论文总数,顶尖论文被引频次总数,顶尖论文篇均被引频次,高被引论文总数,高被引论文被引频次总数,高被引论文篇均被引频次,热门论文总数,热门论文被引频次总数,热门论文篇均被引频次”这十二个指标并赋予不同权重进行了国内12所高校科研竞争力评价方面的积极探索。这里我们引用了她的权重、原始数据和结果,最后对她的评价结果进行了深层次的分析。其权重设置依次如下所示:
W=[0.0113,0.0222,.0269,0.0390,0.0591,0.0901,0.0390,0.0591,0.0901,0.1283,0.1831,0.2517]T
我们对表4-5可以从以下四个方面进行分析:
(1) 量的方面。从发表论文总数来看,我们可以看出清华大学,北京大学,南京大学列于前三。在国内,这三个学校在理科的研究方面有着独特的优势,这也是在我国国内所公认的。从顶尖论文数和高被引论文数来看,北京大学,中国科技大学,清华大学分别都列于前三,这不仅从量上说明的多少,更能够说明他们发表的论文质量很高,因为要入选顶尖论文和高被引论文的条件是很严格的,被引次数必须达到一定的标准方可入选。从热门论文来看,中国科技大学,浙江大学,北京大学以较大的优势位于前列,我们从中可以看出这些学校有一批在理科研究方面有深厚造诣的科学家,他们的论文很受关注,创新性很强,观点很犀利,吸引同行在短时间内就对他们的成果进行了引用,这些科学家也是推动一个学校不断创新的源动力。
(2) 质的方面。在分析质方面,这里主要从平均数这个角度分析。从论文平均被引数来看,中国科学技术大学,复旦大学,南京大学位于前三,说明他们发表的文章受到的关注是比较多的,复旦大学虽然发表的论文不是很多,但是被引次数比较高,这也说明我们不仅要注意量的积累,更要注意质的飞跃。从顶尖论文平均被引数和高被引平均论文数来看,复旦大学,中山大学,浙江大学位于前三,说明这三所学校在这两个指标的表现很强劲,一些学科的力量很强,一些经典的论文问世。从热门论文的平均被引次数来看,北京大学,中国科学技术大学,吉林大学以绝对优势位于前三,这说明他们被评定为热门论文的那些文章相对质量的确是很高的。
原始数据如表4所示:
表4 12所高校指标原始数据
学校名称 | 论文总数 | 被引频次总数 | 篇均被引频次 | 顶尖论文总数 | 顶尖论文被引频次总数 | 顶尖论文篇均被引频次 | 高被引论文总数 | 高被引论文被引频次总数 | 高被引论文篇均被引频次 | 热门论文总数 | 热门论文被引频次总数 | 热门论文篇均被引频次 |
北京大学 | 13,347 | 37,417 | 2.80 | 83 | 4547 | 57.78 | 98 | 5710 | 58.27 | 5 | 152 | 30.4 |
中国科技大学 | 9,706 | 29,789 | 3.07 | 63 | 2896 | 45.97 | 71 | 3333 | 46.94 | 8 | 228 | 28.5 |
清华大学 | 14,521 | 31,146 | 2.14 | 47 | 2260 | 48.09 | 50 | 23326 | 46.52 | 2 | 15 | 7.5 |
复旦大学 | 7,802 | 23,550 | 3.02 | 27 | 1520 | 56.3 | 34 | 2243 | 65.97 | 1 | 3 | 3 |
南京大学 | 11,526 | 33,244 | 2.88 | 30 | 1299 | 43.3 | 40 | 1774 | 44.35 | 2 | 9 | 4.5 |
浙江大学 | 9,750 | 19,286 | 1. 98 | 25 | 1338 | 53.52 | 29 | 1426 | 49.17 | 6 | 23 | 3.83 |
吉林大学 | 5,618 | 12,794 | 2.28 | 17 | 804 | 47.29 | 19 | 892 | 46.95 | 2 | 55 | 27.5 |
中山大学 | 3,545 | 6,720 | 1.90 | 14 | 767 | 54.79 | 14 | 817 | 58.36 | 0 | 0 | 0 |
上海交通大学 | 5,738 | 7,691 | 1.34 | 7 | 146 | 20.86 | 28 | 786 | 28.07 | 1 | 11 | 11 |
武汉大学 | 4,256 | 6,235 | 1.46 | 4 | 316 | 79 | 10 | 506 | 50.6 | 1 | 2 | 2 |
南开大学 | 5,568 | 10,699 | 1.92 | 15 | 372 | 24.8 | 19 | 443 | 23.32 | 0 | 0 | 0 |
华中科技大学 | 3,885 | 1,926 | 0.50 | 4 | 73 | 18.25 | 11 | 177 | 16.09 | 1 | 8 | 8 |
其评价结果如表5示:
表5 12所高校科研论文排名情况
学 校 名 称 | 总 得 分 | 排 名 |
北京大学 | 84.94 | 1 |
中国科技大学 | 84.61 | 2 |
吉林大学 | 48.93 | 3 |
清华大学 | 36.86 | 4 |
浙江大学 | 36.65 | 5 |
复旦大学 | 31.34 | 6 |
南京大学 | 30.58 | 7 |
武汉大学 | 22.85 | 8 |
上海交通大学 | 22.34 | 9 |
中山大学 | 19.63 | 10 |
(3) 从最后的结果来看,北京大学和中国科学技术大学以较大的优势位于前列,这和他们在各个指标的得分都比较高有密切关系。另外这和ESI的收录学科也有关,注重理科方面的论文,对于工科和社会学科收录有限。在理科研究强的,往往得分会高。这也是在以后评价中需要注意的问题。要结合多个评价数据库对各个单位进行评价。
(4) 最后需要强调的一点是,高被引论文、顶尖论文和热门论文要先从量的积累开始,因为ESI已经制定了很严格的标准来评选这些论文。我们可以发现相对于论文总数来说,这三个指标中的数据占总发表论文数的比例是很低的,结合这样的实际,我们一定要先从量的增加开始。这三个指标在ESI数据库中如果绝对数量增加了,然后和国际其他高校比较来说增长速度更快,那么就可以说那些学校和世界的其他优秀高校的差距在逐渐缩小,建设几个有国际影响力的学科,这对于一个学校确定国际影响力是非常重要的。
基于以上分析,在以后世界大学科研竞争力评价方面,我们将对以上指标的设置进行一些修正,拟打算利用“论文总数,论文被引频次总数,论文篇均被引频次,顶尖论文总数,顶尖论文占所有论文比例,高被引论文总数,高被引论文占所有论文比例,热门论文总数,热门论文总数占所有论文比例,拥有的重要期刊数量,拥有的高被引科学家数”这十一个量和质相结合的指标来进行基于ESI的世界大学科研竞争力评价,通过以上评价,我们利用ESI这个优秀的评价数据库来分析我国高校在各个指标的得分情况,并且把它们放在世界的范围和角度来分析,对于我国高校的科研水平和国际早日接轨,并找出一些差距,最终找出存在的原因并迎头赶上是非常有意义的。
3 结语
引文索引的评价功能一直就受到大家的关注,尤其是1961年SCI诞生后,大家对于引文索引的科学评价功能更是有了空前的研究热情并结合我国实际情况展开了许多讨论,同时积极探讨和开发适合中国科研国情的科学评价数据库,中国科学院文献情报中心的《中国科学引文数据库》CSCI和中国科技信息研究所的《中国科技论文统计与引文分析数据库》CSPTC以及南京大学的《中文社会科学引文索引》CSSCI,都从不同的角度结合我国科研实际进行了开发并得到广泛的利用,成为进行科研评价的强有力的工具。这些成绩是可喜的,但是我们绝不可能只站在本国的立场和角度去比较各个学校的差别,而应该积极地去和世界的大学比较,这样才能走向国际,与世界早日接轨,达到世界先进水平。ESI引文索引数据库无疑为我们提供了这样一个和世界各国大学进行比较学习的优秀数据库,我们要充分利用这个可以使评价量化的工具进行各个方面积极的研究,为我国科技界、教育界等提供服务和参考。
附表1 高被引论文入选条件
高被引论文阈值1994年1月-2004年12月
学科领域 | 1994 | 1995 | 1996 | 1997 | 1998 | 1999 | 2000 | 2001 | 2002 | 2003 | 2004 |
农业科学 | 63 | 58 | 52 | 50 | 48 | 43 | 37 | 25 | 16 | 9 | 3 |
物理学与生物化学 | 223 | 207 | 193 | 182 | 155 | 129 | 103 | 76 | 51 | 27 | 6 |
化学 | 109 | 100 | 94 | 84 | 77 | 69 | 58 | 41 | 31 | 15 | 5 |
临床医学 | 171 | 164 | 143 | 131 | 116 | 100 | 84 | 63 | 43 | 22 | 5 |
计算机科学 | 49 | 49 | 45 | 39 | 38 | 31 | 24 | 21 | 15 | 6 | |
经济管理学 | 103 | 86 | 70 | 64 | 54 | 38 | 33 | 20 | 13 | 6 | 3 |
工程学 | 50 | 45 | 42 | 41 | 35 | 30 | 25 | 19 | 12 | 7 | 3 |
生态学/环境科学 | 118 | 96 | 95 | 76 | 76 | 62 | 50 | 36 | 23 | 11 | 4 |
地学 | 118 | 107 | 98 | 88 | 78 | 63 | 51 | 36 | 22 | 12 | 4 |
免疫学 | 296 | 267 | 238 | 199 | 196 | 157 | 131 | 105 | 70 | 45 | 8 |
材料科学 | 65 | 58 | 57 | 51 | 48 | 43 | 37 | 27 | 19 | 10 | 3 |
数学 | 47 | 41 | 38 | 33 | 28 | 25 | 18 | 14 | 9 | 5 | |
微生物学 | 164 | 149 | 155 | 137 | 124 | 103 | 83 | 63 | 43 | 23 | 5 |
分子生物学和遗传学 | 398 | 350 | 318 | 303 | 266 | 226 | 189 | 139 | 97 | 47 | 11 |
交叉学科 | 51 | 53 | 60 | 87 | 69 | 88 | 82 | 71 | 76 | 39 | 12 |
神经科学和行为科学 | 242 | 219 | 210 | 182 | 156 | 137 | 109 | 86 | 52 | 23 | 6 |
药理学和毒理学 | 127 | 120 | 99 | 103 | 83 | 78 | 66 | 53 | 38 | 17 | 4 |
物理 | 113 | 105 | 106 | 89 | 82 | 73 | 63 | 48 | 32 | 17 | 5 |
植物学与动物学 | 86 | 83 | 74 | 71 | 61 | 52 | 43 | 36 | 23 | 11 | 4 |
精神病学/心理学 | 139 | 122 | 105 | 92 | 84 | 72 | 55 | 40 | 25 | 12 | 4 |
社会科学-概论 | 55 | 52 | 46 | 43 | 37 | 32 | 26 | 19 | 13 | 7 | 3 |
空间科学 | 154 | 145 | 133 | 132 | 113 | 113 | 84 | 75 | 48 | 31 | 9 |
附表2 热门论文入选条件
热门论文阈值2002年12月-2004年12月
学科领域 | 2003.1 | 2003.2 | 2003.3 | 2003.4 | 2003.5 | 2003.6 | 2004.1 | 2004.2 | 2004.3 | 2004.4 | 2004.5 | 2004.6 |
农业科学 | 9 | 6 | 4 | 5 | 4 | 3 | 3 | 4 | 3 | | 2 | 3 |
物理学与生物化学 | 10 | 14 | 10 | 9 | 8 | 7 | 7 | 7 | 5 | 4 | 4 | 4 |
化学 | 8 | 7 | 8 | 6 | 7 | 7 | 6 | 6 | 5 | 4 | 3 | 2 |
临床医学 | 12 | 10 | 13 | 9 | 9 | 9 | 7 | 7 | 5 | 5 | 3 | 3 |
计算机科学 | 4 | 5 | 4 | 3 | 3 | 10 | 3 | 3 | 3 | 2 | | 2 |
经济管理学 | 7 | 4 | 3 | 4 | 5 | 7 | 3 | 4 | 2 | | 2 | 3 |
工程学 | 4 | 4 | 4 | 4 | 4 | 4 | 3 | 3 | 3 | 2 | 2 | 2 |
生态学/环境科学 | 8 | 7 | 5 | 5 | 6 | 5 | 5 | 5 | 3 | 3 | 2 | 8 |
地学 | 6 | 5 | 5 | 7 | 5 | 5 | 6 | 4 | 4 | 2 | 2 | 6 |
免疫学 | 24 | 15 | 17 | 11 | 11 | 9 | 8 | 9 | 8 | 5 | 2 | |
材料科学 | 6 | 8 | 6 | 5 | 6 | 5 | 4 | 3 | 3 | 3 | 2 | |
数学 | 3 | 3 | 3 | 21 | 3 | 3 | 2 | 2 | 2 | 2 | 2 | |
微生物学 | 8 | 8 | 9 | 13 | 19 | 9 | 9 | 7 | 5 | 4 | 2 | 2 |
分子生物学和遗传学 | 14 | 20 | 19 | 19 | 19 | 14 | 18 | 15 | 8 | 5 | 3 | 5 |
交叉学科 | 8 | 9 | 11 | 7 | 14 | 17 | 6 | 19 | 5 | 7 | 5 | 9 |
神经科学和行为科学 | 11 | 11 | 8 | 12 | 10 | 11 | 7 | 6 | 7 | 4 | 4 | 3 |
药理学和毒理学 | 8 | 9 | 8 | 8 | 11 | 7 | 6 | 6 | 4 | 3 | 2 | 2 |
物理 | 7 | 7 | 8 | 6 | 7 | 8 | 7 | 6 | 5 | 4 | 3 | 3 |
植物学与动物学 | 6 | 6 | 5 | 5 | 5 | 5 | 4 | 6 | 3 | 3 | 2 | 6 |
精神病学/心理学 | 6 | 7 | 5 | 6 | 5 | 5 | 4 | 3 | 3 | 4 | 6 | 5 |
社会科学-概论 | 4 | 4 | 4 | 4 | 3 | 3 | 3 | 3 | 2 | 2 | 2 | 9 |
空间科学 | 11 | 11 | 10 | 13 | 71 | 10 | 8 | 7 | 13 | 7 | 5 | 6 |
参考文献
1 邱均平著.文献计量学.北京:科学技术文献出版社,1988
2 陈敬全.科研评价方法与实证研究.武汉大学博士学位论文,2004.4
3 熊璐.美国《基本科学指标数据库》的研究与应用.武汉大学硕士学位论文,2004.4
4 马瑞敏,邱均平.基于CSSCI的论文同被引计量实证研究.图书情报知识,2005(5):77-795 刘清,邵荣,李军虹,李珑,暴朝霞.美国《基本科学指标》的结构及其应用.情报杂志,2004(5):94-96
6 邱均平,张荣,赵蓉英.期刊评价指标体系及定量方法研究.现代图书情报技术,2004(7):23-26
7 张凌之.影响因子在我国科技期刊评价中的作用分析.编辑学报,2003(2):126-127
8 孙德华.SCI及其在科学技术评价中的作用.武汉理工大学学报(社会科学版),2004(4):531-534
9 引文索引.http://jw.nju.edu.cn/xxjs/Courseware/Html/chap5/pages/5_2_1_2_6.htm(AccessedOctober 3,2005)
10 引文索引及其索引原理http://www.zslib.com.cn/xuehui/nhlw/%BA%E2%D6%D0%C7%E0%C2%DB%CE%C4.doc(AccessedOctober 3,2005)
11 ISI Essential Science Indicators.http://www.las.ac.cn/netdb(AccessedOctober 3,2005)
12 美国SCI的评价功能、机理及在我国科学评价中的应用.
http://www.ccn86.com/news/research/20050525/12440.html.(AccessedOctober 3,2005)
邱均平 武汉大学中国学科评价中心主任,教授、博士生导师。