Embed Size (px)
Citation preview
科学生产活动活动
科学交流活动活动
SCI检索与科研绩效评价SCI检索与科研绩效评价
中国医学科学院医学信息研究所/图书馆
杜建
2011年9月22日
3
4
一些“SCI现象”
• SCI对科研人员很重要 院士评选 杰青 成果报奖• SCI对科研人员很重要：院士评选、杰青、成果报奖、职称职位晋升、获取博士学位
SCI备受批评和争议• SCI备受批评和争议
– SCI被滥用，科研管理者直接用数字评价
SCI只是一个文献检索工具– SCI只是一个文献检索工具
• 我们到底需要SCI吗？
与 ：世界第二– SCI与GDP：世界第二
– 我国“十二五”规划：通篇未提出GDP要增长百分之多少
中信所：研究机构的统计数据中，只公布与被引用情况有– 中信所：研究机构的统计数据中，只公布与被引用情况有关的数据，不公布其论文数
– “到了应该强调质量的时候了”； 量变到质变“到了应该强调质量的时候了”； 量变到质变
5
主要内容
• 关于SCI的基本知识• 关于SCI的基本知识
– 引文及其相关概念
– SCI的历史与发展
• SCI检索与分析SCI检索与分析
• 科研绩效评价
– 科研绩效评价方法：引文分析与同行评议
– 定量评价的几个指标
– 问题与误区
6
SCI的概念
• 3大索引• 3大索引
– SCI（科学引文索引，Science Citation Index）– EI（工程索引）
– ISTP（科学技术会议录索引，现更名为CPCI）Web of
knowledge
Web of Science
SCIISTP
7
Web of Science• Science Citation Index Expanded（科学引文索引• Science Citation Index Expanded（科学引文索引,
SCIE） ~7700种核心期刊，可回溯到1900年• Social Science Citation Index（社会科学引文索引• Social Science Citation Index（社会科学引文索引,
SSCI） ~2400种核心期刊，可回溯到1956年A t & H iti Cit ti I d （艺术与人文引文索• Arts & Humanities Citation Index（艺术与人文引文索引,A&HCI） ~1200种核心期刊，可回溯到1975年
N !• New!• Conference Proceedings Citation Index - Science
(CPCI-S) 1990-至今
• Conference Proceedings Citation Index - Social gScience & Humanities (CPCI-SSH) 1990-至今
8
引文及其相关概念：引文
• 引文（citation）• 引文（citation）– 在科学研究过程、撰写论文过程中参考、继承前人研究成果而特地注明的考、继承前人研究成果而特地注明的文献信息，也称被引文献
两种形式：
文献B– 两种形式：
• 参考文献（references）注释（ t ）
CitingCited• 注释（notes）
• 来源文献、引证文献、施引文献
引用被引用
来源文献、引证文献、施引文献（citing articles）
文献A
99
引文及其相关概念：引文索引
• 引文索引（Citation Index）• 引文索引（Citation Index）– 根据文献之间的相互引证关系，收录和报道来源文献及其引文的检索工具献及其引文的检索工具
• Web of Science– 来源索引
– 引文索引：整条收录并索引了论文中所引用的参考引文索引：整条收录并索引了论文中所引用的参考文献，研究者可以从一篇论文出发：
• 寻根溯源寻根溯源
• 追踪最新进展
10
2004
从一篇高质量的文献出发
沿着科学研究的发展道路…
Times
2003
Cited
2003TimesCited
20041998
References
1995Related
19931991
RelatedRecords
1980
2004
2002 Citing
1999
Citing
Cited References 越查越深
Ti Cit d 越查越新
11
1994Times Cited 越查越新
Related Records 越查越广
的 史SCI的历史• Eugene Garfield 1955年在 Science 上提出g 年在 上提出
将引文索引作为一种新的文献检索与分类工
具。具。
• 1958年建立美国科学信息研究所（Institute ）for Scientific Information, ISI）
• 1961年推出印刷本的科学引文索引（SCI）
• 1973年出版社会科学引文索引（SSCI）
1978年出版艺术&人文科学引文索引• 1978年出版艺术&人文科学引文索引
（A&HCI） Eugene Garfield
信息科学领域的开拓者信息科学领域的开拓者
引文索引的创始人
的发SCI的发展– 1974年 Dialog平台上提供SCI联机检索1974年 Dialog平台上提供SCI联机检索
– 1988年 提供SCI光盘检索
– 1997年 ISI 推出SCI的网络版（Web of Science），同时检索三种引文索引，并且Science），同时检索三种引文索引，并且
SCI期刊范围增加（SCI-Expanded, SCI-E)
– 2001年ISI 推出Web of Knowledge学术资源
体系体系
– Web of Knowledge现属于汤森路透集团
（ ）（Thomson Reuters）
主要内容
• 关于SCI的基本知识• 关于SCI的基本知识
– 引文及其相关概念
– SCI的历史与发展
• SCI检索与分析SCI检索与分析
• 科研绩效评价
– 科研绩效评价方法：引文分析与同行评议
– 定量评价的几个指标
– 问题与误区
14
Science Citation Index Expanded
15
医科院图书馆：Web of Knowledge
16
医科院图书馆：Web of Science
17
Web of Knowledge
18
19
检索字段检主题(Topic) 在标题、摘要、关键词中进行检索
标题(Title) 文章的标题标题(Title) 文章的标题
作者(Author) 如Lang JH
Researcher ID www researcherid comResearcher ID www.researcherid.comA-1009-2008
团体作者(Group Author) Aberdeen Lung Cancer Group出版物名称(Publication Name)
Science Nature
出版年(P bli ti Y ) 1999 2003 2005出版年(Publication Year) 1999 2003-2005地址(Address) Peking Univ, State Key Lab Nucl Phys &
Technol, Beijing 100871, Peoples R ChinaTechnol, Beijing 100871, Peoples R China基金资助机构(Grant) NSFC
语种(Language) English Chinese
20
语种(Language) English Chinese
文献类型(Document Type) Article Review
21
22
23
24
25
26
截词符截词符
符号 意义符号 意义
* 零个或多个字符* gene*gene, genetics, generation
$ 零或一个字符colo$rcolor, colour
? 只代表一个字符en?oblast
t bl t d bl tentoblast, endoblast
27
临近算符临近算符
词组检索 当检索一个精确的词组的时候，可以使用双引号。词组检索 当检索 个精确的词组的时候，可以使用双引号。注意: 使用双引号的时候，需要关闭调整检索设置。
Example: “stem cell”p
NEAR/x NEAR代表所链接的两个词之间的词语数量小于等于N，默认的使用Near的缺省值是15。
Example: canine NEAR/10 virus
canine NEAR virus
SAME 只在地址字段中进行检索，同时要求两个词是在同一个地址字段中个地址字段中。
Example: Peking Univ SAME hosp
28
布尔逻辑算符布尔逻辑算符
检索包含所有关键字的数据。检索包含所有关键字的数据。
标题： “stem cell*” AND lymphoma
检索含有“stem cell”或者”stem cells”同时含有及词语检索含有 stem cell 或者 stem cells 同时含有及词语“lymphoma”。 等效于检索“stem cell*” lymphoma检索的数据中至少含有一个所给关键字。用于检索同义词或者词的不同表达方式。
标题: aspartame OR saccharine OR sweetener*
检索至少含有一个关键字的数据。
排除含有某一特定关键字的数据。
标题: aids NOT hearing
检索含有“aids”的数据，排除含有“hearing”的文献。
29
SCI检索途径
• 普通检索（ Search ）• 普通检索（ Search ）
• 作者甄别（ Author Finder ）
• 参考文献检索（ Cited Reference Search，引文检索）引文检索）
30
这也是目前中国生物医学界获得的世界级这也是目前中国生物医学界获得的世界级最高大奖，离诺奖只有一步之遥。
31
32
“青蒿素”研究的相关论文Artemisia OR Artemisinin OR Arteannuin ORArtemisia OR Artemisinin OR Arteannuin OR Artemisinine OR Qinghaosu
33
限定到高影响力的综述
综述所属综述所属学科类别
34
综述所涉及的学科类别
地质学
传染病学
毒理学毒理学
35
SCI检索结果的分析功能• 12个字段的深入分析12个字段的深入分析
– 作者– 会议名称会议名称– 出版年– 研究机构编者– 编者
– 团体作者– 基金资助机构– 基金资助机构– 来源期刊– 学科领域– 国家与地区– 文献类型文献语种– 文献语种
36
37
国家自然科学基金国家自然科学基金
中国科学院
“973计划”
38
973计划
39
1918-1919 西班牙流感流行
1957-1958 亚洲流感流行1957-1958 亚洲流感流行
1968-1969 香港流感流行
1977 1978 俄罗斯流感流行1977-1978 俄罗斯流感流行
2003-2004 SARS流感流行
甲型 流感流行2009-2010 甲型H1N1流感流行
……
40检索策略：主题=((influenza or flu) and epidem*)
SCI检索途径
• 普通检索（ Search ）• 普通检索（ Search ）
• 作者甄别（ Author Finder ）
• 参考文献检索（ Cited Reference Search，引文检索）引文检索）
41
作者甄别：屠呦呦 Tu YY
42
选择作者姓名的不同拼写形式同拼写形式
Tu YY
43
作者或共同作者机机构
44
北京大学
中国中医研究院
中国中医科学院
45
46
47
48
创建引文报告
49
50
去除自引的施引文献
51
屠呦呦获拉斯克奖
• 不是院士• 不是院士
• 3篇SCI/SSCI 论文
• 中医药研究的特殊性
• 同行评议：饶毅教授的推崇和发现• 同行评议：饶毅教授的推崇和发现
52
SCI检索途径
• 普通检索（ Search ）• 普通检索（ Search ）
• 作者甄别（ Author Finder ）
• 参考文献检索（ Cited Reference Search，引文检索）引文检索）
53
参考文献检索
• 可检索的被引文献类型• 可检索的被引文献类型– 期刊论文
图书– 图书
– 研究报告
– 会议文献会议文献
– 专利
– ……
• SCI收录文献的引用检索SCI收录文献的引用检索
• 非SCI收录文献的引用检索
54
蒋朱明1985-1989年论文的被引用情况
Jiang ZM OR Jiang Z.M. OR Jiang ZhumingOR Jiang Zhu Ming OR Zhuming Jiangg g g g
55
56
施引文献
参考文献参考文献
北京协和医院
相关文献
57
双向引证关系
58
206=19（被引）+186（施引）+1（本论文）
59
非SCI收录文献的引用
1996年WHO出版的《世界卫生统计》1996年WHO出版的《世界卫生统计》
60
61
中国大陆（含港澳）共有138种期刊被SCI收录
62
免费查找SCI收录期刊http://science thomsonreuters com/mjl/http://science.thomsonreuters.com/mjl/
63
主要内容
• 关于SCI的基本知识• 关于SCI的基本知识
– 引文及其相关概念
– SCI的历史与发展
• SCI检索与分析SCI检索与分析
• 科研绩效评价
– 科研绩效评价方法：引文分析与同行评议
– 定量评价的几个指标
– 问题与误区
64
为什么要进行科研绩效评价？
•科学研究是由科学家驱动的一项事业，需要经费。•科学研究是由科学家驱动的一项事业，需要经费。
•科研绩效评价在发达国家受到极高重视——科研人员花的是纳税人的钱，为了对纳税人有所交代，必须对花的是纳税人的钱，为了对纳税人有所交代，必须对研究与开发投资的绩效进行认真评估。
– 人才的激励人才的激励
– 当资源变得短缺时，我们必须寻求“优先”：
关键的研究方向、重点实验室学科带头人关键的研究方向、重点实验室学科带头人
•我国也越来越重视！我国也越来越重视！
•国家自然科学基金委员会：中国完成科学基金资助与管理绩效国际评估管理绩效国际评估
65
在国家自然科学基金委员会（NSFC）成立25周年之际，中国迄今为止规模最大的综合性科技绩效评估——科学基金资助与管理绩效国际评估顺利完成际评估顺利完成
66
科研绩效评价的方法
• 同行评议• 同行评议
– 始于19世纪，一直是科技界进行科技评估的基本程序，用于科研绩效评估，科技奖项评定，科学基金分配，用于科研绩效评估，科技奖项评定，科学基金分配，以及科学优先领域选择
期刊论文评审、定性推荐信（Tu YY，饶毅）– 期刊论文评审、定性推荐信（Tu YY，饶毅）
– 权威至上、马太效应、近亲发展
• 定量指标（引文分析）
– SCI的建立，使得引文分析真正得到普及。是一种进步！的建立，使得引文分析真正得到普及。是一种进步！
– 引文分析利用引文数据库构造并应用了一系列反映学术成果的“影响力”或“质量”的指标。这些指标被应用于学术交流研究和科研绩效评价。术交流研究和科研绩效评价。
67
同行评议与定量评价（1）Name Field YearKenneth E. Clark Psychology 1957Jonathan R. Cole & Stephen Cole Physics 1967, 1973Henry G Small Collagen research 1977Henry G. Small Collagen research 1977Julie A. Virgo Cancer research 1977Michael E.D. Koenig Pharmaceutical research 1983Eugene Garfield Nobel Prize winners 1992Charles Oppenheim University rankings (RAE) Mid 1990s-Andy T. Smith & Michael Eysenck Psychology 2002
大量研究发现, 二者的相关系数r = 0.7 ~ 0.9
大量研究表明，定量评估与定性的同行评议的结果常常一致，大量研究表明，定量评估与定性的同行评议的结果常常一致，但定量评估的成本要低得多。Smith and Eysenck, comparing 1996 and 2001 RAE scores given to psychologists at 38 UK
i iti ( i ) ith th i it ti t l d d “Th t huniversities (peer review) with their citation counts, concluded:“The two approaches measure broadly the same thing.”
68
同行评议与定量评价（2）• Nature杂志对世界各地的150位研究人员和近30位• Nature杂志对世界各地的150位研究人员和近30位大学教务长、系主任或其他管理人员曾就定量评价指标的实际使用程度以及与同行评议的关系进行调指标的实际使用程度以及与同行评议的关系进行调查：国外的管理者或专家在对许多问题做决定时，定量评价指标起着重要的作用。（Nature，2010）
• “我们并不看（被评价者的）论文发表记录，也不告知同行评议者这么做，但实际上评价指标确实有影响，因为同行评议专家会看这些东西。”
——施一公，2010施 公
• “定性的推荐信有时从后门引入定量的评价指标”
69
引文分析：定量评价指标
指标•指标
– 被引次数与篇均被引次数（Citations VS. Citations per paper）
影响因子（I t F t IF）– 影响因子（Impact Factor, IF）
– h指数（h-index）h指数（h index）
70
71
下载地址：www.nuist.edu.cn/bulletinFiles/gg_9904_2.doc
72
建议引用
73
并引用：强制引用并引用：强制引用
74
国内某些科研机构规定
•在对科研人员发表论文进行奖励时，以1000元为•在对科研人员发表论文进行奖励时，以1000元为基数，再乘以文章发表期刊的影响因子。这样发表在高影响因子期刊上的论文作者就能够得到足表在高影响因子期刊上的论文作者就能够得到足够高的奖金。
•影响因子影响银子！影响因子影响银子！
•学术期刊学术奇刊！学术期刊学术奇刊！
75
被引次数
• 被引次数衡量的是“引用影响”（Citation• 被引次数衡量的是“引用影响”（Citation Impact），不能与“学术影响力”、“学术质量”、“学术贡献”等同！量”、“学术贡献”等同！
• 篇均被引次数衡量平均引用影响
• 引用受以下因素影响
引文动机的复杂性– 引文动机的复杂性
– 对施引文献不加区别的等价看待
引文著录误差– 引文著录误差
– 引文滞后性：“孟德尔效应”、“延迟承认”
76
影响因子•用于评价期刊用于评价期刊
•公式：
•可引用文章一般指研究型论文和综述。总体来说，影响因子就是较短时期内期刊发表论文的平均影响力。
疑问：
•为什么用篇均被引次数？•为什么用篇均被引次数？
•为什么计算发表1-2年的文献的被引次数？
77
原因
• 篇均被引次数：历史很长、新近创办• 篇均被引次数：历史很长、新近创办
• 平均被引频次在发表1-2年后达到最高
1-2年以后
1 2年以后1-2年以后
1-2年以后
78
现象
•某刊物的影响因子不等同于该刊物所发表的某特定论•某刊物的影响因子不等同于该刊物所发表的某特定论文所获引用次数！
论文比例 被引次数比例
25% 89%75% 11%
•在我国教育界和学术界有一种用刊物影响因子来评价
75% 11%
Nature,2005•在我国教育界和学术界有一种用刊物影响因子来评价
在该刊物所发表论文及其作者学术水平的倾向。有的
管理部门甚至要求科研人员必须在影响因子多少以上管理部门甚至要求科研人员必须在影响因子多少以上
的刊物上发表论文。
79
h指数
• 美国加州大学圣地哥分校物理系赫希• 美国加州大学圣地哥分校物理系赫希(J.E. Hirsch)教授2005年提出
评价科学家终身成就• 评价科学家终身成就
– 定义：一个科学家的h指数等于h，意味着该科学家发表的所有论文中有h篇论文的被该科学家发表的所有论文中有h篇论文的被引用次数都大于等于h。
一个用于衡量产出数量和影响力的新指标• 一个用于衡量产出数量和影响力的新指标
S J E Hi h “A i d t tifSource: Jorge E. Hirsch, “An index to quantify an individual's scientific research output” PNAS, 102(46): 16569-16572, 2005.
80
h指数的计算方法科研人员A 科研人员B科研人员A 科研人员B
论文序号 被引频次 论文序号 被引频次
1 4 1 871 4 1 87
2 4 2 63
3 4 3 173 4 3 17
4 4 4 5
5 4 5 45 5
6 2 6 3
7 1 7 3h指数=4
8 0 8 2
9 0 9 1
81
屠呦呦在国内的h指数
• CNKI中国引文数据库• CNKI中国引文数据库
82
13<=13
83
h指数的应用
•优势：便于计算，结合了论文数量与影响力，与其•优势：便于计算，结合了论文数量与影响力，与其他影响力指标的结果高度相关
劣势：•劣势：
– 对青年科学家会有一定的歧视，只能够捕捉到少数高影响力的研究成果，但是近期的研究成果无数高影响力的研究成果，但是近期的研究成果无法体现。
h指数随着时间的推移不会衰减。– h指数随着时间的推移不会衰减。
VS?
84
?
科研绩效评价的未来
•无论定性、定量都有缺点•无论定性、定量都有缺点
•凡涉及对个人学术表现的评价时：凡涉及对个人学术表现的评价时：
– 在定性的描述中可引入定量的指标加以佐证；
– 在使用定量的评价指标时可引入引用者的定性的描在使用定量的评价指标时可引入引用者的定性的描述加以补充，综合考虑各种因素之后再做结论。
相互补充
同行评议定量分析
85
学术评价是一个复杂的科学和社会问题，•学术评价是一个复杂的科学和社会问题，
没有最好的答案，只有更好的答案，学术没有最好的答案，只有更好的答案，学术
评价工作要永远处在不断的改进之中！
86
主要内容
• 关于SCI的基本知识• 关于SCI的基本知识
– 引文及其相关概念
– SCI的历史与发展
• SCI检索与分析SCI检索与分析
• 科研绩效评价
– 科研绩效评价方法：引文分析与同行评议
– 定量评价的几个指标
– 问题与误区
87
文献资源介绍与指南与指南
88
89
90
