检索和分析评价功能是ESI的基本功能,在本次调查中,我们主要利用的是ESI分析评价功能,即使用ESI标准来进行分类汇总和分析,从论文量、被引量、篇均被引等来以展现全国以及世界各高校学科建设的现状和动态情况,并特别对上海地区的学科建设作出分析与评估。
根据每个研究领域,ESI滚动统计10年来某一机构或个人被SCI和SSCI收录的论文总数、论文被引用的总次数以及篇均被引次数,其中,ESI排名前1%的学科数据库在我国具有比较大的影响力。这些数据更新速度很快,每两个月更新一次(表3-13)。
表3-13 目前国内部分高校ESI总领域指标情况(截至2015年6月17日)
由表3-13我们可以看到,目前我国已有不少高校进入ESI前1%的名单中,体现我国各高校在学术上的不断发展和良好势头,而且我们可以清晰地看到它们的发文量、总被引量以及篇均被引量,这在一定程度上也反映了各高校的在学科上的学术发展情况,其中上海交通大学以总被引量最高排在国内高校第一,反映了其不容小觑的科研能力。
总的来说,可以根据ESI的评估结果,将它们分为引文排位(Citation Rankings)、高被引论文(Most Cited Papers)和引文分析(Citation Analysis)来进行三部分的功能解读。
(1)引文排位
ESI可以对某一研究领域中总被引用次数进入前1%的单位、作者、论文,及进入前50%的国家和期刊进行排位。科学家排位体现了学者之间的同行认知(Peer Recognition), ESI的高被引科学家一定是该领域的顶尖学者。机构排位衡量机构(大学、公司、政府研究机构)的产出与机构声誉。国家排位反映国家的科研影响力,进行单篇论文被引用数的国家比较有助于纠正国家规模与论文产出上的差异。期刊排位体现了一个较长时期内某期刊长期引文的影响力,我们可以通过查询ISI出版的《期刊引证报告》(Journal Citation Reports, JCR)与短期引文行为进行比较。
(2)高被引论文
ESI把被引用次数进入前1%的论文统计生成高被引论文(Highly Cited Papers)列表。ESI也筛选0.1%的高被引用论文作为热点论文。热点论文的发表年龄不能超过2年,而且必须在当前的2个月里被引。
(3)引文分析
基线(Baselines)测量横跨大的论文组的累积被引用次数,由“平均被引用次数”和“百分点”两个表格组成。
平均被引用次数。ESI可以计算近10年来论文每年被引用的平均次数。包括某个研究领域和全部研究领域的平均被引用次数。全部10年的平均数在“all years”栏中给出。10年平均值可以作为科学家、机构、国家和期刊排位表给出的单篇被引值的基线。独立年份的研究领域平均值可用于对该年份出版的论文进行比较。
百分点(Percentile)。“百分点”表示一个被引基准,即按照被引次数排序的顶尖论文的固定比例。ESI选定的研究领域和年份的百分比数字有0.01%、 0.1%、 1%和10%。被引次数是高度倾斜的,大部分论文并非频繁地被引,高被引论文仅占很少的一部分。
研究前沿分析(Research Front Analysis)。它基于5年时间段内多学科范围内的被引用频率高的论文,确定这些论文被共同引用的程度。这用于确定两篇高被引论文的同被引用次数。
具体来说,我们可以根据ESI评估结果,做出以下方面解读。
衡量某所院校或机构的国际影响力:即可以ESI排名为依据,选取国外一流的大学作为标杆,在ESI全部22个学科领域中,按被引频次的高低确定出衡量研究绩效的阈值,排出居世界前1%的研究机构,甚至是1‰,并根据每一学科的表现,来讨论院校各院系的贡献度,有利于发现院校的优势学科,潜力学科和相对劣势的学科。高校有多少学科领域进入了世界前1%(称为领先水平)是近年来高校评估衡量学科发展水平的重要标准。
评价学术期刊:通过ESI数据分析来评价学术期刊,这是目前国际上公认的比较成熟的评价做法。具体来说,就是可以首先通过期刊的资助来源,了解期刊论文的研究背景;通过来源文献作者的地域和机构分析,可以得到不同省区市和机构发表的论文数;通过分析在一定时间段内高频次被引用的论文,了解哪些是具有极高的学术理论和应用价值的文章,以及它们在学科发展和工作实践中的突出地位。挖掘一种期刊或者一个学科的热门论文,将极大方便读者了解刊物载文的特点以及学科发展的标志和脉络;根据期刊中文章引用与被引,可以了解本刊与其他期刊的关系;通过了解期刊某年发表的论文在当年被引用的平均次数,可以了解期刊的学术影响力。因为指标将反映出期刊被利用的速度和在学术界的响应快慢程度,其值越大,期刊影响力越大,反之越小,等等。
研究学科发展现状与趋势:根据每一学科发文数据,可以对学科的现状和未来进行分析和预测。如一段时间内文献中化学领域的发文量很多,那么就可能说明那段时间内化学是科研的前沿,可能会出现很多新观点与发现,这对于我们制定学科发展规划和政策具有一定的指导作用(表3-14)。
表3-14 部分学科领域ESI指标情况(截至2014年8月20日)(www.xing528.com)
由表3-14随机选择的五项学科的数据统计看出,临床医学领域的论文发文量、被引量以及篇均被引都占据第一,且各个学科差距较大,由此可以了解到相比于其他四个领域,临床医学在学术方面发展较好,并且在未来一段时间它可能还会继续发展;可以看出各大院校和机构都比较重视这一方面的科研,从而为高校的学科制定提供参考。同时也可以看到其他学科发展的不足之处,尤其在这四个学科中的计算机科学,无论是发文量还是被引量都与其他学科有着一定差距,这就说明了在很多院校,计算机科学的学术方面可能薄弱,需要加强。
除此之外,对于ESI数据还有很多解读和分析角度,例如根据学者的论文质量来衡量学者的学术水平,包括学者发文的文章数、时间、被引量等,有些学者则提出了用于计算学者论文当年质量的公式[1]:
其中,影响因子以两年间隔计算。
由于ESI排名主要体现了学科发展的积累,排名方法为依据过去十年累积的论文总被引数量进行排序,是对于发文的数量与质量进行的综合考察,因此,这一排名方法导致看上去所有高校的发展趋势比较平稳,很少出现突然大幅上升或下降的情况。
正是基于ESI的相对科学性、稳定性以及更新及时性,如今在国内已经有不少院校开始重视和运用ESI数据了。其中,北京大学、清华大学、浙江大学在2006年2月同时引进ESI数据库,用作衡量科研绩效、分析发展趋势的重要工具。天津高等教育文献信息中心2006年购买数据库,供天津所有院校免费使用。浙江大学、天津大学图书馆还邀请ISI专家为师生开展培训,以更好地发挥其作用。武汉大学中国科学评价研究中心用ESI数据分析高校的科研竞争力,在2006年发布了《世界大学科研竞争力排行榜》和《世界科研机构学科竞争力排行榜》(含大学和科研院所)等23个排行榜,并指出国内高校的科研竞争力与强国名校之间存在较大差距[2],而复旦大学在2009年上半年也引进了ESI数据库。
虽然利用ESI进行数据分析可以为我们带来很多信息,不过由于其还是受到不少主客观因素的影响,因此在使用那些结果时,我们还有一些需要注意的地方。
(1)某个研究领域不等于某个学科、某个院系
ESI划分的22个研究领域,与我国现有学科专业目录并不一一对应,更不对应于高校的院系设置。它是基于SCI和SSCI收录的全球学术期刊进行的归类划分。以复旦大学为例:1999年1月1日至2009年4月30日,ESI收录材料科学领域论文853篇,分别来自化学系(30%)、信息学院(16%)、物理系(13%)、高分子系(11%)等16家单位;被收录工程学领域论文964篇,分别来自信息学院(26%)、数学学院(25%)、计算机学院(14%)、现代物理所(8%)等20家单位;被收录临床医学领域论文1777篇,分别来自中山医院(21%)、华山医院(10%)、上海医学院(9%)、肿瘤医院(7%)等23家单位。
(2) ESI仅统计ISI索引的期刊论文
ESI将论文定义为常规科研论文、综述论文、会议论文以及研究札记,致编者信、更正以及文摘不被计算在内。图书、图书的章节以及未被ISI索引的期刊论文,都不被考虑在内。
(3)同一篇论文的所有作者被赋予相同权重
在ESI的统计过程中,第一作者、第一作者所在的机构与其他作者以及他们所在的机构被同等对待,并不会被加上特殊的权重。因此有别于我国目前的第一作者(或通讯作者)统计口径,会与学校、院系及学科所统计的数据不一致。
(4)引文率的高低并不都能说明一切问题
由于人们在引用文献时,是受很多因素影响的,如偏好、心情以及资源是否可获得等,有时还会出现一些“从众心理”,也就是说看到某篇文献被他人的引用频率很高,都会导致引用者的不同选择。甚至还会出现引用者滥引用的情况,哪怕所写文章中并没有用到相关文献,但为了体现自己文章的丰富性或是为了达到相应的文献要求,就列入一些并没有被引用的文献,导致文献的引用率出现很大不同。因此,并不能仅仅凭借文献的被引频率就判断该文献的好坏,而一篇存在争议的文章,就可能会被经常引用而出现引用率很高的现象。
(5)范围的局限性
由于ESI文献收集主要来自覆盖范围各异的期刊,涵盖的是SCI和SSCI中所收录的全球11000多种学术期刊,这样就会使得其在人文艺术以及社会科学领域的适用性不够。而且相对于社会和人文科学领域来说,自然科学的相关研究者更倾向于引用已有成果,这样就更加使得自然科学领域文献的被引率增加。因此,不能仅凭ESI排名前1%指标就来衡量一切,这显然是不够科学的,如果能够配合其他评价指标则会更好一些。
免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。