基于引证质量的期刊影响力评价研究

2019-07-22 05:35孔月李秀霞
数字图书馆论坛 2019年6期
关键词:情报影响力学术

孔月 李秀霞

(曲阜师范大学传媒学院,日照 276826)

期刊是学术研究成果的主要载体,是技术创新与理论发展的重要参考来源,作为知识媒介在知识交流与传播中起着重要的推动作用。期刊影响力是指期刊在一定时期内发表的研究成果,在某段时间内促进相关学术研究与应用发展的能力[1]。对期刊影响力的科学评价是学术评价研究的重要课题之一,其研究不仅对学者成果发表和学术沟通有重要影响,而且对期刊内在质量的提升和健康发展具有重要的推动作用。

1927年,Gross[2]在世界顶级期刊Science上发表College Libraries and Chemical Education,揭开了评价期刊的序幕。目前,传统的期刊评价指标有影响因子、h指数、即年指标、引用半衰期等,这些基于引用频次的期刊评价指标不能反映引用质量,即同等对待不同质量期刊的每一次引用,因而随后诞生了考虑引用行为质量的期刊声望指数(SCImago Journal Rank,SJR)和特征因子等评价指标。SJR算法赋予高声望期刊的引用较高的权重,并以此规则迭代计算直至收敛,该指标被认为是对期刊影响因子强有力的挑战。特征因子是汤森路透公司于2009年推出的《期刊引用报告》(增强版)中增加的重要文献计量指标,其计算原理与SJR指数设计思想类似,通过文献间的引用关系反映期刊间的关系网络,综合评价期刊的权威性。SJR指数和特征因子同时考虑了引证期刊的数量与质量,但SJR指数和特征因子计算较为复杂,并且分别通过Scopus数据库和JCR引文数据库的数据计算得到,数据封闭性较强,外界无法对计算结果加以检验[3]。为此,国内学者李超[4]在2012年构建了一种计算简便且考虑引用质量的加权影响因子,以CSSCI图书情报学期刊为例进行了实证研究;郑美莺等[5]于2015年以引用文献的期刊质量为权重对影响因子公式进行修正,表明修正后的公式能更客观地对期刊进行评价;严建新[6]于2017年提出一种可在一定程度上区分引用来源并且操作简单的期刊评价方法,实践中为科研机构制订重要期刊目录提供了新的参考依据;祖茜雅[7]于2018年将引文价值纳入学术评价指标研究体系,对作者和期刊的影响力进行了评价。另有学者从学术成果的创造者——作者的角度出发,提出了期刊评价的新指标。李秀霞等[8]于2017年基于论文作者特征,对学术期刊的影响力进行预测;2018年,宋晓晨等[9]从论文作者简介出发,提出一种新型期刊评价方法;同年,盛宇平等[10]认为将作者机构指标纳入期刊评价具有一定的合理性和可行性。

梳理已有研究发现,在评价期刊影响力时学者们已经考虑到引证期刊的质量,也有将文献作者纳入期刊影响力评价的研究,但鲜有考虑文献引证作者学术水平的研究,更未发现有将引证作者的学术水平和引证期刊的质量结合来评价学术期刊影响力的研究。郑美莺等[11]曾经提出“被引用率高的文章其学术价值也高,但还要考虑引用者的学术水平”。基于上述,本文同时将引证作者的学术水平、引证期刊的质量纳入期刊评价指标中,构建基于引证质量的期刊影响力评价指标——Icw指数,以期提高期刊影响力的评价效果。

1 新指标的构建

1.1 引证作者学术水平

作者是学术成果的创造者,作者水平直接关系到学术研究成果的质量。期刊是学术成果的承载者,学术成果的质量与期刊影响力的高低有着直接的联系。评价作者的学术水平一般用其学术能力、研究成果及学术贡献来判断,而学术论文是学者研究成果的主要表现形式[7],因此作者的个人成就可以用其发表论文的数量和质量来衡量。美国物理学家Hirsch[12]在2005年提出一个测评学者成就的指标——h指数,h指数巧妙地将发表论文的数量和论文的被引频次结合在一起。为了说明不同施引者引用效果不同,本文使用h指数作为引证作者学术能力的体现,并代替单独的每次引用。为了降低引用次数差异带来的影响,计算数据集中引证作者的引证次数占总引证次数的比例,进而计算基于引证作者学术水平的指数AIcw。

其中,ha是引证作者的h指数,ca表示选取数据集中引证作者的引证次数占总引证次数的比例。

1.2 引证期刊质量

2006年,Braun等[13]将h指数用于期刊评价,提出期刊h指数,即该期刊所发表的全部论文中最多有h篇论文至少被引用了h次。与期刊影响因子相比,期刊h指数有较大的优势,它对单篇高被引和低被引文章不敏感,数值比较稳定并且综合考虑了期刊数量和质量。因此,h指数成为期刊评价的重要指标之一。本文选择期刊两年h指数作为引证期刊的质量,并代替单独的每次引用,这样得到的期刊影响力具有即时性。计算基于引证期刊质量的指数JIcw。

hj是引证期刊的h指数,cj为选取数据集中引证期刊的引证次数占总引证次数的比例。

1.3 Icw指数

1.3.1 熵权法确定权重

熵权法是一种客观赋权方法,熵值的大小反映了该信息源的无序程度。熵权法的权重计算准则完全按照指标间的数值离散程度来设置,能够有效地排除人为干扰因素,使研究结果更加客观公正[14]。熵值法计算指标客观权重思路:设有m个待评期刊,n项评价指标,形成原始指标数据矩阵X=(xij)mn。对于某项期刊评价指标xj,指标值xij的差异越大,则该评价指标在期刊评价中所起的作用越大,赋予的评价权重也应越大;反之赋予该评价指标的权重越小。

1.3.2 计算Icw指数

设wa为引证作者的权重,wj为引证期刊的权重,根据熵权值计算公式计算得出wa和wj,进而计算Icw指数。

本文将依据期刊的Icw指数大小对期刊影响力进行排序与评价。

2 实证分析

2.1 数据来源及处理

CSSCI是由南京大学中国社会科学研究评价中心开发研制的数据库,现已成为教育部评价人文社会科学研究成果的重要平台[15],其遴选的人文社科核心期刊质量受到学术界的广泛认可。本文选取CSSCI来源期刊和收录集刊(2017—2018年)目录中图书情报与文献学的20种期刊数据为样本。中国引文数据库(CCD)收录了中国学术期刊(光盘版)电子杂志社出版的所有源数据库产品的参考文献,并且能够给出下载频次与文献之间的引证信息[16],故选用CCD为本研究来源数据库。基于“国内图书情报领域论文发表后2~3年达到被引高峰”[17]且CSSCI排名每两年进行一次,本文从CCD数据库中分刊检索、下载图书情报与文献学20种核心期刊2016—2017年全部载文的引证信息。数据检索策略是:出版时间选择2016—2017年,被引来源限定为“精确”,依次输入20种期刊的名称进行检索,对其引证信息进行分析,输出分析结果,如表1、表2所示。

表1 引证作者信息输出结果——以《中国图书馆学报》引证作者为例(部分)

表2 引证期刊信息输出结果——以《中国图书馆学报》引证期刊为例(部分)

作者和期刊的h指数数据通过中国引文数据库检索得到,本文选取前100位引证作者、前50种引证期刊进行分析。根据熵值法计算公式计算得到引证作者与引证期刊的权重,即权重wa=0.621,wj=0.379。从权重大小来看,引证作者的影响力比引证期刊的影响力更能体现期刊质量的差异。将权重值带入公式(3),计算得到我国图书情报与文献学领域20种期刊的Icw值,如表3所示。

表3 20种期刊数据统计

2.2 结果分析

为评估Icw指数的评价效果,将其与评价期刊影响力的CSSCI期刊排名、h指数进行对比。CSSCI评价依据的是定量与定性评价相结合,具有一定的科学合理性;h指数是国内外应用较高的学术成就评价指标之一,虽有对低频数据不敏感、无法区别不同质量的引用等不足,但是期刊、作者等影响力评价的常用指标;统计Icw指数、CSSCI排名、h指数3种指标的数据,见表4。

2.2.1 与已有指标的一致性对比

根据Icw指数、CSSCI、h指数3种指标对期刊的不同排名,绘制期刊影响力排名变化图(见图1),横坐标表示期刊,纵坐标表示3种指标评价的期刊影响力排名。

表4 20种期刊Icw指数、h指数及CSSCI排名(按Icw指数值由大到小排序)

图1中,Icw指数、h指数和CSSCI的期刊影响力排名总体一致,重合的数据点对应不同指标下影响力排名相同的期刊。由图1可知,CSSCI评价指标与Icw指数的评价结果中,排名相同的期刊为《情报资料工作》《图书馆》《档案学研究》《档案学通讯》,占期刊总数的20%;根据Icw指数的评价结果,《图书情报工作》《中国图书馆学报》位居图书情报类核心期刊前两名,这两种期刊的CSSCI排名、h指数排名也都位居前两位,《档案学研究》《档案学通讯》两种期刊排名靠后,其CSSCI排名与h指数排名也靠后,说明Icw能够筛选出公认的高质量期刊。鉴于CSSCI排名与h指数两项指标在期刊评价中已发挥了重要作用,说明Icw指数在期刊影响力评价中具有一定的价值。

为了更好地比较Icw指数与CSSCI排名、h指数的评价效果,对其进行Pearson相关性分析,结果如表5所示。

表5 Pearson相关性分析

分析可知,Icw指数与CSSCI评价、h指数均显著相关,相关系数分别为0.764和0.752,说明Icw指数在评价期刊影响力方面具有一定的科学性。Icw指数与CSSCI排名的相关系数高于Icw指数和h指数相关系数,说明相较于h指数,Icw指数和CSSCI排名的相关性更强。CSSCI排名是定性分析与定量分析相结合得出的结果,h指数是定量指标,Icw指数与CSSCI排名的相关性更强,说明Icw指数的结果更加科学、可靠。

图1 3种指标的期刊影响力排名比较

2.2.2 与已有指标的差异性分析

与CSSCI排名的对比中,个别期刊评价结果差异较大,如《情报理论与实践》《大学图书馆学报》。如表3中所示,《情报理论与实践》AIcw值排名、JIcw值排名均为第三,其Icw指数排名也为第三。分析下载数据发现,《情报理论与实践》刊载的文献被一批高影响力的学者引用,且h指数较高的期刊引用《情报理论与实践》文献的次数较多,所以《情报理论与实践》的期刊影响力排名上升。

排名下降的期刊中,排名差异较大的期刊为《大学图书馆学报》,其引证作者的h指数之和排名靠后,AIcw值排名也靠后,说明《大学图书馆学报》的引证作者群体影响力较低,并且在这些影响力较低的作者群体中,h指数较高的作者引用次数也较少;AIcw值排名第十四,JIcw值排名第十一,根据Icw指数计算公式求得Icw值排名第十一,说明Icw指数的评价结果均衡了引证作者和引证期刊的影响力,评价结果更加全面;《情报学报》的JIcw值排名第五,AIcw值排名第十,根据Icw指数计算公式求得Icw值排名第七,进一步证明了Icw指数能够均衡引证作者和引证期刊的影响力,能够综合多方面且较为细致地评价期刊,评价结果更加客观可靠。

某些期刊的引证期刊质量较高,但引证作者的学术水平相对较低。如《情报科学》的JIcw值排名第一,但AIcw值排名第六,Icw指数排名第五。分析下载数据发现,《情报科学》的期刊自引率较高,导致引证期刊的JIcw值较高,加入引证作者的学术水平之后,在一定程度上降低了期刊自引带来的影响。

另外,本实验中Icw指数的期刊排名没有并列的情况发生,但在h指数的排名中,共有5组期刊的h指数相同,如《图书馆学研究》《图书馆杂志》和《图书馆建设》的h指数均为64,但三者的Icw指数分别9.417、9.391和9.018。Icw指数有效地区分了期刊评价结果相同的情况,从而提高了评价精细度。

3 结语

本文在分析已有期刊影响力评价指标的基础上,将引证作者的学术水平纳入期刊影响力评价体系,提出评价期刊影响力的Icw指数,该指数既考虑了引用次数,又考虑了引证期刊的质量、引证作者的学术水平,并区别对待各次引用,是一个受多因素影响的综合性指标,能够全面综合地衡量期刊的影响力。从原理上看,Icw指数更加合理。以CSSCI图书情报与文献学20种核心期刊为例,计算期刊的Icw指数,通过与CSSCI排名、h指数的对比,发现Icw指数能够全面综合地衡量期刊的学术影响力,具有更高的区分度,评价结果更加客观。

Icw指数仍有不足之处,如本文在计算Icw指数时,是利用引证期刊和引证作者的h指数来反映引证期刊和引证作者的学术质量,但h指数本身未考虑引证质量的差异,这会对评价结果造成一定的影响。如何克服h指数的不足对Icw指数的影响,科学合理地反映不同的引证质量是后续研究的主要内容。

猜你喜欢
情报影响力学术
情报
情报
情报
学术是公器,不是公地
如何理解“Curator”:一个由翻译引发的学术思考
对学术造假重拳出击
天才影响力
黄艳:最深远的影响力
交接情报
3.15消协三十年十大影响力事件