低被引期刊论文学术价值的评价方法研究

分类:论文范文 发表时间:2021-04-25 08:55

  摘要:以论文被引频次为基础的评价方法逐步得到学术界的认同,但当前多数方法对低被引论文的评价存在不足。文章在分析期刊论文被引频次特征的基础上,构建了对低被引论文最终被引频次的估计模型;经实证检验,提出模型的计算结果与实际有较好的吻合。

  关键词:期刊;低被引论文;被引频次;学术价值;评价方法

  当前对期刊论文学术价值的评价方法多数都是基于被引频次展开的,被引频次被看作是衡量学术价值的重要标准。但是,相关研究表明这些方法(如h指数及h型指数)仍存在不足———只关注高被引的期刊论文,忽略了低被引期刊论文的学术价值贡献[1-2],使评价结果缺乏真实性。事实上,一篇期刊论文是否为高被引往往需要较长时间来验证,由于发表时间较短而导致的低被引论文并不意味着其永远为低被引。特别地,当前的部分评价仅看被评者近期的成果,使得这些评价方法在应用上也存在不足。基于以上背景,本文将在前期研究的基础上,对低被引(当前“图书馆、情报与文献学”为小于等于9次)期刊论文学术价值的评价方法展开研究[3],以期提高科研评价方法的科学性。

低被引期刊论文学术价值的评价方法研究

  1期刊论文学术价值评价方法的文献分析

  根据文献调查,对期刊论文学术价值评价方法主要包括定性评价、定量评价、综合评价(定性与定量相结合)。定性评价是评价主体通过阅读和讨论等形式对评价对象的相关方面用文字语言进行描述的方法[4],其主要形式是同行评议。虽然同行评议是当前我国评价社会科学成果的主要方法,但存在主观性太强、同行专家难以选择、评价成本高等不足之处[5-7]。

  2期刊论文被引频次特征分析

  2.1数据的选取

  参照中国学术文献网络出版总库(CNKI)、中文社会科学引文索引(CSSCI)、中国科教评价网以及中文核心期刊要目总览,我国“图书馆、情报与文献学”领域主要的期刊总共有18种。参照中国知网引文数据库的期刊被引统计数据,18种样本期刊刊载论文被引高峰期为发表之后的2~4年,随后即年被引频次逐年减少,当论文的发表时间超过10年后,则很少再被引用,其总被引频次趋于稳定,可认为发表10年后获得的总被引频次就是该论文的最终被引频次(也可称为总被引频次)。因此选取2001年刊载论文的被引频次作为分析对象,按照CNKI数据库图书情报类期刊刊载高被引论文百分比进行等距抽样,抽取《中国图书馆学报》、《图书馆》、《图书与情报》作为样本,对期刊论文被引频次的年代分布特征进行分析。

  2.2逐年累计被引频次与总被引频次的关系分析

  大部分期刊论文发表之后,在一段时期内其累计被引频次将随着论文发表时间的增长而不断提高,当增长时间足够长时(当前“图书馆、情报与文献学”大约为10年),其累计被引频次则不再随着被引时间的增长而显著提高,只是无限趋于总被引频次。为了发掘逐年累计被引频次与总被引频次的关系,标准利用SPSS18.0对每篇论文逐年累计被引次数与总被引频次作Person相关性分析,如表1所示,表1中“**”表示在0.01水平(双侧)上显著相关,下同。

  3总被引频次的综合指标体系预测方法

  3.1评价指标的选取

  客观公正是评价期刊论文学术价值的基本要求,这不仅要求选取的评价指标应尽量全面、客观,能最大限度地反映期刊论文的学术价值;并且选取的指标应当相对精炼,以确保评价方法的效率和可行性。此外,选取的评价指标要有区分度,即根据所选指标能够将评价对象按照某一属性区分开来,为择优去劣提供依据。由于定性评价指标相对复杂、主观性强且评价成本较高,因此,去除定性评价指标,选取纯定量的指标,主要包括以下3个。1)被引频次。一方面,被引频次不仅显示了期刊论文被引使用和受研究者重视的程度,而且直接反映了该期刊论文在学科发展过程中所起的作用,在一定程度上反映出期刊论文的学术价值[20]。同时由于被引频次是一个纯客观性指标,避免了同行评价的主观性等缺点,因此被引频次得到了广大学者的认可,被广泛应用于科研评价中。另一方面,随着国内外引文数据库的不断成熟和当前学术研究(引用)的不断规范,使得用被引频次来评价期刊论文的学术价值成为可能。因此,本文也将被引频次作为评价期刊论文学术价值的主要指标之一。2)所在期刊论文被引频次的数学期望。“以刊代文”的方法操作简便,因而被广泛应用于科研评价中。然而,以期刊总体的学术水平来评价某篇论文的质量,认为优秀期刊上刊登的一定是优秀论文,这一推论在逻辑上并不合理,因此这种方法的合理性也遭到很多学者的质疑[21]。事实上,2005年图书馆情报学领域的“权威期刊”刊载的论文也只有55.72%的文章是高被引[22]。并且刊物等级排序和期刊影响因子与2001—2005年高被引论文百分比的平均值只存在弱相关性(Person相关性系数),其中与中国科教评价网排序的相关性系数为-0.665,与中文核心期刊要目总览排序的相关性系数为-0.616,与中文社会科学引文索引排序的相关性系数为-0.722,与期刊影响因子的相关性系数为0.701。上述数据表明,将期刊等级直接用于评价期刊论文学术价值存在一定的不合理性。

  3.2综合指标体系的分数合成方法研究

  经过文献分析,评价期刊论文质量常用的分数合成方法有指标加权求和、层次分析法、模糊综合评价法、基本分乘系数等。指标加权求和是将各个指标得分乘以其对应的权重再分别累加而得到最终分值,指标加权求和的方法常用于具有互相补偿性的指标体系中,在某一个指标上得了低分,可以通过在其他指标上得到高分来补偿。层次分析法可以认为是模糊综合评价法的一种特例,二者均是对评价对象从多个因素进行综合评价的方法,是当前常用的综合评价分数计算方法,但二者的指标权重大多是由人为确定的,主观性较强。基本分乘系数是指在计算某一对象的总体得分时,以某一个指标的得分为核心,其他指标得分对该指标得分进行调整。由于选取的各指标不涉及指标得分之间的相互补偿,以及为了避免个人主观判断随意性的影响,本研究在计算综合指标得分时选用基本分乘系数的方法,基本表达式为:X=实际被引频次+int(期刊被引频次的数学期望×论文发表时间得分系数),int表示向下取整,例如int(2.7)=2,下同。

  5结束语

  低被引期刊论文学术价值的评价是一个复杂的过程,本文从纯定量角度对低被引期刊论文学术价值的评价方法进行了探讨,将论文发表时间纳入评价体系中,对发表在不同时间段的论文采用不同的评价方法,从而提高了期刊论文学术价值的评价结果的准确性。

  参考文献

  [1]聂超,朱国祥.h指数在科研评价中的缺陷及其对策[J].情报理论与实践,2009(11):1-2.

  [2]ANDERSONTR,HANKINRKS,KILLWORTHPD.Beyondthedurfeesquare:enhancingtheh-indextoscoretotalpublicationoutput[J].Scientometrics,2008(76):577-588.

  [3]杨利军,万小渝.期刊论文低被引标准的界定方法[J].情报理论与实践,2013,36(7):51-53.

  [4]叶继元.人文社会科学评价体系探讨[J].南京大学学报,2010(1):97-110.

  [5]陈进寿.从人际关系谈同行评议制的改进[J].中国科学基金,2002(3):182-184.

  [6]马晓光,连燕华,沈全锋,等.同行评议中专家识别研究[J].研究与发展管理,2003(3):68-72.

上一篇:地方农业科技期刊面临的生存危机与对策 下一篇:大数据下中文期刊论文被引分析