一种新的、更可靠和准确的指标被用来衡量科学期刊的知名度
诸平
据西班牙马德里卡洛斯三世大学{Universidad Carlos III de Madrid (UC3M), Madrid, Spain}2024年11月28日提供的消息,一种新的、更可靠和准确的指标被用来衡量科学期刊的知名度(A new, more reliable and accurate indicator for measuring the visibility of scientific journals has been created)。
所谓的真正影响力(Called Real Influence)
来自西班牙马德里卡洛斯三世大学(UC3M)、西班牙莱昂大学{Universidad de León(ULE), León, Spain}和巴西圣保罗州立大学{Universidade Estadual Paulista(UNESP), Marilia, Sao Paulo, Brazil}的研究人员开发了一种比影响因子(impact factor)更强大、更清晰、更公平的指标,几十年来,影响因子被广泛用于评估学术和科学期刊。相关研究结果于2024年7月9日已经在《定量科学研究》(Quantitative Science Studies)杂志网站发表——Antonio Perianes-Rodríguez, Bianca S. Mira, Daniel Martínez-Ávila, Maria Cláudia Cabrini Grácio. Real influence: A novel approach to characterize the visibility of journals and publications. Quantitative Science Studies, 2024, 5(3): 778–804. DOI: 10.1162/qss_a_00316. https://doi.org/10.1162/qss_a_00316.(Real_Influence_Novel_Approach.pdf)
这个被他们称为“真实影响力”的新指标有许多实际应用,从评估研究项目和认证到终身教职申请和科学期刊中不寻常的引用模式的识别。上述论文的作者之一、UC3M图书馆与信息科学系(Department of Library and Information Science at UC3M)教授安东尼奥·佩里亚内斯(Antonio Perianes)表示,该指标“旨在对科学期刊进行理性和情境化的评估,而不是仅仅根据数字做出决策的神奇公式。”他补充说:“它不应该成为一种单一的衡量标准,因为它不能捕捉科学的所有复杂性,而应始终与对科学出版物的定性评估相结合。”
“真实影响力”旨在提供一种改进的替代方案,以取代影响因子,影响因子计算每篇科学出版物的平均引用次数。根据研究人员的说法,这个系统的问题在于,它提供了关于每个出版物的个人可见性的信息,但不能避免被高引用的文章造成的扭曲,以及其他缺点。例如,在出版物和引用频率较高的领域(如生物医学科学或技术)或不能反映出版物的长期影响的领域,因为它通常测量出版后两年内的引用,这是导致影响因子测量值往往较高的原因。
安东尼奥·佩里亚内斯解释说:“我们创建“真实影响力”的最初目标是开发一种工具,可以显示期刊中所有出版物的可见性,并允许它们之间的比较。这种方法可以在不失真的情况下比较不同规模的期刊分布,这一点尤其重要,因为它避免了与出版数量显著增加的期刊相比,产量较低的期刊的劣势。”
为了进行这项研究,研究小组比较了图书馆与信息科学(Library and Information Science,LIS, 86 journals,Table 1)、生物化学和分子生物学(Biochemistry and Molecular Biology,BIO, 315 journals, Table 2)领域近400种期刊的新指标的表现。分析结果表明,“真实影响力”不容易受到操纵,更好地代表了出版物的完整分布,最重要的是,基于每篇文章的可见性,提供了更详细和更公平的视角。
“真实影响力”的方法受到经济学或儿科成长等领域使用百分位数的启发。这种方法不仅通过评估收到的引文,而且考虑每篇文章在其类别内的引文范围内的相对位置,从而避免了异常引用文章造成的偏差。这使得它易于在任何与引文研究兼容的数据系统(如WoS或Scopus)中进行调整和实现。
这项工作得到了西班牙马德里自治区(Comunidad de Madrid-Spain)与UC3M大学卓越教授(Excellence of University Professors)的多年协议(Comunidad de Madrid-Spain under the Multiannual Agreement with UC3M in the line of Excellence of University Professors, project number EPUC3M02)、高等教育人员协调发展基金{ Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES) Grant No. 88887.831119/2023-00}部分支持。
上述介绍,仅供参考。欲了解更多信息,敬请注意浏览原文(Real_Influence_Novel_Approach.pdf)或者相关报道。
For the last 50 years, the journal impact factor (IF) has been the most prominent of all bibliometric indicators. Since the first Journal Citation Report was launched, the IF has been used, often improperly, to evaluate institutions, publications, and individuals. Its well-known significant technical limitations have not detracted from its popularity, and they contrast with the lack of consensus over the numerous alternatives suggested as complements or replacements. This paper presents a percentile-distribution-based proposal for assessing the influence of scientific journals and publications that corrects several of the IF’s main technical limitations using the same set of documents as is used to calculate the IF. Nearly 400 journals of Library Science and Information Science and Biochemistry and Molecular Biology categories were analyzed for this purpose. The results show that the new indicator retains many of its predecessor’s advantages and adds benefits of its own: It is more accurate, more gaming resistant, more complete, and less influenced by the citation window or extreme observations.
转载本文请联系原作者获取授权,同时请注明本文来自诸平科学网博客。
链接地址:https://wap.sciencenet.cn/blog-212210-1462376.html?mobile=1
收藏