图谋博客分享 http://blog.sciencenet.cn/u/libseeker 图谋,为图书馆学情报学谋,为图书情报事业谋。

博文

正确认识引文评价方法

已有 2138 次阅读 2022-4-18 09:03 |个人分类:圕人堂|系统分类:科普集锦

圕人堂文摘

图谋按:引文分析与引文评价法是图书情报领域的研究重点之一。在“内容为王“或者说“数据为王“的环境下,采用特定的技术方法,种种基于引文的科研评价、人才评价等备受追捧。可谓几家欢喜几家愁。作为一名高校图书馆工作者,或主动或被动对相关产品与服务保持一定关注,不同程度参与相关工作,困惑重重。本文特此摘编《中国科学报》2021年12月9日综合版刊发的赵星,许可《重视引文“黑暗面” 让学术空间充满阳光》,期待有助于学术共同体及其他利益相关者更好地正确认识引文评价方法。

图谋摘编自:赵星,许可.重视引文“黑暗面” 让学术空间充满阳光.https://news.sciencenet.cn/htmlnews/2021/12/470443.shtm

原文引用方式:赵星,许可. 重视引文“黑暗面”  让学术空间充满阳光[N]. 中国科学报,2021-12-09(004).

    一段时期以来,论文“高被引”被等同于“高影响力”甚至“高质量”,作为一顶“新帽子”成为各路评价体系追捧的对象,并愈演愈烈。无论是“全球高被引科学家”榜单、“中国高被引学者”榜单,还是各种数据库口径下的高被引论文,都因为与代表性成果的关联受到追捧。

    应当承认,在当前的定量指标中,引文依然是可以关注的方面。然而,引文在本质上只是学术指标交流的一种标记方式。若一定要放入评价视域中,大多数情况下“高被引”也更多是体现相关研究的热度。当样本量足够大时,“高被引”大体上与学术圈内的“影响力”有统计学意义上的相关性。但就单篇论著而言,“高被引”时常无法与“高影响力”或“高质量”直接画等号,片面追求“高被引”可能催生各种不合理引用现象。引文的黑暗面由此产生。而这也正是“破五唯”所要直面解决的重要缘由。

    引文的黑暗面有诸多表现。引文的黑暗面表现之一是过度自引。引文的重要目的在于论证研究内容的可靠性。如果是在之前论著的基础上形成和发展的,具有创新性,那么自引就有一定的合理性,但如果对之前论著进行非必要的刻意引用,则有自我鼓吹之嫌。过度自引是故意抬高被引数据,属于不当的引文动机。 引文的黑暗面表现之二是不当他引。其表现为:一是不引与漏引。不引是吸收他人成果,但有意不注明出处。漏引是为了突出自身研究的创新性和重要性,故意不引用一些重要文献。无论是不引还是漏引,实际上都降低了被引量,缺失了应有的知识链接标记。不引与漏引都是不尊重前人研究的行为。二是诱引、崇引与过引。诱引是诱导引用论著的行为。在“高被引”指标的激励下,期刊或者个人采用诱导的方式来增加被引量。崇引是作者在非必要的情况下故意引用有影响力的学者(论著)。这两种行为都利用主观或客观权威形成“俱乐部效应”,并导致论著产生不准确的知识表达。过引即过量引用。极少数作者为显示研究材料的掌握丰富度或达到一定的约定俗成参考文献数量,在没有必要的情况下,刻意增加引文,同样会导致论文产生知识链接冗余。引文的黑暗面表现之三是互利互引。当前学术主体之间的利益关系导致了引文规范问题的复杂化。极少部分学者或期刊为了提高自身的被引量而相互引用,形成“集团自引”现象。甚至有期刊将“集团自引”视为期刊快速发展和提高引文指标的“宝贵经验”,严重偏离了学术知识交流的正常轨迹。

    引文的黑暗面对于新型评价方法或存在致命影响。引文的黑暗面在学术界存在已有较长的历史。在过去,引文的黑暗面只是影响评价指标的数值结果。随着评价改革的深入和评价方法的创新,引文黑暗面的更深层次影响或将逐渐暴露。引文黑暗面的存在将使得这种努力在一开始就面临巨大的风险与挑战。首先,众所周知,诸多智能化算法需要大量准确可靠数据的训练。不当引文的存在,使这种训练的可靠性无法得到保障。其次,基于数据智能的分析与评价,其核心突破是对于知识内容的深度挖掘,其分析效率和客观性需要达到一定程度,才有望最终通达测量出“创新性”这一学术评价的终极目标。而引文的黑暗面会使得论著在涉及知识引用部分时,误导挖掘路径,得到偏颇结论,阻断了正确识别“创新性”的可能性。第三,引文作为目前联接论著这一知识集合单位的主要标注物,其本身也是数据智能分析与挖掘的重点,不当引文会引导自动分析程序走向错误的知识网络分支或子群,形成“知识歧途”。可见,原来作为评价方法改革与创新的数据智能方法,会很大程度上受到引文黑暗面的干扰,被不当引文引向错误结论。可预期的数据智能方法尚不足以完整判断引文中的黑暗面,因此,这一原始数据的失真对于方法体系创新将有较为致命的影响。

    只有当学术空间充满阳光、驱散黑暗,技术方法才有用武之地。过去 20 年中国学术评价的异化,与其说是指标的滥用,不如说是人在滥用指标,又或者制度在诱导人滥造指标。系统性的数据智能评价工具确实有望打破“指标给出就失效”的怪圈,而解决引文的黑暗面将是这类工具有效运行的重要前提之一。




https://wap.sciencenet.cn/blog-213646-1334421.html

上一篇:劳碌为何?
下一篇:五计学发展的历史进程与演化特性
收藏 IP: 61.132.1.*| 热度|

2 许培扬 尤明庆

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-4-20 01:54

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部