学术论文的评价本质

学术论文的评价本质

质量、价值和影响力是学术论文评价研究中出现最多的词汇。质量是评价的目标层,价值和影响力通常作为质量的评价要素。很多学者构建论文评价指标时没有关注指标的评价作用,忽视了质量、价值和影响力之间的差异以及学术论文评价的本质。

1价值说

价值通常分为学术价值、经济价值和社会价值,其中学术价值和社会价值是主要的评价要素,主要从定性和定量两个方面来测量。邱均平将学术价值分为科学进步价值和学科建设价值两个定性指标以及被引次数和被下载次数两个定量指标,将社会价值分为社会反响和社会效益两个定性指标以及社会反响和采纳部门采纳情况两个定量指标。李睿明指出,价值是科学论文的灵魂,决定其生命力和影响力,提出从作者提出、发现、创造、预见和证明了什么来评价论文的价值。

2影响力说

学术影响力指论文受到科学共同体成员的关注程度,目前主要集中在对因“被引冶而产生的学术影响力的测度。赵蓉英[48]基于期刊即年指标、影响因子、5年影响因子定义了论文即年因子、2年期引证因子和5年期引证因子,构建了引证视角下论文学术影响力的评价指标体系。李力等[49]以引用情况和合作情况为基础从知识输入、知识输出及知识流动网络结构三个维度构建了科技论文的学术影响力评价框架。社会影响力指学术论文受到的网络关注程度,主要侧重于论文在社会舆论媒体、网络社交媒体和网络学术工具上的影响力,其受众不局限于科学共同体成员,影响方式也不局限于期刊论文之间的引证关系。

3质量说

质量是个多学科概念。《辞海》中质量被解释为产品或工作的优劣程度;物理学和其他自然科学将其定义为量度物体惯性大小和引力作用强弱的物理量。《中国成人教育百科全书》指出,为了测定物体的质量,必须首先确定用什么来量度物体所含的物质[51]。因而,基于《辞海》和《中国成人教育百科全书》中“质量冶的定义,从产品或物体的角度来看待学术论文,则学术论文的质量应该是指它的优劣程度,必须通过它所包含的内容要素对其进行测量。学术论文通常包括研究思路、设计、目的、方法、内容、结果、讨论、参考文献、作者、机构、来源期刊等要素。因而,论文质量应该是一个涉及诸多方面的综合性概念。然而,当前的论文评价实践中,人们往往将质量简化为价值或学术影响力的评价。

4评价本质

从学术论文自身属性来看,一篇优秀学术论文的本质属性应该在于它的价值性。例如,一篇极具启发性的论文,即使其质量较差,但仍不能掩盖其显在或潜在的价值。相反,一篇符合规范、设计合理、逻辑严谨、缺乏创新的高质量的论文,却不能说其具有较高的价值。此外,从学术评价目的来看,论文评价的终极目标是发现对科学发展有重要学术价值的成果,即学术评价的目标是促进学术发展、规范学术研究、激励学术创新。因而,无论从学术论文的本质属性还是从学术评价的终极目标看,论文的评价本质都是价值评价。学术论文的价值由自身内容和所处环境共同决定,通常分为社会价值、经济价值和学术价值。由于学术论文的主要功能是促进科学交流,其价值首先应该表现为学术价值,社会价值和经济价值是学术价值在不同领域应用的结果。也就是说,学术论文的评价本质是学术价值评价。此外,由于学科差异,学术论文的形式、内容和价值具有多样性,即论文具有价值和使用价值两种属性。被引频次是论文使用价值的一种表现形式,社会价值和经济价值也体现了论文的使用价值,但学术论文不是普通商品,其价值不能由作者的简单劳动时间来计算。一篇学术论文的学术价值是由作者在长期科学研究过程中基于前人研究成果的基础上产生的新思想、新方法、新观点等的具体体现。因而,一篇学术论文的学术价值大小、质量高低,首先取决于其创新性的有无和创新度的高低,可以通过新知识增量的结构方程、科学知识图谱以及评价性话语元素等进行评估。

5学术论文评价方法的新视角

长期以来,以同行评议为主的定性评价和以文献计量学为主的定量评价存在难以相互弥补的矛盾,定性评价较准确,但效率低,评价面窄,容易夹杂人情因素,不适宜大范围、大批量的学术论文评价。定量评价较客观,效率高,可操作性强,但不直接针对学术论文内容,且评价滞后。因而,如何克服定性评价中的主观性和低效率,以及定量评价中不针对内容等问题,是当前学术论文评价所面临的主要困境。认知计算是一项使人类能够和机器合作的技术方法,辅助人类解决复杂问题和不确定性问题。“认知计算冶这一术语来自于认知科学与人工智能领域,20世纪90年代后,人们开始使用“认知计算冶一词。具体地说,认知计算是指计算机拥有自我学习系统,可以像人类大脑一样学习,不仅可以处理结构化的数据,而且可以通过学习,实现识别人类自然语言、图像、视频等以往都需要人类亲自操作的功能,建立一种能够摆脱人类干预并自行解决复杂问题的计算系统。在理论方面,目前关于认知计算的研究主要集中在对认知的可计算性的解释,认知系统的软硬件设施、原理及相关算法,在医疗、法律、教育等不同领域应用的探索,以及开发可以实现某种特定功能的认知计算系统等方面。但在医疗、生物、金融和零售等行业内,认知计算已进入初级应用阶段。认知计算在学术论文评价领域具有较大的应用空间和潜在价值。首先,认知计算对非结构化文本数据的理解和处理具有明显优势。认知系统不仅可以处理论文被引频次、期刊影响因子、作者h指数等传统的结构化数据,还可以理解期刊论文、图书章节、图表、视频等非结构化数据。其次,认知系统在模仿人类思维过程的同时,增加了处理大量信息的能力和对信息进行无偏见评价的能力。认知系统在提高数据处理效率的同时,可以克服人类的主观性和偏见性。因而,将认知计算引入学术论文评价领域,有望同时解决定性评价中的主观性和低效率,以及定量评价中不针对内容和人为操纵等缺陷。我们认为,从学术论文的语义内容角度,根据论文自身特征以及学术论文的评价本质,利用与论文生产、传播、服务等相关的多源数据作为基础,采用认知计算技术构建学术论文评价的认知系统,是完善现有学术论文评价理论和方法的新视角,有望成为未来学术论文评价的重要发展方向之一。

6结束语

一直以来,由于没有找到更合理的替代性方法,在实际的论文评价中,人们依然采用同行评议或文献计量学结果作为学术论文质量的判定标准。本文对学术论文评价方法的发展历程进行了详细梳理,分析了现有论文评价方法的评价效用及其存在的问题,期望为学术评价领域和科研管理领域学者开展相应研究提供借鉴和参考。其次,通过对论文评价指标的评价作用进行探讨,从价值说、影响力说和质量说视角分析了单篇学术论文评价的本质,认为学术论文的评价本质是学术价值评价。最后,针对当前学术论文评价方法存在的缺陷,提出了基于认知计算的单篇学术论文评价新视角,认为学术论文的认知系统有望同时解决专家定性评价的主观性和低效率以及定量评价的不针对内容和人为操纵等问题。