开放获取资源评价模式的研究基于单篇论文质量评价 摘 要 论文分析开放获取出版的发展态势,研究开放获取期刊的质量评价方法,指出开放获取期刊在发展的进程中,逐渐表现出与传统期刊的差异,采用传统评价方法应用于开放获取期刊评价已经具有明显的局限性,并揭示了基于开放获取期刊的评价已经开始向基于单篇论文的质量评价过渡,分析了基于单篇论文质量评价的主要指标、应用情况、评价体系以及评价效果 关键词 开放获取 论文 质量评价 Altmetrics 分类号 G252.8 Research on the Evaluation Model of Open Access Resource:Quality Assessment based on the Occasional Papers Liu Juhong, Huang Kaiwen Abstract This paper analyzes the developing trend of open access publishing, researches the quality assessment method of open access journals(OAJs). It points out that in the development of OAJs, they have changed a lot. Using the traditional assessment method is outdated. It also announces that the assessment based on journals is transferring to the quality assessment based on the occasional papers, analyzes the main indexes, popularity, assessment system, and performance. Keywords Open Access. Paper. Quality assessment. Altmetrics. 科学出版在历经了350年的缓慢发展之后,目前已迈入以快速出版和普遍分享为特征的互联网时代,一些新型出版模式正在挑战传统出版模式,其典型代表就是开放获取(以下简称OA)模式。
随着OA运动的深入发展,涌现出了一批具有崭新特点的开放获取期刊(以下简称OAJ),这些期刊从出版速度、出版容量、媒体表现形式、语义化出版等方面,都显示出了与传统期刊不同的特点,采用传统文献计量学指标来评价OAJ,已经显示出局限性因此,针对OAJ本身的特点来设计评价指标,已经成为一项具有重要意义的研究课题 1 OA资源出版态势分析 1.1 在数量上显著增加 OA自提出以来,以其先进的理念,于21世纪取得了长足发展国际权威的OAJ收录代表――2003年5月由瑞典隆德大学(Lund University Libraries)图书馆创办的OAJ目录(Directory of Open Access Journal,简称DOAJ)截至2014年5月,收录的OAJ已经达到9834种,OA文章约1 659 880篇,见图1始于2005年1月的“开放存取知识库名录”(Direct of Open Access Repositories,OpenDOAR)是公认的收录OA知识库最为权威的目录网站,截至2014年5月,在OpenDOAR注册的OA知识库已达2604家OAJ和机构知识库的迅速发展,体现出OA运动迅猛发展的潮流。
据一项欧盟资助的研究同时表明,已经有一半的论文在发表两年内可以免费访问研究的第一作者艾瑞克?阿尔尚博(Eric Archambault)认为,这表明OA出版已经抵达一个拐点[1] 图1 DOAJ收录OAJ数量 1.2 在质量上持续提高 Web of Science数据库收录的研究成果代表着世界基础科学研究的最高水准通过Web of Science核心合集检索显示,2004年共发表29 394篇OA论文,而截至2014年5月,OA论文总量已经达到1 063 036篇;且OA论文数量占论文总量的百分比一直在增加,由2004年仅占2.54%上升到2013年占比高达16.61%(详见图2)这说明随着OA运动的深入发展,已经得到了高水平科研人员、科研机构、出版机构的认同,愿意在OAJ上发表论文的研究人员越来越多 图2 SCI核心合集收录OA论文数量 占全部论文数量的百分比 2 OAJ质量评价方法研究综述 自OA诞生以来,其质量问题就成为学术界关注的焦点,国内外研究人员围绕OAJ、OA论文的质量和影响力展开了较为广泛的实证研究早期国外诸多学者比较了同一学科领域同一期刊或者影响因子接近的期刊、或质量接近的会议论文中,OA论文与非OA论文获得的引用数量的差异,探讨OA对促进学术传播、提高学术成果可见度、增加引用数量的影响[2-6]。
国内对OAJ的质量评价,可以划分为以下几个类型: (1)早期的研究,从学科分布、检索特性、影响因子等角度,将OAJ与传统著名期刊进行对比[7,8] (2)基于文献计量学指标构建评价体系经过初期的探索后,众多学者开始采用传统文献计量学指标如载文量、篇均作者数、总被引频次、平均引文率、影响因子、即时因子、h指数、论文合著率、国际论文比、作者合作度、扩散因子、特征因子(Eigenfactor)、SJR等指标构建OAJ质量评价指标体系[9-14] (3)基于文献计量学结合网络计量学、被权威索引体系收录指标构建OAJ质量评价指标体系因OAJ是源生数字、源生开放的,期刊的出版流程及用户利用行为如作者投稿、同行评议、论文发表、论文阅读、全文下载、同行讨论等都以形式展开,因此,OAJ的成败,除了与文章内容质量密不可分之外,还受到依托网站各项指标的影响,比如网站响应速度、界面友好性、检索入口数目、网络载文量、总网页数、网络引文率、链接流行度、网络述及、总网络影响因子、外部网络影响因子、PageRank值、IP访问量、页面浏览量、人均页面浏览量等指标因此,学术界在使用传统文献计量指标的基础上,联合网络计量学指标以及被权威文摘工具收录情况,构建OAJ质量评价指标体系[15-19]。
(4)从定性和定量两个角度设计OAJ质量评价指标体系定性指标包括期刊规划?出版机构的权威性?审稿是否严格、标准是否规范、版权保护方案、文字表达、科学创新、数据处理、研究方案等,定量指标包括文献计量学指标、网络计量学相关指标[20,21] 但随着OAJ的深入发展,OAJ本身开始呈现出与传统期刊不同的特征,如:出版周期不固定、出版容量无限制、出版内容多媒体化、开放获取的全文可计算等OAJ的种种期刊特征日趋模糊化,与传统期刊的分野日益明显在传统文献计量学指标广受诟病、OA论文快速激增,科研人员呼吁新型学术工具以解决日益严竣的论文选择矛盾的困境下,OA领域新型评价指标开始出现 3 OA出版呈现新特点 3.1 出版速度快 OA的宗旨之一在于加快同行评审期刊的出版,加快学术成果的传播速率传统纸质期刊有明确的出版周期,但网络出版无需受到纸质期刊按期出版的限制,可实现按篇即时出版,因此相对纸质出版可以有效缩短出版时滞,加快科研成果的传播例如,美国光学学会主办的《Optics Express》和《Optical Materials Express》,提供了“Issues in Progress”栏目,显示已录用并完成编辑加工的文章,每隔一周,会集中将此处的文章集合成为一期,作为最新一期出版。
《PLoS One》充分利用互联网优势,采用即时出版,无明确的出版周期只要稿件经过了严格的质量体系审查,就可以在每个工作日发表所以在《PLoS One》网站只要点击“Browse articles”,就可以看到当天或最近一周出版的文章据赵树庆和刘永胜研究报道2010年中国的20种科技期刊,3164篇论文的平均发表时滞为11.6个月(约348天)[22],与OAJ的差距巨大 3.2 出版容量大 在过去的十年间,涌现出了《PLoS One》、《OPTICS》等发文量大、增速较快的OAJ创刊于2006年的《PLoS One》,2007年全年发表论文4077篇,2013年全年共发表论文32 986篇,7年间年均发文量增长了10倍多,截止2014年5月8日止,共发表文章86 837篇(详见图3),其文章总量超过了1945年创刊,迄今已有59年历史的《The New England Journal of Medicine》,后者截止2014年5月8日止,共发表文章69 972篇OA的重要意义之一在于加快科学研究成果的传播速度,《PLoS One》在一天中出版的文章量比某些传统期刊一年出版的文章数量还要多。
图3 《PLoS One》历年发表文章数量 3.3 富媒体出版 传统的纸质出版只能局限于文本和图形方式的线性展示,而网络出版提供了更多的可能首先可以展现多种资源形式,如图片、音频、视频、动画、图表、模拟动画、数据模型、流程图等,因此可以传达更多的信息目前,由中国科学院长春光学精密机械与物理研究所与自然出版集团(Nature Publishing Group,NPG)以OA模式合作出版的《Light》网络版以xml标准出版,提供了各种信息之间的交叉链接,并具有全文检索功能同时,允许作者在发表文章时,以pdf、wav、gif、ppt等格式出版补充资料,以进一步补充说明论文中的论点[23]这种富媒体出版,极大地方便了读者使用资源 3.4 富语义出版 Web技术可以帮助网络期刊论文实现多种形式的语义标记和语义增强,比如论文可以包含与论文直接相关的信息及网站的链接,如作者的个人主页、供应商目录、数据库及引用的论文;论文中的关键术语和概念被识别和区分出来,并通过网络服务提供鼠标悬停弹窗式语义定义、公式和数据库条目的链接;提供交互式图表,通过语义镜头揭示图表中的数值数据,鼠标弹窗提供与文本引用的上下文有关的引文节选,重新排序参考文献列表;将论文中的数据与数据库中存在的相似信息相融合,比如论文中有关地理位置的数据可以KML文件的形式在谷歌地图中查看等。
David Shotton对OAJ的语义增强层级进行了详细的研究,并将其划分为5个层级[24] 3.5 内容单元可计算 与传统纸质期刊及基于订购的数字期刊不同,刊载于OAJ的论文是源生数字、源生开放的,其全文数字内容可以立即获取,其知识单元可以被解析、被描述、被关联、被组织,从而为各种自动化、智能化的知识发现提供了可能,为基于论文内容的服务提供了更为丰富的空间 4 基于单篇论文的计量指标的兴起 4.1 出现背景 4.1.1 传统计量指标的局限性 由于OAJ已经呈现出版速度快、出版容量大、并能实现富媒体、富语义出版等显著特征,OA论文规模增速加快随着科研文献海量激增,科研人员所面临的主要困难,已经不再是文献资源不足,而是如何从海量的文献信息资源中,快速、高效地发现自己所需要的文献传统文献计量学所采用的主要计量指标被引次数、影响因子等积累需要很长的时间周期,经统计,从论文发表到被引用一般需要1~3年甚至更长时间,引文分析法无法及时反映论文的影响力,这与以快速出版、即时出版为特征的开放获取资源体现出不匹配性同时,引用指标还面临着评价指标不全面[25]、容易产生马太效应等问题。
基于此,国外相关学者认为计量学领域也需要进行一次Web2.0革命,不但要解决传统评价方式存在的问题和缺陷,同时要结合网络时代的特点进行计量学创新。