联系我们

违法和不良信息举报电话:
0731-84324770


广告:
0731-84324770

金睿奖内部广告-60574-余少娜
默认广告

大数据时代期刊评价方法变革

2017-01-06 22:55 编辑:何雯
大数据正深刻地改变着期刊生态,也必然会影响到期刊评价和学术评价的方式方法变革。但目前大数据技术应用于学术评价还处在起步阶段,关注度高,讨论的多,实际应用率低,还未能找到切实的大数据期刊评价办法。这里有对大数据评价和传统期刊评价模式认知的误区。一个误区是所谓“大数据迷信”,把大数据当成万能的,希望用大数据评价完全取代传统评价模式;另一误区则是把大数据简单化归结为“定量评价”,并夸大定量评价的局限性,由此主张回归学术共同体评价即同行定性评价。
  从“传统”期刊评价模式来看,现行主流的期刊评价模式是依赖于一些专业的期刊评价机构根据某一指数高低而定期或不定期地对期刊所做的排名,简单地说,这种评价模式可以称为“以刊评文”。近几年,业界对这种评价的弊端和不足已有充分认识和广泛讨论,主要观点有转载率的排行所依托数据过于单一,不能全面反映期刊的质量;所依托的影响因子的评价又抹杀了不同学科期刊存在的天然差异,且无法区分是正向引用还是负向引用等。这些批判性的观点还是非常中肯的。但其中还有一种观点完全将这种依托文献计量学的评价简单地归结为量化评价而大加批判,这也是不客观的。定量评价和定性评价本身是不可分割的,总是互相包含。转载率指标作为一个量化数据,反映的是包含了学术共同体成员主观定性的评价结果。即使是原来主要依托影响因子的评价方式,也在试图引入学术共同体的主观评价以改进数据质量。可以说,经过广泛讨论,一些共识已经形成,即科学的期刊评价需要定性评价与定量评价相融合、客观评价与主观评价相融合、专业期刊评价机构评价与学术共同体评价相融合。改进的方向逐渐明确,路径还在探索之中。而大数据的应用从方法上将有效改进原有评价方法上的不足。
  大数据可以有效拓展评价主体。原有评价方法中的弊端之一是评价主体单一,以图书情报文献计量专业机构为评价主体,对不同学科专门领域难免“外行”,不能替代学术共同体评价;即使“同行评价”也只能是“小圈子”,数据样本采集范围不够大。评价主体单一性主要忽略了(或无法顾及)期刊受众——论文读者这个最重要最广大的群体。大数据技术可以有效弥补这一不足。一般来说,大数据反映的只是网络上“雁过留痕”的痕迹,而这些痕迹大都来自论文读者。也就是说大数据技术能够将读者纳入评价主体。我们可以通过点击率、下载量、阅读量(不光是被阅读次数,甚至阅读时间都可统计)得出比“引用率”、“转载率”更全面更可靠的论文受关注程度;可以通过关键词查询论文的主要发现、主要观点所引起的话题讨论频次,相关论文发表数量,以及“点赞”、“顶”或“踩”的频次来判断话题的“热度”和学术共同体的正面负面评价。大数据甚至还可以区分出读者是“外行”还是“圈内人”,从而将多元主体的多元评价更完整地呈现出来,使评价更加准确。
  大数据可以有效克服“人为”弊端。原有评价方法中存在的另一个主要弊端是评价过程难以避免人情关系、利益交换、行政干预等人为操作因素带来的“水分”,如通过恶性自引或互引提高引用率,以及通过“人情稿”、“关系稿”提升转载率等,最终导致评价结果有失公正。大数据技术可有效识别一些不端行为,如可以通过技术手段甄别出非常规引用的数据从而进行剔除,还可以通过关联技术识别出人为操作的痕迹,扩大的评价主体的网上透明评价可制约小圈子的人情评价等。大数据技术的法宝之一在于数据采样范围之“大”,根据统计误差理论,样本越大则误差越小,再加上人工鉴别,可使期刊评价数据更为有效客观。
  总之,大数据时代为期刊评价方法的变革提供了契机,为实现全过程、全数据、全方位的客观评价展现了可能。但可能性不等于现实性,现阶段大数据技术还不可能取代传统期刊评价方式,当务之急是将大数据技术与传统评价方法整合创新。譬如进一步构建期刊编辑、作者、读者、专家和公众之间的交流平台,拓宽沟通渠道,建设不同类型群体的“投票”平台。譬如进一步筛选优化评价指标,将原有“引用率”、“转载率”与“点击率”、“阅读率”、“讨论率”、“优评(差评)率”、“采用率”、“关注度”等科学融合,形成新的有效“影响因子”评价指标。譬如通过跟踪评价,实现实时评价与动态评估的结合,使评价更加合理,经得起历史检验。譬如开发监测软件及时发现违规操作舞弊行为,通过数据库拓展和文献对比工具避免假引错引,等等。
  学术评价期刊评价之所以难,是因为见仁见智,评价的目的不同,其要求和方法必然有所不同。学术评价方法始终“没有最好,只有更好”。未经分析处理的大数据本身并不具有“评价”意义。大数据技术纳入期刊评价,归根结底还是人的评价,是人主导的评价。然而,大数据时代人工智能的发展使我们看到,大数据、云计算被应用于期刊评价学术评价的速度会比我们预期的要快,效果会比我们想象的要好。相信不久的将来,大数据期刊评价软件将会问世,届时,“机器评价”可能更加客观、全面、快捷,更接近准确,这为人的主观定性评价提供了有效依据,使期刊评价更为科学合理,期刊发展环境也将得到优化。(陕西省社会科学院人文杂志社 秦开凤)
[ 编辑: 何雯 ]
分享到:
微信二维码

微信平台

微信二维码

移动端

最新资讯
07:09 《人民文学》
《人民文学》
《人民文学》杂志封面  一九四九年十月二十五日,《人民文学》创刊,这是新中国成立后创办的第一份国家级文学杂志。  当时,应《人民文学》第一任主编茅盾先生之请,毛泽 [详细]
09:04 《长江文艺》
《长江文艺》
《长江文艺》杂志征稿启事 《长江文艺》创刊于1949年6月,被誉为新中国文艺第一刊。国内刊号CN42-1037/I,国际刊号ISSN0528-838X,邮发代号38-6。目前刊发精选小说, [详细]
16:59 深圳文学迎来“深圳蓝”
深圳文学迎来“深圳蓝”
回首刚刚过去的一年,深圳又有不少文学书问世,单就出版数量而言排在全国前列。不容回避的是,在宏大宣传的遮蔽下,自费出书和文化基金资助出版的丛书难有全国性影响力。当然 [详细]
12:08 《诗江南》
《诗江南》
《诗江南》征稿  《诗江南》是由浙江省作家协会,浙江日报报业集团主办的期刊。国内刊号33-1034/I,国际刊号1001-6694,邮发代号32-79。  《诗江南》创刊于2008年底,开辟重点栏目 [详细]
21:15 《新余学院学报》
《新余学院学报》
《新余学院学报》征稿启事  《新余学院学报》杂志主管单位:江西省教育厅,主办单位:新余学院。国内刊号:36-1223/G4 国际刊号:1008-6765  《新余学院学报》由江西省教育厅主管 [详细]
08:03 小溪流·作文画刊
小溪流·作文画刊
C版《小溪流·作文画刊》征稿启事  《小溪流》C版(作文画刊版)是小溪流的低幼版,主要适合5—8岁的小学低年级和学前班的小朋友阅读。“作文串串烧”栏目的主要宗旨是:用简 [详细]
21:57 何志勇:聚焦“一带一路” 让四川出版、
何志勇:聚焦“一带一路” 让四川出版、
来源:四川新闻网   本期嘉宾:新华文轩出版传媒股份有限公司董事长 何志勇  6月7日至8日,“中国图书对外推广计划”工作会议在成都举行。会议深入贯彻落实党的十八大和十八 [详细]
02:33 语文周报·教研版
语文周报·教研版
《语文周报·教研版》征稿启事  《语文周报》是由河北省教育厅主管、河北师范大学主办的语文教学类报纸;面向全国公开发行,国内统一连续出版物号:CN13-0702/(F);创办于198 [详细]
15:03 长春理工大学学报
长春理工大学学报
  《长春理工大学学报》(社会科学版)是吉林省教育厅主管、长春理工大学主办、长春理工大学学报编辑部编辑出版的人文社会科学类综合性学术期刊。本刊于1988年创刊,双月刊, [详细]
00:37 《参花·小说》
《参花·小说》
《参花》杂志征稿启事  《参花》杂志是全国知名的老牌大众文艺期刊,是国家文化类重点期刊,创刊于1957年,隶属吉林省群众艺术馆,当时刊名为《说演弹唱》,1981年更名为《参花 [详细]
02:43 《电脑迷》
《电脑迷》
  《电脑迷》杂志征稿函  《电脑迷》是由重庆市科学技术协会主管,电脑报社主办,面向全国公开发行的省级期刊。国内统一连续出版物号为:CN 50-1163/TP,国际标准刊号:ISSN 1 [详细]
07:06 小溪流·成长校园
小溪流·成长校园
《小溪流·成长校园》(B版)征稿启事  杂志简介  少年文学刊物《小溪流》由湖南省作家协会主办,是我国面向国内外发行的主要儿童文学刊物之一,是目前湖南省内惟一的纯少 [详细]
05:20 《花千骨》热播 十一师兄董春辉人气大涨
《花千骨》热播 十一师兄董春辉人气大涨
来源:北青网娱乐  由霍建华、赵丽颖、董春辉、马可等联袂主演的仙侠大剧《花千骨》正在湖南卫视每周日、周一晚22点档热播。最近的剧情中,十一师兄与糖宝couple感情升温,为了 [详细]
06:48 《中国铁路文艺》
《中国铁路文艺》
《中国铁路文艺》征稿启事  《中国铁路文艺》杂志是由中国铁路文学艺术工作者联合会、中国铁道出版社联合主办,铁道部政治部宣传部直接管理的国家一类期刊。2006年起,《中国 [详细]
09:47 《西部素质教育》
《西部素质教育》
《西部素质教育》征稿启事  《西部素质教育》杂志为教育类学术期刊(G4),由青海人民出版社主管/主办,半月刊,大16开。国内外公开发行。国际刊号:ISSN2095-6401;国内刊号:C [详细]
回到首页 评论 分享