You are on page 1of 7

2021 年1 月 第32 卷 第1 期

论文被引频次学科领域百分位在创建期刊百分位数指标中的
应用
■ 刘雪立) 申小曼) 郭佳) 申蓝)
1 2 2 2 收
稿





:2020 05 28

:2020 08 27
1)新
乡医学
院期刊
社,河南
省新乡
市金穗
大道601 号453003
2)新
乡医学
院管理
学院,河
南省新
乡市金
穗大道601 号453003

摘要 【目的】探讨基于InCites 数据库中论文被引频次百分位创建期刊百分位数指标的方法,比较不同百分位数指标的
期刊评价效果。【方法】以2018 年版JCR 中多学科交叉科学期刊及其2017—2018 年发表的论文为研究对象,根据InCites
数据库中论文被引频次学科领域百分位(Percentile in Subject Area,PSA )创建期刊百分位数指标(Journal Indicator of
Percentage Rank,JIPR),包 括JIPR4、JIPR6、JIPR8、JIPR10、JIPR100 和平均PSA(aPSA),比较不同JIPR 对多学科交叉科学期
刊的评价效果。【结果】68 种期刊的JIPR4 呈偏态分布,其他JIPR 呈正态分布,多数指标之间呈高度相关,不同等级JIPR
之间相关度更高;影响因子与aPSA 排序位次变化较大的期刊多是发表综述文献较多、单篇高被引论文对影响因子贡献较大
的期刊。【结论】与影响因子相比,多数JIPR 有明显优势,其中aPSA 可能是最理想的期刊评价指标。
关键词 被引频次;学科领域百分位;期刊百分位数指标;科技期刊;期刊评价
DOI: 10.11946 / cjstp.202005280534

期 刊 影响因 子存在许多方面的缺陷 ,主要包括 的 缺 陷 是 无 法 应 用 于 不 同 学 科 期 刊的 评价。针对影


引证时间窗口(2 年)、被引频次计数方法(年度计 响 因 子 这 一 缺 陷 ,学术界对影响因子和被引频次的
数)、文 献类型的 界定不合理 ,以及未考虑被引频次 学 科 标 准 化 研 究一直没有停止过 。研究最多 、备受
的偏态分布和无法应用于不同学科期刊的评价 关 注 的 莫 过 于 百 分 位数指标 ,如大家熟知的JCR 期
等[ ],导
1-3
致影响因子被滥用[ ]和误用[ ],而且 4-5 6-7
刊 分 区 和 中 国科学院期刊分区(Q1、Q2、Q3 和Q4 )
愈演 愈 烈 。正因为如此 ,教育部 、科技部于2020 年 就 是 对 期刊影响因子进行最简单的学科标准化处
2月 20 日联合印 发了 《关于规范高等学校SCI 论文 理 。2015 年升级版的InCites JCR 中又推出一个新
相关 指 标 使用树立正确评价导向的若干意见》,引 的 期 刊 评 价指标 ——— 期刊影响因子百分位(Journal
起学 术界的广泛关注[]。发布该意见的目的不是8
Impact Factor Percentile,JIFP )[ ]。该 指标是将期刊

要否 定SCI 论文 及其相 关评价 指 标,而 是强


调要 “规 影 响 因 子 排 名 转 化为百分位数值 ,从而实现不同学
范使 用 ”,最大限度地纠正对影响因子的滥用和误 科 期 刊 的 跨学科评价 。无论是期刊分区还是影
10[ ]
用。2015 年11 月3 日,中国科学技术协会 、教育 响 因 子 百 分 位 ,都 是基于有缺陷的影响因子在各自
部、原 国 家新闻 出版广电总局 、中国科学院 、中国工 学 科 内 计 算 而 来 的 ,因 此 ,该 指 标 用于 期刊跨学科评
程院 五 部 委联合 发布了《关于准确把握科技期刊在 价 也 存 在 明 显 的 局 限 性 。近年来
[ ]
11
,人们开始探讨
学术 评 价 中作用的若干意见》,强调要充分认识科 基 于论文被引频次在学科内百分位数排序位置
技期 刊 在 学术评 价中的独特作用 ,准确把握科技期 (Percentage Rank Position,PRP )赋值计算期刊影响
刊在 学 术 评价中的功能定位 。因此 ,探索更加科学 力 指 标 的方法 ,如张学梅等[ ]提出了改进的PRP12

合理 的 期 刊评价 方法 就显得非 常重要 和必要。 指 标 ;刘雪立等[ ]提了期刊PR8 指数(JIPR8),并


13

由 于 不同学 科领 域论文被 引频次 和期刊影响 因 实 证 分 析 了JIPR8 在 学 术 期 刊 跨 学科 评价中的优越


子不 具 有 可比性 ,因此,被引频 次和影 响因子最突 出 性 。但 这 些 指 标 中 论 文 被 引 频 次 百分 位数该如何设
基金项目:国家社会科 学 基金 一 般 项 目 “引 证 指 标 的 学 科标 准化 方
法 与跨学科学
术 评价研究”(19BTQ087)。
作者简介:刘雪立(ORCID:0000 - 0001 - 7055 - 674X ),教授 、编审,硕士生导师,新乡医学院期刊社社长 ,Email:liueditor @ 163. com;

小曼,硕士研究生;郭佳 ,硕 士 研 究 生 ;申蓝 ,硕 士 研 究 生。
118 中国科技期刊研究,2021,32(1):118-124 :
http ∥www. cjstp. cn
刘雪立,等. 论文被引频次学科领域百分位在创建期刊百分位数指标中的应用
置 ?不 同 百 分 位数 的 论文如何赋 值 会 取 得 最 好 的效 个 百 分 位 数区 段 ,即 (0,10% ]、(10% ,20% ]、(20% ,
果 ?我 们 尚未发现相关研究报告 。2015 年InCites 30% ]、(30% ,40% ]、(40% ,50% ]、(50% ,60% ]、
数 据 库 中 给 出 了每 篇 论文被引频 次 在 各 自 学 科 领域 (60% ,70% ]、(70% ,80% ]、(80% ,90% ]、(90% ,
精 确 的百分位数(Percentile in Subject Area,PSA), 100% ], S 分别设为100、90、80、70、60、50、40、30、

极 大 方 便了期刊百分位数指标(Journal Indicator of 20、 10。


Percentage Rank,
JIPR)的
计 算。本研究将详细介绍 1.2.5 期 刊PR100 指数— ——JIPR100
基 于 论 文PSA 计 算 百分位数指标的方法 ,并对同一 将 所 有论 文 按照PSA 升序排列 ,等距分为100
学 科 期 刊 不 同 百分位数指标进行比较 ,确定更加科 个 百 分位数区段 ,对应赋值分别为100,99,98,… ,
学 合 理 的 学 术 期刊 评 价指标。 3,2, 1。

1 JIPR 的
设计与
计算方
法 以 上 指标 中 论文赋值方法可以概括为两种 :一
种 是 等 权 赋值 ,包 括JIPR4、JIPR10 和JIPR100;另 外
1.1 论文PSA 的界定 一 种是非等权赋值 ,包括JIPR6 和JIPR8。需要说
科 睿 唯 安 (Clarivate Analytics)官方网站上是这 明 的 是 ,被 引频 次 为0(即PSA 为100)者 ,无论位于
样 定 义PSA 的 :PSA 是 由 同 一年度同一类型文献的 哪 个 百 分 位数 区 段 ,一 律 赋值0,尽可能与期刊影响
总 被 引 频 次 在 各 自学科的排序决定的 ,被引频次值 因 子 的 计 算保 持 一 致 。
越 大 ,其 百 分 位 数 越 小 。百分位数最大值为100,代 1.3 JIPR 的 计算
表 文献被引频次为0。数据库仅提供研究论文 本研究设置的不同等级JIPR 包括JIPR4、
(Article)、综述(Review)和简讯(Note )类型文献的 JIPR6、 JIPR8、JIPR10 和 JIPR100,各 指标的计算过
PSA。如 果一 种期刊被划分到多个学科 ,其论文百 程 中 仅 论 文百 分 位数等级设置及赋值不同 ,计算方
分位按照绩效表现最佳(即PSA 最小)者来确 法 是 相 同 的,计 算 公 式 为
定[ ]。由14
此看来 ,InCites 数据库中的PSA 是对每 n

(1)
篇 论 文 的 被 引 频 次进行了学科 、出版年和文献类型 R = ∑S
JIPR n
i=1
p -i

标 准 化 处 理后得到的数值 ,因此 ,基于PSA 创建的 式 中 :R 为 某


JIPR 期 刊 的JIPR;S 为某期刊第i 篇可 p-i

JIPR 相 对 比较 合 理 ,尤 其 是应用于学术期刊的跨学 被 引 文 献 (包括 研 究 论 文和综述)的PSA 赋值 ;n 为


科 评 价 。 该 期 刊 发 表的 可 被 引 文 献 总 数。
1.2 JIPR 系 列指标中论文被引频次的赋值方法 JIPR 的 设 计 实 际上 与影响因子类似 ,均表征期
1.2.1 期 刊PR4 指数— — —JIPR4 刊 论 文 的 篇均 引 证 影 响 力 ,区 别在 于:影 响 因 子 计 算
将 所 有 论 文 按 照PSA 升序排列 ,等距分为4 个 公 式 中 分 子是 论 文 的 被 引 频 次绝 对 值 ;而JIPR 计算
百 分 位 数 区 段 ,类 似 期 刊 影 响 因 子 分区 ,即被 引 频 次 公 式 中 分 子是 经 过 标 准化处理的S ,零被引论文对 p

介 于 (0,25% ]、(25% ,50% ]、(50% ,75% ]、(75% , 指 标 的 贡 献均 为0。


100% ]的 论文 赋 值 (S )分
p 别 设 为40、30、20、10。 与 论 文被引频次相比 ,S 至少进行了3 个方面

1.2.2 期 刊PR6 指数— — —JIPR6 的 标 准 化 处理 :文献类型的标准化 ;出版年的标准


将 所 有 论 文 按 照PSA 升 序 排 列,按 照Bornmann 化 ;学 科 领 域的 标准化 。即 ,对不同类型文献(主要
等 方法确定6 个百分位数区段
[ ]15
,即(0,1% ]、 是 指 研 究 论文和综述)、不同出版年和不同学科文
(1% ,5% ]、(5% ,10% ]、(10% ,25% ]、(25% , 献 被 引 频 次区别对待 ,分别排序来确定PSA。论文
50% ]、 (50% ,100% ],S 分别设为60、50、40、30、
p 被 引 频 次 百分 位 是 对 不 同 学 科论 文 进 行 标 准 化 处 理
20、 10。 的常用而有效的方法 ,这方面的研究已经很
1.2.3 期 刊PR8 指数— — —JIPR8 多 ,而

15-18] 且百 分 位 数指 标 已经被美国科学基金会
在PR6 的 基 础 上 增 加2 个百分位数区段 ,即被 采 用 。由

19] 于S 是 p 对论 文 被引频次标准化处理的
引 频 次排序(0,0.01% ]和(0.01% ,0.1% ],分别赋 论 文 赋 值 ,采用 期 刊 篇 均S 作 为p影 响 力评价指标必
值100 和80,其他百分位数区段设置和赋值同 定 优 于 篇 均被 引 频 次 。
JIPR6, 详 见 文 献 [1]。 1.4 期 刊论文被引频次平均百分位— ——aPSA
1.2.4 期 刊PR10 指数— ——JIPR10 aPSA 即 某 期刊所有论文PSA 的平均值 ,其值
将 所 有 论文按照PSA 升序排列 ,等距分为10 越 小 ,表 示 期刊影响力越大 。该指标将期刊发表的

http ∥www.cjstp.cn 中国科技期刊研究,2021,32(1) 119
2021 年1 月 第32 卷 第1 期

被引文献被
引频次百分
位数转换为
精 确
的计量
指 2.2 结果与分析

,可以
被认为是精
确的百分位
指标。 2.2.1 期 刊JIPR 及JCR 系列指标
2 实
证研究 根 据JIPR 的 计 算公式 ,计算了68 种多学科交
叉科学期刊的JIPR4、JIPR6、JIPR8、JIPR10、
2.1 研究对象与方法 JIPR100、aPSA 和 cIF ,并
2019 给出了cIF 和aPSA 2019

2.1.1 研 究对象 两 个指标的期刊排序(由于aPSA 值越小代表期刊


选 取2018 年版JCR 数据库中Multidisciplinary 影 响 力 越大 ,因此aPSA 为升序排列)。aJIFP 来源
Science (多 学科交叉科学)69 种期刊及其2017— 于2018 年 版JCR。由 于期 刊数 量较多 ,表1 中仅列
2018 年 发 表 的Article(研究论文)和Review (综述) 出 该 学 科cIF 位居前20 的期刊和6 种cIF 和
2019 2019

为 研究对象 。因期刊Scientific Data (ISSN:2052 - aPSA 排 序 相 差 较 大 的 期刊 (其中1 种 已 包 含在 排名


4463)在 InCites 中 的 文献 数 量 与SCI 数据库中收录 前20 的 期 刊中)。无论按哪个指标排序 ,排在前3
的 文 献 数 量 相 差较大 ,故将其排除 。纳入研究的期 位 的 期刊都是Nature、Science 和Sci Adv。但是Sci
刊 共68 种 。 Adv 与 Nature、 Science 相 比,除了aJIFP 十分接近 ,其
2.1.2 数 据获取 他 指 标 下 降 均 异 常 明 显,显示出Nature、Science 在该
所有数据均来源于InCites 数据库。登录 学 科 领 域 的绝对领先优势 。cIF 和aPSA 排在后
2019

InCites 数 据库,选择“Journals,Books,Conference 3位 的 期 刊 也 完 全 相同 ,分别是Scientist(第66 位)、


Proceedings”选 项卡进入期刊检索页面,时间周期 Mit Technol Rev(第 67 位)和New Sci(第68 位 )。纳
设定为2017— 2018 年,文献类型选择Article 和 入 研 究 的68 种 多学科交叉科学期刊中有2 种中国
Review ,应 用各期刊ISSN 号逐一检索各期刊,检索 期 刊 ,表 现 均 较 突出 ,分别为cIF 排名第4 的《国
2019

结果显示的是文献数量(带有超链接)、文献被引 家 科 学 评 论 》(Natl Sci Rev)和排名第8 的《科学通


量和文献被引百分比。点击带有超链接的文献数 报 》(Sci Bull),二者精确百分位数指标aPSA 排序
量,检索结果显示的是每篇文献的详细信息,主要 分 别 为 第7 和 第9。
包括文献题名、作者、来源期刊、研究领域(学科)、 aJIFP 是 根据期刊影响因子排序计算出来的 ,
文献类型、出版年、被引频次、期刊期望被引频次、 计 算 公 式 见文献[9],其数值大小完全由期刊影响
学科期望被引频次、期刊标准化引证影响、学科标 因 子 排 序 决 定 ,忽略了影响因子值的差异程度 。因
准化引证影响、学科领域百分位(实际上就是 此 ,该 指 标依据影响因子排序渐进式下降 ,掩盖了
PSA )和 期刊当年的影响因子。点击页面右上角下 Nature 和 Science 的 卓越程度 ,这也正是aJIFP 局限
载按钮,将所有文献数据以csv 格式文件导出。合 性 的 突 出 表 现 。与aJIFP 相比
11[ ] ,本研究基于论文
并68 种期刊所有文献数据,保留本研究需要的数 被 引 频 次 百 分 位 赋值建立的期刊百分位指标 ,能够
据,如来源期刊、学科领域百分位和期刊影响因 客 观 反 映 期 刊 影 响 力 的差 异 程度 。
子,另存为Excel 格式文件。数据获取日期为2020 2.2.2 各 指标统计学特征值和KS 检验结果
年3 月20 日。 本 研 究 创 建 的 系 列百 分 位数 指 标 和 选 择的 对比
2.1.3 对 比指标的选择 指标 (包 括cIF 和2018 年
2019 版JCR 影 响 因子IF ) 2018

对 比 指 标 主 要 包 括2018 年版JCR 数据库的影 统 计 学 特 征 值 及KS 检 验结果见表2。变异程度最


响 因 子(IF )、aJIFP (平均JIFP )、期刊分区
2018 。另 大的3 个 指 标 分 别 为cIF 、IF 和JIPR4。KS 检
2019 2018

外 ,根 据InCites 数 据 库 导出 的每篇文献的累计被引 验 结果显示 ,这3 个指标均不呈正态分布(P <


频次 ,自行计算各期刊2019 年累积影响因子 0.01), 离 散 系 数 与KS 检验结果基本一致 ,离散系
(cIF ),计
2019 算 方 法 见 文 献 [20]。 数 越 大 表 明 偏 态 分 布 程度 越 严重 。但 作 为 期刊 评价
2.1.4 统 计学方法 指 标 ,离 散 程 度 越 大 表 示指 标值 差 异 越 悬 殊,很 有可
统 计分析软件为IBMSPSS 18,各指标正态性 能 是 个 别 异 常 高 被 引 论文 对 期刊 影 响 因 子 畸形 拉升
分 布 采 用KolmogorovSmirnov (KS )检验 ,各指标之 作 用 所 致 ,这 正 是 影 响 因子 的缺 陷 之 一 。不 可 否 认

间 的 相 关 度 采 用Spearman 相 关 分 析 ,主
要 考 察 各指 高 被 引 论 文 是 构 成期刊影响力的重要因素 ,期刊发
标 用 于 期 刊 排 序 的 一 致程 度 。检 验 水准:α = 0.05。 表 的 高 被 引 论 文 越 多 ,其学 术影 响 力 越 大 ,而高 影响
120 中国科技期刊研究,2021,32(1) :
http ∥www.cjstp.cn
刘雪立,等. 论文被引频次学科领域百分位在创建期刊百分位数指标中的应用
表1 多学科交叉科学部分期刊的JIPR 及JCR 指标
R cIF 刊
名简称 cIF 2019 aJIFP JIPR4 JIPR6 JIPR8 JIPR10 JIPR100 aPSA R aPSA Rd
1 Nature 61.895 99.275 43.070 50.995 53.145 97.993 96.305 4.119 1 0
2 Science 58.819 97.826 41.063 49.393 51.252 97.437 95.352 5.089 2 0
3 Sci Adv 18.897 94.928 12.804 34.097 34.256 84.544 80.710 19.787 3 0
4 Natl Sci Rev 18.437 96.377 13.222 24.483 24.483 69.310 65.299 35.171 7 3
5 Nat Commun 17.638 93.478 11.878 33.317 33.421 83.878 79.946 20.540 4 -1
6 Nat Hum Behav 14.603 95.089 10.575 33.276 33.621 80.575 77.040 23.480 5 -1
7 P Natl Acad Sci USA 13.953 90.580 9.580 31.327 31.443 80.828 76.835 23.639 6 -1
8 Sci Bull 10.653 89.130 6.277 22.205 22.205 64.683 60.631 39.853 9 1
9 J Adv Res 9.553 84.783 5.045 19.167 19.167 55.606 51.614 48.860 14 5
10 Res Synth Methods 7.724 89.548 5.043 19.655 19.885 56.782 52.437 48.042 13 3
11 Gigascience 7.539 81.884 4.688 20.681 20.681 60.157 56.743 43.699 10 -1
12 Ann NY Acad Sci 7.019 80.435 4.295 18.066 18.066 54.733 50.539 49.914 15 3
13 Fractals 6.566 79.689 2.971 21.429 21.429 56.837 53.888 46.447 11 -2
14 Philos T R Soc A 5.906 74.638 3.093 18.657 18.657 57.524 53.447 47.027 12 -2
15 J R Soc Interface 5.319 77.536 3.224 16.940 16.940 51.772 47.924 52.504 16 1
16 NPJ Microgravity 5.100 76.087 3.111 16.600 16.600 50.400 46.640 53.802 18 2
17 P Jpn Acad B-Phys 4.295 52.899 1.833 10.897 10.897 29.231 25.551 74.809 40 23
18 P Roy Soc A-Math Phy 4.051 67.391 2.818 14.170 14.170 44.211 40.848 59.541 23 5
19 Sci Rep-UK 3.983 78.986 4.011 15.725 15.725 51.014 46.887 53.553 17 -2
20 PLoS ONE 3.919 65.942 2.776 15.101 15.102 47.074 43.369 57.034 19 -1
27 Sci Eng Ethics 3.085 77.459 2.275 28.870 29.435 66.158 64.124 36.214 8 -19
43 J Indian I Sci 1.226 26.812 0.742 5.484 5.484 10.968 8.484 91.778 61 18
48 P Natl A Sci India A 1.020 23.913 0.681 4.834 4.834 13.907 11.940 88.258 56 8
51 Issues Sci Technol 0.929 34.286 1.214 9.643 9.643 28.214 27.429 72.771 35 -16
57 Endeavour 0.545 57.509 1.068 8.485 8.485 27.576 26.727 73.515 38 -19
注:列 出了该学科cIF 排名前20 的
期 刊和6 种cIF 和aPSA 排
2019 序
差 异较大的
期刊(其中1 种 期刊是cIF 排名第17 的期刊);cIF 是
2019 2019 2019

根据 导出 的数据自行 计算的
;R 为cIF 降序 排 列 序号,R 为aPSA 升
cIF 序排列序号
;R = R -R ,正
2019 值 表
示cIF 排 名
靠前 ,负值表
aPSA d aPSA cIF2019 2019

示aPSA 排
名靠前。
表2 各指标统计特征值及KS 检验结果 值就能直观 看 出二者的分布极其相似 ,表2 中二者
指标 均 值 标

计特

征值
差变 异系数 Z
KS 检
验 统计 量 的变异系数 和Z 值 也 很接 近 。由此 看 来 ,将论文 按照
IF 2018 3.702

7.346 1.984 2.639 <0.001
PSA 升序 排列 ,等 距 分为4 个 百 分位 数区 段 进 行 赋 值
cIF 2019 5.248 10.623 2.024 2.576 <0.001 建 立 的百分位数指标 ,对影响因子的矫正效果不明
aJIFP 50.237 29.484 0.587 0.848 0.469 显 。可 能的原因是 ,4 个百分位数区段划分过于粗
JIPR4
JIPR6
3.702
12.882
7.348
10.431
1.985
0.810
2.639
1.181
<0.001
0.123
糙 。因 此 ,创建JIPR 指 标 时 ,论 文百 分位 数 区 段 设 置
JIPR8 12.964 10.684 0.824 1.223 0.100 不 宜 过少 。
JIPR10 35.985 23.720 0.659 0.866 0.441 2.2.3 各 指标相关性分析
JIPR100 33.436 22.969 0.687 0.933 0.349
影 响因 子和JIPR 的 决 定 性 因 素 都是 论 文 被 引 频
aPSA 66.870 22.861 0.342 0.942 0.338
次 和 可被引文献量 ,因此各指标之间注定存在相关

期刊往往 发 表 较 多 的 高 被 引 论 文 。但 由 于 影 响 因 性 。表3 显 示 ,纳 入 研究 的 关 键 影响 力指 标 之 间 多 数

反映的是 期 刊 论文的篇均被引频次 ,这就可能出 呈 高 度相 关。aPSA 是反向评价指标 ,其值越小代表

单篇异常 高 被 引 频 次 论 文 对 期 刊 影 响 因 子 的 过 度 期 刊 影响 力越 大 。因此 ,aPSA 与其他所有指标均呈

升。如CAA Cancer Journal For Clinicians 2019 年 高 度负相关 ,其与JIPR100 的相关系数为1.000,与

响因子构成中 ,2017 年和2018 年发表的所有文 JIPR10 的相 关系 数为0.999,JIPR10 与JIPR100 的相

被引频次 为15783 次 ,可 被 引 文 献 (研 究 论 文 和 综 关 系 数也 是0.999,三者 在 期 刊 评 价中 几 乎 完 全 等 效。

)数量为54 篇 ,影响因子为292.278,其中被引频 JIPR100 是基 于论 文 被 引频 次 降 序 排 列 ,把 论 文 划 分

最高的3 篇文献被引频次之和达到了12389 次 , 为100 个 百分 位 数 进行 赋 值 建 立的 ,和aPSA 一 样 ,也

影响因子的贡献达78.5% (12389 / 15783 )。百分 算 得 上精 确百 分 位 数指 标 ,在 期 刊评 价中 应 该 有 更 高

数指标中 ,JIPR4 不 呈 正态分布 ,其他指标均呈正 的 精 度。由 此看来 ,简化的JIPR10 也是理想的期刊

分布。从 表1 所 示 的 不 同 期 刊JIPR4 和cIF 数 2019 评 价 指标 ,其次 是JIPR8 和JIPR6。

http ∥www.cjstp.cn 中国科技期刊研究,2021,32(1) 121
2021 年1 月 第32 卷 第1 期
表3 各指标之间的相关性检验结果

标 aJIFP JIPR4 JIPR6 JIPR8 JIPR10 JIPR100 aPSA
cIF 2019 0.887 0.904 0.958 0.958 0.956 0.947 -0.946
aJIFP 0.564 0.804 0.797 0.872 0.865 -0.865
JIPR4 0.881 0.881 0.885 0.880 -0.879
JIPR6 1.000 0.969 0.975 -0.975
JIPR8 0.964 0.970 -0.971
JIPR10 0.999 -0.999
JIPR100 -1.000


:因cIF 和JIPR4 不
呈正态
分布,因
2019此二者
与其他
指标的
相关分
析采用Spearman 相
关检验
,其他
采用Pearson 相
关检验

2.2.4 和aPSA 期刊排序的比较
cIF2019 于
文献量 小的期刊,任何影响因素都可能对指标值
68 种 期刊中 ,cIF 和aPSA 排序完全相同者 2019 产
生较大 影响。表4 中 前3 种期
刊的cIF 排 名 靠 2019

共11 种 (排 在前2 位 和后3 位的期 刊完全 相 同 ),43 前


,后3 种期刊的aPSA 排名靠前。影响因子排名
种 (63.2% )期刊的cIF 和aPSA 排序相差在3 以 2019

前的期 刊论文被引频次离散程度大 ,单篇高被引
内 。cIF 排序较aPSA 靠前者有32 种
2019 ,aPSA 较 论
文的被 引频次占总 被 引频 次的比
例 和 综述文 献 数
cIF 靠 前
2019者25 种 。为了比较两个指标的特征和 量
占可被 引文献总量 的 比例 明显较
高 。基 于InCites
影 响 因 素 ,对 两个 指标排序差异最大的6 种期刊进 数
据库的PSA 建
立的JIPR 能够较好地矫正影响因
行 更 加 全 面 的文 献 计 量
分 析,结果 见表4。6 种 期刊 子
计算过 程中论文被引频次偏态分布这一缺陷 ,同
的 共 同 特 征 是可被引文献量很小(Sci Eng Ethics 可 时
也矫正 了综述类期 刊 或发 表综述
较 多 的期刊 容 易
被 引 文 献 量 最大 ,但 在68 种期刊中 正好 处于 中 位水 获
得较高 影响因子这 一 缺陷 。百分
位 数 指标在 学 术
平 ,其 他期刊可被引文献量均在中位数以下)。对 期
刊跨学 科评价中的 优 势更 加明显。
[ ] 13

表4 cIF 2019和aPSA 排序差异最大的6 种期刊文献计量学特征



名简称 R cIF2019 R aPSA Rd C C C CV
可被引文 综 述 总 被引 C max
max mean
献数量/ 篇数
SD
量/ 篇占比/ % 频
次/ 次 百
分比
P Jpn Acad B-Phys 17 40 23 43 4.756 6.999 1.472 78 65 83.3 371 0.116
J Indian Ins Sci 43 61 18 15 1.290 2.688 2.084 62 57 91.9 80 0.188
P Natl A Sci India A 48 56 8 52 1.166 4.376 3.755 151 30 19.9 176 0.295
Issues Sci Technol 51 35 -16 10 1.018 1.986 1.951 56 0 0.0 57 0.175
Endeavour 57 38 -19 3 0.545 0.869 1.594 33 0 0.0 18 0.167
Sci Eng Ethics 27 8 -19 33 3.599 5.614 1.560 177 13 7.3 637 0.052

:R 为 期刊cIF 降序
cIF2019排列
序号;R 为期刊aPSA 升序排
列 序
2019号;R = R -R ,正值 表示cIF 排
名靠前,负值表示aPSA 排名
aPSA d aPSA cIF2019 2019


前 ;C 为期刊单 篇论文
max最
大被引频次,C 为期刊篇 均 被
引频次 ,C 为 被 引 频次标准差
,CV 为
期 刊论文被引频次的变异系数
mean ;综述百分 SD


是 指 某期
刊综述文 献
占可被引文献总
量 的百分
比,C 百 分比是指C 占 期 刊被引总量的百分 比。 max max

3 结
论 同 时 ,对
于综合性期刊(如本研究选择的多学科交
叉 科学期刊)发表的论文 ,InCites 数据库给出的
3.1 基于论文PSA 创建JIPR 简单方便 PSA 是按照论文内容所属学科(而不是期刊所属学
按 照论文被引频次在特定学科升序排列 , 科 )进 行计算的

InCites 数据库对SCI 和SSCI 收录的每篇论文都给 3.2 百分位数指标较影响因子有明显优势
出 了 相 应的PSA,按照期刊进行检索就很容易得到 研究结果显示,与影响因子相比,百分位数指
任 何 一 种期刊每篇论文的PSA,从而使任何等级百 标有明显优势:(1)把论文被引频次转换为百分位
分 位 数 指标的计 算 都
非 常 方 便 。本 研 究 设 置 的 百 分 数赋值的过程实际上是学科标准化处理的过程,
位 数 指 标包括JIPR4、JIPR6、JIPR8、JIPR10、JIPR100 通过学科标准化处理创建的百分位数指标具有跨
和aPSA。 学科评价的功能;(2)抑制了个别异常高被引频次
通 过对Nature 文献进行比对 ,发现同一篇文献 论文对期刊影响因子的畸形拉升;(3 )矫正了综述
在 不 同 学科分类体系中具有不同的PSA,这为我们 文献对期刊影响因子的“虚假”贡献,从而对通过
在 不 同 学科分类 体 系
中 创 建 百 分 位 数 指 标 提 供 了 精 多发表综述文献人为操纵影响因子的行为起到警
准 数 据 ,使
学术 期刊的跨学科评价变得简单 、方便 。 示作用。
122 中国科技期刊研究,2021,32(1) :
http ∥www.cjstp.cn
刘雪立,等. 论文被引频次学科领域百分位在创建期刊百分位数指标中的应用
3.3 可能是理想的期刊评价指标
aPSA 322(5899):165.

根 据JIPR100 和aPSA 的定义,二者均属于精 [6] 刘 雪 立 ,郭 佳 . 中 文科技期刊评价 :现状


·问题· 建议[J]. 编
确 百分 位 数指 标 。理论上讲 ,精确百分位数指标应 辑 学 报 ,2020,32(1):5-9.
[7] 王 贤 文 ,方 志 超 ,王 虹 茵 . 连续
、动态和复合的单篇论文评价
用 于期 刊 评价 中 更为科学合理 ,按区段设置百分位 体 系 构 建 研究[J]. 科学学与科学技术管理 ,2015,36 (8 ):
数 是为 了 简化 论 文赋值过程 。研究发现 ,JIPR10 与 37-48.
JIPR100 和aPSA 的相关系数均达到0.999,三者用 [8] 胡
升华. 出
版集团
化战略对科技期刊发展的启示 :兼论SCI
于 期刊 排 序的 结 果几乎完全相同 ,基本上属于等效 导
向的科学价值观偏差[J ]. 编辑学报
,2020,32 (2 ):
指 标。目 前,从InCites 数
据 库能够很方便地获取每 119-127.
[9] Journal impact factor percentile [EB / OL ]. (2018 - 02 - 18 )
篇 论文的PSA,计算aPSA 就变得非常容易 ,而且 [2020-04-29]. http:/ / ipscience-help. Thomsonreuters. com /
aPSA 又 矫正 了 影 响因 子的诸 多缺陷,很
可 能成为非 incitesLiveJCR / glossaryAZgroup / g8 / 9586-TRS. html.
常 理想 的 期刊 评 价指标之一 ,尤其是可以应用于学 [10] 俞
立 平 . “影 响 因 子 百 分 位”指标的特点研究[J]. 图书情报
术 期刊 跨 学科 评 价 。 工
[11] 刘

作,2016,60(10):103-107.
立 ,魏 雅 慧 ,孟 君 . 影响 因 子
百分位
在学 术期 刊跨 学科 评
4 局
限性及
展望 价中的局限性[J ]. 中国科技期刊研究
1018-1021.
,2018,29 (10 ):
学术 期刊 影 响力评价是极其复杂的 ,任何评价 [12] 张 学 梅 ,李 华 . 跨 学 科 领 域 期 刊 评 价指 标PRP 指数及其改进
指 标都不 可能 完 全合理地反映期刊的真实影响力 , 研 究 [J]. 情 报 理 论 与 实 践 ,2016,39(2):50-53.
本 研究创 建的 系 列JIPR 指标也 是一样 。论文aPSA [13] 刘





,魏 雅 慧 ,盛丽娜 ,等 . 期
评价指标及其实证研究[J]. 图书情报工作
刊PR8 指数 :一个新的跨学
,2017,
的 计算依 赖于 科 学而精准的学科分类 ,但论文和期 61(11):
刊 的学科 分类 是 世 界性 难题。由 于 现 代科学研究逐 116-123.
[14] Clarivate Analytics. Percentile in subject area [EB / OL ].
渐 呈现出 综合 性 和 跨学 科的特点 ,学 科之 间的交叉、 [2020- 04 - 07 ]. http:/ / help. prodincites. com / incites
融 合现象 越来 越 普遍 ,因此任何学科分类都不可能 LiveESI / 4361-TRS. html.

绝 对科学合理 。再者 ,期刊评价缺乏完全合理的 [15] Bornmann L,Mutz R. Further steps towards an ideal method of

“金 标准”作参 照 ,对 该研究涉及到的3 类评价指标 : ( )


measuring citation performance The avoidance of citation ratio

(影 响因子及aJIFP 、等 权赋值 的JIPR 和非等权赋值 [] , ,


averages in fieldnormalization J . Journal of Informetrics 2011
( ):228-230.
5 1
的JIPR)在期 刊 评 价中 的合理性缺 少 有针对性的实 [16] 周 群 ,左 文 革 . 论 文 被 引 频 次 标 准 化 方 法 研 究 进 展 [J]. 情报
证 研究。本 研 究 在 国内 外百分位 数 指 标研究的基础 科 学 ,2018,36(2):171-176.
上 ,对基于InCites 数据库中的论文PSA 创建JIPR [17] Bornmann L,Haunschild R. Citation score normalized by cited
references (CSNCR):The introduction of a new citation impact
的 可行性 进行 分 析 ,通过理论分析和指标的统计学 indicator[J]. Journal of Informetrics,2016, 10(3):
检 验,论证JIPR 尤其是aPSA 的合理性 。对该指标 875-887.
[18] Waltman L,van Eck N J. Fieldnormalized citation impact
的 合理性评价尚需要对众多学科期刊进行深入研 indicators and the choice of an appropriate counting method[J ].
究 。也可 以考 虑 针 对不 同学科期 刊 进 行同行专家问 Journal of Informetrics,2015, 9(4): 872-894.
卷 调查,以此作为近似“金标准”对aPSA 和系列 [19] National Science Board. Science & Engineering Indicators 2018
JIPR 的合理性 进 行 客 观评价。 [EB / OL]. [2020 - 08 - 26 ]. https:/ / www. nsf. gov / statistics /
参考文献 [20] 刘
2018 / nsb20181.
雪 立. 期刊累积影响因子与年度影响因子的比较研究
[1] 刘 雪 立 ,申 蓝 ,王 燕 ,等 . 学 术期刊的跨学科评价指标JIPR8 [J]. 中国科技期刊研究,2016,27(7):774-778.
及 其 应 用 [J]. 中 国 科 技 期 刊 研 究 ,2019,30(6):663-670.
[2] Pyo S,Lee W,Lee J. A novel journal evaluation metric that
adjusts the impact factors across different subject categories [J ].
Industrial Engineering and Management Systems,2016,15 (1 ):

[3] Bradshaw C J A,Brook B W. How to rank journals [J]. PLoS 作者贡献声明:


99-109.

ONE, 2016, 11(3):e0149852. 刘雪立:提出研究选题 ,规划研究内容,分析和处理数


[4] 孙 斌 ,宋 丽 萍 . 计 量 潮 与 科 学 评
价 趋 向 研 究 [J]. 图 书 馆工作 据 ,撰写和修 改论文;
与 研 究 ,2019(3):16-22. 申小曼,郭 佳,申 蓝:负责数据获取
、整 理与分析,参
[5] Simons K. The misused impact factor [J ]. Science,2008, 与论 文修改的讨论 。

http ∥www.cjstp.cn 中国科技期刊研究,2021,32(1) 123
2021 年1 月 第32 卷 第1 期
Application of percentile in subject area of papers in creating
journal indicator of percentage rank

, ,
LIU Xueli 1) SHEN Xiaoman2) GUO Jia 2) SHEN Lan2) ,
) , , ,
1 Periodicals Publishing House Xinxiang Medical University 601 Jinsui Road Xinxiang 453003 China ,
) , , ,
2 Management Institute Xinxiang Medical University 601 Jinsui Road Xinxiang 453003 China ,
:[ ] ( )
Abstract Purposes This paper probes into the method of establishing journal indicator of percentage rank JIPR based on the
( )
percentile in subject area PSA of papers in InCites database and compares the journal evaluation results of different JIPRs.
[ ]
Methods JIPRs of papers published in 2017-2018 on journals of multidisciplinary science in 2018 JCR were established based on
, , , , , ,
their PSAs in InCites database including JIPR4 JIPR6 JIPR8 JIPR10 JIPR100 and average percentile in subject area aPSA . ( )
[ ]
The evaluation results of these journals based on different JIPRs were compared. Findings JIPR4s of the 68 journals show skewed

distribution and other JIPRs show normal distribution. Most indicators are highly correlated particularly the JIPRs. Journals with
great variation in impact factor and aPSA rank are those with more review articles and great contribution of a single highlycited
[ ] ,
paper to the impact factor. Conclusions Most JIPR indicators are superior to impact factor in journal evaluation especially aPSA.
: ; ; ; ;
Keywords Cited frequency Average percentile in subject area Journal indicator of percentage rank Scientific journal Journal
evaluation

(本文责编:梁永霞)

124 中国科技期刊研究,2021,32(1) :
http ∥www.cjstp.cn

You might also like