基于AHP的学术论文质量评价方法研究

同时把这些标度值表示成一个判断矩阵 Ａ：
ａｋ Ｂ１ Ｂ２ … Ｂｎ Ｂ１ ｂ１１ ｂ１２ … ｂ１ｎ Ａ＝ Ｂ２ ｂ２１ ｂ２２ … ｂ２ｎ Ｂ３ … … Ｂ４ ｂｎ１ ｂｎ２ … ｂｎｎ
（１）
式中：ｂｉｊ表示对ａｋ 而言，ｂｉ 对ｂｊ 的相对重要性． 判 断 矩 阵 的 数 值 可 通 过 通 过 调 研，征 询 有 关 专
· ２２４ ·
浙江工业大学学报
第 ４０ 卷
者经过多年工作的积累与有关专家的问卷调查与补
充，参见图１的模型 建 立 学 术 论 文 质 量 层 次 评 价 体
系 递 结 构 ，见 表 ３．
表 ３ 学 术 论 文 质 量 指 标 体 系
Ｔａｂｌｅ ３ Ａｃａｄｅｍｉｃ ｔｈｅｓｉｓ ｑｕａｌｉｔｙ ｉｎｄｅｘ ｓｙｓｔｅｍ
家的意见，并统计相 关 资 料 和 考 虑 决 策 者 的 认 识 水
平后加以综合平衡后得出，本研究采用 ＤＥＬＰＨＩ法 与 ＡＨＰ 相结合 的 方 法 来 确 定 判 矩 阵 的 数 值，而 衡
量判断矩阵的标准是矩阵中的数据是否有一致性． 如果矩 阵 Ａ 满 足：１）ｂｉｉ ＝１；２）当ｉ≠ｊ 时，ｂｉｊ ＞０； ３）ｂｉｊ＝ｂ１ｉｊ ；（４）ｂｉｊ＝ｂｂｊｉｋｋ （ｉ，ｊ，ｋ＝１，２，…，ｎ）则 称 Ａ 具
ｎ １ ２ ３ ４ ５ ６ ７ ８ ９ ＲＩ ０ ０ ０．５８ ０．９０ １．１２ １．２４ １．３２ １．４１ １．４５
在 ＡＨＰ 中，一般采用方 根 法、和 积 法 和 幂 法 等 近似算法来计算同一层次中所有层次单排序的权重
值，并可以计算出相 对 上 一 层 次 而 言 本 层 次 所 有 指
关 键 词 ：学 术 论 文 ；质 量 评 价 ；层 次 分 析 法
中 图 分 类 号 ：Ｃ９３４ 文 献 标 志 码 ：Ａ
文 章 编 号 ：１００６－４３０３（２０１２）０２－０２２２－０４
Ｒｅｓｅａｒｃｈ ｏｎ ｑｕａｌｉｔｙ ｅｖａｌｕａｔｉｏｎ ｍｅｔｈｏｄ ｏｆ ａｃａｄｅｍｉｃ ｐａｐｅｒｓ ｂａｓｅｄ ｏｎ ＡＨＰ
第 ４０ 卷 第 ２ 期 ２０１２ 年 ４ 月
浙江工业大学学报
ＪＯＵＲＮＡＬ ＯＦ ＺＨＥＪＩＡＮＧ ＵＮＩＶＥＲＳＩＴＹ ＯＦ ＴＥＣＨＮＯＬＯＧＹ
Ｖｏｌ．４０ Ｎｏ．２ Ａｐｒ．２０１２
基于 ＡＨＰ 的学术论文质量评价方法研究
陈 雯 兰１ ，陈 石 平２
（１．浙江水利水电专科学校 科技处，浙江 杭州 ３１００１８；２．浙江工业大学 学报编辑部，浙江 杭州 ３１００３２）
价方法把论文质量的评判从定性分析转化为定量分析，用学术论 文 质 量 评 价 指 标 建 立 判 断 矩 阵 并
进 行 一 致 性 检 验 ，最 终 计 算 出 各 指 标 的 单 层 权 重 与 合 成 权 重 值 ．实 例 表 明 该 方 法 能 够 为 决 策 者 合 理
选 稿 、正 当 用 稿 与 恰 当 评 稿 提 供 量 化 依 据 ．
图１ ＡＨＰ 模型
Ｆｉｇ．１ Ａｎａｌｙｔｉｃ ｈｉｅｒａｒｃｈｙ ｐｒｏｃｅｓｓ ｍｏｄｅｌ
对图１的多层次数学模型，ＡＨＰ 要求对每一层 级各指标的相互重要性给出判断［２］，拟 采 用 Ｓａｔｔｙ［３］ 的 １－９ 标 度 法 进 行 评 分 ，标 度 法 含 义 见 表 １．
表 １ １—９ 级 标 度 法
Ａｂｓｔｒａｃｔ：Ｔｈｅ ｑｕａｌｉｔｙ ｅｖａｌｕａｔｉｏｎ ｏｆ ａｃａｄｅｍｉｃ ｐａｐｅｒｓ ｉｓ ａ ｄｉｆｆｉｃｕｌｔ ａｎｄ ｉｍｐｏｒｔａｎｔ ｐｒｏｂｌｅｍ ｉｎ ｔｈｅ ｒｅｓｅａｒｃｈ ｍａｎａｇｅｍｅｎｔ．Ｎｏｗａｄａｙｓ，ｉｔ ｌａｒｇｅｌｙ ｄｅｐｅｎｄｓ ｏｎ ｐｅｏｐｌｅｓ ｓｕｂｊｅｃｔｉｖｅ ｊｕｄｇｍｅｎｔ ａｎｄ ｈａｓ ｎｏ ｕｎｉｆｉｅｄ ｑｕａｎｔｉｔａｔｉｖｅ ｕｎｄｅｒｓｔａｎｄｉｎｇ ａｎｄ ｊｕｄｇｍｅｎｔ．Ｉｎ ｔｈｉｓ ｐａｐｅｒ，ａ ｅｖａｌｕａｔｉｏｎ ｍｅｔｈｏｄ ｂａｓｅｄ ｏｎ ａｎａｌｙｔｉｃ ｈｉｅｒａｒｃｈｙ ｐｒｏｃｅｓｓ （ＡＨＰ）ａｎｄ ｆｕｚｚｙ ｍａｔｈｅｍａｔｉｃｓ ｔｈｅｏｒｙ ｉｓ ｐｒｏｐｏｓｅｄ ｔｏ ｃｈａｎｇｅ ｔｈｅ ｐａｐｅｒ ｑｕａｌｉｔｙ ｅｖａｌｕａｔｉｏｎ ｆｒｏｍ ｑｕａｌｉｔａｔｉｖｅ ａｎａｌｙｓｉｓ ｉｎｔｏ ｑｕａｎｔｉｔａｔｉｖｅ ａｎａｌｙｓｉｓ．Ｉｎ ｔｈｉｓ ｍｅｔｈｏｄ，ｔｈｅ ｅｖａｌｕａｔｉｏｎ ｉｎｄｅｘｅｓ ｏｆ ａｃａｄｅｍｉｃ ｐａｐｅｒ ｗｉｌｌ ｂｅ ｕｓｅｄ ｔｏ ｓｅｔ ｕｐ ａｊｕｄｇｍｅｎｔ ｍａｔｒｉｘ ａｎｄ ｔｅｓｔ ｔｈｅ ｃｏｎｓｉｓｔｅｎｃｙ．Ｆｉｎａｌｌｙ，ｔｈｅ ｓｉｎｇｌｅ ｗｅｉｇｈｔｓ ａｎｄ ｓｙｎｔｈｅｔｉｃ ｗｅｉｇｈｔｓ ｏｆ ａｌｌ ｋｉｎｄｓ ｏｆ ｉｎｄｅｘｅｓ ｗｉｌｌ ｂｅ ｃａｃｕｌａｔｅｄ．Ｔｈｅ ｅｘａｍｐｌｅ ｓｈｏｗｓ ｔｈａｔ ｔｈｉｓ ｍｅｔｈｏｄ ｃａｎ ｐｒｏｖｉｄｅ ｑｕａｎｔｉｔａｔｉｖｅ ｂａｓｉｓ ｆｏｒ ｅｄｉｔｏｒ ｔｏ ｅｖａｌｕａｔｅ，ｓｅｌｅｃｔ ａｎｄ ａｃｃｅｐｔ ａｃａｄｅｍｉｃ ｐａｐｅｒｓ．
一 意
致性 的一
致性
（４）
烆≥０．１，Ａ 具有非满意的一致性
即当 ＣＲ＜０．１时，认为层次排序结果具有满意的一
致 性 ，否 则 需 要 调 整 判 断 矩 阵 中 相 对 的 权 重 值 ，最 后
使矩阵具有满意的一致性．ＲＩ 值由表２给出 ． ［２］
表 ２ ＲＩ 指 标
Ｔａｂｌｅ ２ ＲＩｉｎｄｅｘ
ＣＩ，平均随机一致性指标 ＲＩ，一致性比例 ＣＲ．
按以下步骤对Ａ 进行一致性检验：
１）矩阵Ａ＝（ｂｉｊ）ｎ×ｎ 的每一列向量归一化得ｗｉｊ
＝
ｂｉｊ
ｎ
．
∑ｂｉｊ
ｉ＝１
ｎ
∑ ２）对 ｗｉｊ 按行求和得ｗｉ ＝ ｗｉｊ ． ｊ＝１
３）将 ｗｉ 归一化后有 ｗｉ ＝
ｗｉ
ｎ
，则 有 特 征 向
∑ｗｉ
ｉ＝１
量 Ｗ ＝ ［ｗ１ … ｗｎ］Ｔ ，即为近似的权向量．
标的重要权值结果［４－５］．根据指标层的权重值 再 乘 以 其 所 属 准 则 层 的 权 重 ，可 以 得 到 该 指 标 的 综 合 权 重 ．
２ 学术论文评价指标体系的构建
指标体系是描述和评价某种事物的可量度参数 的集合．学术论文的 质 量 评 价 体 系 是 描 述 和 确 定 某 一 论 文 从 选 题 的 意 义 、学 术 性 和 创 新 性 等 方 面 ，并 体 现稿件组稿的方向 和 重 点 的 可 度 量 参 数 的 集 合．笔
ＣＨＥＮ Ｗｅｎ－ｌａｎ１，ＣＨＥＮ Ｓｈｉ－ｐｉｎｇ２
（１．Ｓｃｉｅｎｃｅ ａｎｄ Ｔｅｃｈｎｏｌｏｇｙ Ｄｅｐａｒｔｍｅｎｔ，Ｚｈｅｊｉａｎｇ Ｗａｔｅｒ Ｃｏｎｓｅｒｖａｎｃｙ ａｎｄ Ｈｙｄｒｏｐｏｗｅｒ Ｃｏｌｌｅｇｅ，Ｈａｎｇｚｈｏｕ ３１００１８，Ｃｈｉｎａ； ２．Ｅｄｉｔｏｒｉａｌ Ｄｅｐａｒｔｍｅｎｔ ｏｆ Ｊｏｕｒｎａｌ，Ｚｈｅｊｉａｎｇ Ｕｎｉｖｅｒｓｉｔｙ ｏｆ Ｔｅｃｈｎｏｌｏｇｙ，Ｈａｎｇｚｈｏｕ ３１００３２，Ｃｈｉｎａ）
４）按如下公式计算 Ｗ 对应的最大特征根
ｎ
ｎ
∑ ∑ ∑ λｍａｘ
＝
１ ｎ ｉ＝１
（ＡＷ ）ｉ ｗｉ
＝
ｎ
１ ｎHale Waihona Puke ｉ＝１ａｉｊｗｊｊ＝１
ｗｉ
５）计 算 一 致 性 指 标
（２）
ＣＩ ＝λｎｍａｘ－－１１
（３）
６）计算一致性比例 ＣＲ＝ＲＣＩＩ
当
ＣＲ＝ＲＣＩＩ烅烄＝＜００，．１Ａ，Ａ具 有具
完全 有满
第２期
陈雯兰，等：基于 ＡＨＰ 的学术论文质量评价方法研究
· ２２３ ·
次分析法将定性与 定 量 分 析 相 结 合，把 定 性 问 题 转 为 定 量 分 析 的 决 策 方 法 ．其 理 论 核 心 是 ：将 一 个 复 杂 的总是看成一个系 统，通 过 分 析 一 个 复 杂 系 统 的 相 关 要 素 及 要 素 间 的 相 互 关 系 ，建 立 层 次 关 系 模 型 ，并 对层次上的每个要 素 作 出 相 对 重 要 性 判 断，给 予 量 化 ，建 立 判 断 矩 阵 ，计 算 出 该 层 要 素 对 于 该 准 则 的 权 重，最后计算出多层 次 要 素 对 于 总 体 目 标 的 组 合 权 重 ，从 而 得 出 不 同 方 案 或 评 价 对 象 的 优 劣 权 值 ．结 构 模 型 见 图 １．
科 学 性 Ｂ４
理 论 与 方 法 是 否 正 确ｂ４１ 数 据 处 理 及 材 料 运 用 的 可 信 度ｂ４２ 实 验 结 果 的 合 理 性ｂ４３ 结 论 的 改 进 性ｂ４４ 推 理 的 逻 辑 性ｂ４５ 论 文 的 自 含 性１）ｂ４６
摘 要 ：学 术 论 文 质 量 评 价 是 科 研 管 理 中 的 一 个 重 点 和 难 点 ，目 前 对 学 术 论 文 质 量 评 价 很 大 程 度 上 都
依 赖 于 人 们 的 主 观 判 断 ，并 没 有 一 个 统 一 的 量 化 认 识 与 判 断 ．基 于 层 次 分 析 法 与 模 糊 数 学 理 论 的 评
ＪＸＣ１１３０）；浙 江 省 教 育 厅 科 研 基 金 资 助 项 目 （Ｙ２０１１２０８８１） 作 者 简 介 ：陈 雯 兰 （１９７６— ）女 ，浙 江 缙 云 人 ，助 理 研 究 员 ，硕 士 ，主 要 从 事 高 校 科 技 管 理 与 学 报 编 辑 ，Ｅ－ｍａｉｌ：ｃｈｅｎｗｌ７３６５＠１６３．ｃｏｍ．
文 质 量 的 综 合 分 析 与 评 价 ，为 决 策 者 合 理 选 稿 、正 当 用稿与恰当评稿提供量化依据．
１ 层次分析法的基本步骤
层 次 分 析 法 是 在 ２０ 世 纪 ７０ 年 代 中 期 由 美 国 著 名运筹学家匹 兹 堡 大 学 教 授Ｉ．Ｌ．Ｓａａｔｙ 提 出 的．层
收 稿 日 期 ：２０１１－０３－１６ 基金项目：杭州市科技局科技情报调研专项（２０１１０６３４Ｍ１６）；中国高校科技期刊研究会学术 与 基 金 委 员 会 科 技 期 刊 学 研 究 计 划 项 目 （ＧＢ－
有 完 全 的 一 致 性 ．但 在 实 际 工 作 中 ，由 于 客 观 因 素 的 复杂性等原 因，致 使 判 断 矩 阵 Ａ 不 一 定 一 致．尤 其 是对于因素多、规 模 大 的 问 题 更 是 如 此．因 些，需 要 对判断 矩 阵 进 行 一 致 性 检 验，引 入 了 一 致 性 指 标
总体目标 准则层
指标层
对 科 学 研 究 有 重 要 意 义ｂ１１ 选 题 意 义 Ｂ１ 对 科 学 研 究 有 参 考 价 值ｂ１２
无 研 究 价 值ｂ１３
学 术 性 Ｂ２
国 际 先 进 水 平ｂ２１ 国 内 领 先 水 平ｂ２２ 一 般ｂ２３ 较 低ｂ２４
论文 质量Ａ
创 新 性 Ｂ３
新 理 论ｂ３１ 新 方 法ｂ３２ 既 有 理 论 又 有 方 法ｂ３３
Ｔａｂｌｅ １ ｌｅｖｅｌｓ ｓｃａｌｅ ｍｅｔｈｏｄ
标度 １ ３ ５ ７ ９
２，４，６，８
倒数
代表的含义
两因素相比，因素ｉ与ｊ 相同重要 两因素相比，ｉ比ｊ 稍重要 两因素相比，ｉ比ｊ 较重要 两因素相比，ｉ比ｊ 较强重要 两因素相比，ｉ比ｊ 极端重要 两相邻判断的中间值 因素ｉ与ｊ 的重 要 性 之 比 为ａｉｊ，则 因 素ｊ 与ｉ 重 要 性 为 １／ａｉｊ
Ｋｅｙ ｗｏｒｄｓ：ａｃａｄｅｍｉｃ ｐａｐｅｒ；ｑｕａｌｉｔｙ ｅｖａｌｕａｔｉｏｎ；ａｎａｌｙｔｉｃ ｈｉｅｒａｒｃｈｙ ｐｒｏｃｅｓｓ （ＡＨＰ）
据 统 计，至 ２００９ 年 我 国 学 术 期 刊 有 ４ ９２６ 种［１］，但 是 对 于 学 术 期 刊 中 学 术 论 文 的 质 量 评 判 没 有 形 成 一 个 基 本 一 致 的 认 识 ，很 多 情 况 下 ，学 术 论 文 质量的好坏很大的程度上依赖于专家的定性判断， 谈不上用对论文质量施以定性与定量相结合的方法 来 评 价 了 ．笔 者 把 论 文 质 量 评 估 看 作 为 一 个 系 统 ，并 建 立 模 型 ，运 用 层 次 分 析 法 、模 糊 数 学 理 论 实 现 对 论