信息不确定条件下的社交学术网站评价研究

第41卷第2期 2019年4月

武汉理工大学学报（信息与管理工程版）

JOURNAL OF WUT(INFORMATION& MANAGEMENT ENGINEERING)

V o l.41 No. 2

Apr. 2019

文章编号:2095 -3852(2019)02-0197-06文献标志码:A

信息不确定条件下的社交学术网站评价研究

成全，邓俊军

(福州大学经济与管理学院，福建福州350108)

摘要:为了解决社交学术网站评价的多属性信息不确定性问题，提高社交学术网站的检索效率及学术 信息资源质量。采用层次分析方法建立了一套社交学术网站的综合评价指标体系，在此基础上整合运用证据 推理综合评价模型，并利用效用值函数对8个备选社交学术网站进行评价实证研究。研究结果表明，该方法 能够有效解决模糊信息的融合问题和评价过程中的主观性问题，提高评价结果的准确度和可信度，为社交学 术网站评价与评估提供理论依据，也为科研用户在检索学术资源信息过程中提供良好优质的导向服务。

关键词:社交学术网站;层次分析法;证据推理;综合评价

中图分类号：C934

中国互联网络信息中心第42次《中国互联 网络发展状况统计报告》显示，截至2018年6月我国网民数量已达8.02亿，随着互联网信息技术 的发展和信息资源的数字化建设，网络环境对我 们的工作和学习产生了巨大的变化，学术研究领 域也不例外。在科研和学术活动过程中，网络很 好地适应了当前资源开放、知识共享的环境需求，而且承载着海量的学术资源，也满足学术社交网 络用户的科研需求。网络不但改变了人们搜索、获取和传播科研资料的方式，而且在传播、分享学 术成果，促进学术交流方面起到了重要的作用。另外，网络学术社交平台汇聚了不同学科领域内 的资深专家教授，聚合了各类群体的智慧，科研工 作者线上之间的交流将产生大量学术信息资源，并加速知识的创新与传播，这种网络学术社交活 动让科学研究变成了一个开放的发展空间，社交 网络学术资源以其开放性获取、传播迅速等特征 受到科研用户的青睐。且其传播方式与资源类型 也呈现出多样性，如纯文本文档、W o d、PPT、交互 式图表、音频、视频等。然而社交网络学术资源也 存在良莠不齐、鱼龙混杂的问题，如何评价和管理 社交网络学术平台，以实现社交学术资源的有效 利用，并推动社交学术资源的快速发展将是目前 国内外研究的一个重点和热点。

DOI % 10. 3963/j. issn. 2095 - 3852.2019. 02. 016

1研究现状

国外学术界为了科研人员的在线交流开发了 针对研究人员的学术性社交网络，如SX Link、S c i e n t i s t Solution、Nature Network等，但随着 Face-W〇〇k、Twitter等知名社交网络的兴起，一些学者也 开始尝试搭建学术交流平台，建立研究兴趣相似 的学术圈，但其学术资源的专业性与规范性受到 一些用户的质疑。直到出现ReseerchGate、Accde-mia、Mendeley、Zotero等为代表的在线学术交流管 理工 ，外 学术交流 成 。

B H A R D W A J[1]结合学术网站的属性和用户的基 本需求建立了评价指标，并对4个受欢迎的社交 网站进行了实证研究。R O Y等[2]提出了一种基 于W A M M I问卷及绩效评估的统计分析方法，分 析不同网站生成的W A M M I报告，测量在不同的 可用性属性方面的用户满意度。K A B A K等[3]采 用一种A N P和TOPSIS相结合的模型来对远程教 育网站进行评价、排列，应用不同的情景分析来确 定标准组对最佳网站选择的影响。该评价模型采 用定量和定性的综合评价法能够有效地减少不确 定性问题，但缺乏对量化标准的探讨，也没有解决 不同指标之间归一化处理的问题。

在国内，社交网站研究主要集中在政府公共

收稿日期=2018-11-16.

作者简介:成全(1979 -),男，湖北武汉人，福州大学经济与管理学院副教授，博士，主要研究方向为数据挖掘与知识发现.基金项目：福建省社科规划基金项目（FJ2016B077);福建省行政管理学会基金项目（2017B01).

198武汉理工大学学报（信息与管理工程版)2019年4月

事业网站、电子商务网站及图书馆教育网站等方 面，而关于学术网站领域的研究成果较少，主要包 括学术网站指标体系的构建和网站综合评价方 法。在指标体系构建方面，刘友华等[4=5]结合学 术网站的特点，采用科学的方法构建了一套合理 的学术网站评价指标体系和指标权重确定方法。吴平等[C]从学术期刊网站评价指标体系构建的 科学性、全面性等原则出发，通过专家问卷调查和 层次分析法确定了学术期刊网站的三级评价指标 体系，使得指标更加细化。在评价方法方面，龚雪 媚等[@]比较了几种典型的网站评价方法，对比了 各方法之间的优劣，针对不同的评价主体，提出了 适用不同评价目标的评价方法选择策略。潘秋岑 等[8]采用Kano模型评价方法，对学术期刊网站 功能服务需求进行综合评价，虽然该方法对改善 用户个性化需求体验起着重要作用，但Kan。模型 评价方法没有考虑用户情景需求信息。道玉 明[9]将链接作为网站的一个重要评价指标，提出 了一种基于链接分析的学术网站综合评价方法，但链接分析法的主要缺点是方向性以及无法确定 影响链接本身的因素。

综上可知，国内外学术界对学术网站的研究 侧重点不同，国外主要针对评价指标和评价方法 进行了大量的实证研究，这有利于对指标的合理 性和有效性进行分析和比较。国内则大部分停留 在理论研究阶段，实证方面涉及的研究成果较少，因此无法正确判断指标的合理性和有效性。另 外，国内在学术网站评价的过程中，仅考虑简单加 权法，没有考虑评价过程中指标属性的信息不完 全、不确定性因素。为此，笔者从学术社交网站评 价过程中的多属性决策问题出发，提出了基于层 次分析法与证据推理相结合的综合评价方法，对 决策属性中不确定信息在不同证据框架下进行综 合 价。

2社交学术网站评价指标体系构建及权重确定

2.1指标体系的构建原则与方法

社交学术网站指标体系的建立需要考虑能够 反映社交学术网站的本质，既要全面准确、简明实 用，又要防止指标过多而导致指标交叉重复，指标 选取需遵循科学性、合理性、客观性、全面性、可操 作性等原则[10_12]。具体而言，学术网站指标体系 的构建基于网站特点，选出具有代表性的关键指 标，并根据初选的关键指标以问卷调查形式，采用德尔菲法进行专家评审，基于问卷调查和征询意 见结果，对初选的关键指标的合理性进行分析，从 而对选定的关键指标进一'步实施有效检验和优 化，删除不合理的指标，最终得到网站内容、网站 设计、网站功能、网站影响力4个一级指标，以及 内容的全面性、内容的权威性、内容的准确性、内

容的创新性、内容的时效性、学术内容的比例、界 面友好程度、易用性、稳定性、交互功能、检索功 能、下载功能、特色服务、用户访问量、链接数、引

用量16个二级指标[13]。

2%评价指标权重的确定

指标权重的确定一般使用专家咨询或者用数 学测定的方法来获得，笔者采用传统的基于9级 标度的层次分析法来获得指标权重，具体步骤 如下：

(1) 建立层次结构模型。将决策的目标虑的因素（决策准则）和决策对象按他们之间的 相互关系分为最高层、中间层和最低层。

(2) 构造判断矩阵。在确定各层次各因素间的权重时，如果只是定性的结果，则常常不容易 被别人接受，因而不把所有因素放在一起比较，而 是进行两两相互比较，对比时采用相对尺度，尽可 能减少性质不同的诸因素相互比较的困难，以提 高准确度。与此同时，将初始判断矩阵进行归一 化处理，可以求出最大特征值和对应的特征向量。

(3) 层次单排序及其一致性检验。所谓一性检验是指结果是否符合要求，满足实际意义。一致性检验公式为%C- = !。一般地，如果C- < 0. 1，则认为该判断矩阵通过一致性检验，否则就

不具有满意一致性。其中C/h^。对应的

几一1

平均随机一致性指标标准值如表1所示。重复以 上步骤可以对所有指标的判断矩阵进行单层一致 性检验和综合一致性检验，计算出所有指标权重，从而得到指标权重结果，如表2所示。

表1平均随机一致性指标"/的标准值

矩阵阶数 1 2 345 6 7 RI0.000.000.580.90 1.12 1.24 1.32

3基于证据推理的学术网站评价方法及实证分析

证据推理方法是建立在多属性决策问题背景 以及D- S证据合成规则基础之上，对于处理既