基于科技文献产出的科研机构评价指标体系研究

基于科技文献产出的科研机构评价指标体系研究

【摘要】科研评价是科研管理工作的重要环节和核心内容之一，是推动科技事业持续健康发展，促进科技资源优化配置，提高科技管理水平的重要手段和保障。而在科研评价中，科研产出始终作为科研评价的主要内容。本文通过对科技文献的特点进行分析，找出各个要素以及要素间的语义关系。通过对这些要素进行深入分析，在原有的理论和实践的基础上，对科技文献产出评价体系重新设计，分别从科研机构综合科研实力、核心作者学术力、学科发展、最新科研动向（领先研究领域），科研人员需求信息特点等五个方面，建立了一个相对系统全面的针对科研机构的科研评价指标体系。

【关键词】科技文献评价体系评价指标

二十世纪八九十年代是科研评价发展的高峰时期，科研管理专家和经济学家提出了许多系统的评价方法[1]。科研评价是科研管理工作的重要环节和核心内容之一，是推动科技事业持续健康发展，促进科技资源优化配置，提高科技管理水平的重要手段和保障[2]。而在科研评价中，科研产出始终作为科研评价的主要内容。本文通过对科技文献的特点进行分析，找出各个要素以及要素间的语义关系。通过对这些要素进行深入分析，在原有的理论和实践的基础上，对科技文献产出评价体系重新设计，分别从科研机构综合科研实力、核心作者学术力、学科发展、最新科研动向（领先研究领域），需求信息特点等五个方面，建立了一个相对系统全面的针对科研机构的科研评价指标体系。

1 科技文献产出评价体系的作用

科技文献是基础性研究成果的主要表现形式，也是表征一个国家、地区基础性研究实力的主要指标[3]。近二十年，一直被高等院校、科研院所以及政府部门作为评价科研能力水平和科研成果的重要指标。科技文献产出评价体系的作用主要体现在三个层次上：宏观上评价国家的科研创新水平，反映一个国家基础研究、应用研究等方面的情况，在一定程度上反映了一个国家的科技技术水平和国际竞争力水平；中观上评价科研机构的科研业绩，反映了科研机构的学术、科研水平及科研机构间的竞争力；微观上评价科研人员的科研能力，反映某个机构的团队或个人的学术地位和影响。

2 科技文献产出的要素

本文通过对科技文献的特点进行分析，找到各种要素以及要素间的语义关系。通过对这些要素的统计分析，可以展开计量分析、主题揭示、关联挖掘和综合评价，从而获取对科技文献产出相关要素更深入全面的认识。

2.1 科技论文产出的相关要素

从科技文献中可以获得题名、摘要、作者、作者机构（单位）、关键词、参

考文献、分类号以及基金项目等相关要素。科技论文的相关要素如下：

（1）科技论文是学术刊物上发表的科学研究成果。科技论文（题名、作者、机构（单位）、摘要、关键词、参考文献、发表期刊或会议）。

（2）作者，科技文献的主要创作者，是科技文献产出的源头。作者（姓名、性别、出生年月、职称、单位、邮箱、研究兴趣）。

（3）期刊，科技文献产出的媒介和主要载体。期刊（名称、ISSN、主办单位、地址、邮箱、出版周期、是否核心、影响因子）。

（4）机构（单位），是科研人员联系形成科研团体的主要方式。机构（名称、地址、邮编）。

（5）基金，是资助基础科研工作的主要方式。基金（名称、编号、类别、起止时间、额度、主持人、依托单位）。

（6）关键词，作为科研人员对科研成果内容提纲挈领的体现，是科技文献产出的主要内容特征。

2.2 科技文献产出要素间的语义关系

要素与要素之间关系有三种：父子关系（等级）、相等关系（等同）和相关关系。相关关系根据紧密程度，又分为直接相关和间接相关。直接相关是指直接定义了概念间的关系，没有经过任何其他的概念；间接相关是指某两个概念虽然没有直接定义关系，却通过其他概念产生了关联。

科技文献产出要素的间关系如下图1，其中的父子关系如文献与参考文献；相等关系如作者与项目参与人员；直接相关如作者与文献之间是撰写与被撰写的关系；间接关系如基金项目与文献之间通过作者产生关联。

3 科技文献产出评价指标体系

根据科技文献产出要素以及要素之间的关系，围绕科技文献产出分别从科研机构综合科研实力、核心作者学术力、学科发展、最新科研动向（领先研究领域），科研人员需求信息特点等五个方面设计评价体系。

3.1 科研机构综合科研实力评估指标

科研机构是一个国家科技创新能力的重要体现，在提升国家综合实力、创新能力、科技竞争力等方面发挥着主导作用。基于文献计量的角度，通过文献发表数量、被引篇数及频次、专利数量以及合作论文数量等指标，对科研机构的成果（科技文献）进行分析得出科研机构的综合科研实力总体情况。

科研机构综合实力评估分别从产出力、影响力、创新力和合作力四个方面进行评估，指标包括：

（1）科研机构生产力：反映科研机构科研产出能力。论文产出数量：科研机构在一定时间范围内发表的论文数量；（2）科研机构影响力：反映科研机构的学术水平和影响力。引文量（篇/次）：科研机构在一定时间范围内发表的论文被引用的数量（篇/次）；篇均引用次数：科研机构在一定时间范围内所发表论文篇均被引用次数；SCI/EI收录的论文数量：科研机构在一定时间范围内被SCI/EI 收录的论文数量；核心期刊刊载的论文数量：科研机构在一定时间范围内被核心期刊刊载的论文数量；（3）科研机构创新力：反映科研机构的自主创新能力和创新水平。专利数量：科研机构在一定时间范围内公开的专利数量；基金立项数：科研机构在一定时间范围内基金立项数量；科技成果数量：科研机构在一定时间范围内科技成果数量；（4）科研机构合作力：反映科研机构与国际、国内交流的活跃程度；会议论文数量：科研机构在一定时间范围内发表会议论文数量；合作论文数量：科研机构在一定时间范围内与其他机构合作的论文数量的比例。C=No/（No+Ns），式中C：合作率；No：合作论文总数；Ns：独立论文数。3.2 核心作者群学术力评估指标

科技文献的作者是推动学科发展的主体，对机构或学科的核心作者研究无疑具有重要意义。核心作者群是具有较高的学术产出和学术影响力的作者集合，是学科发展和创新的主体。通过对作者的发文量、被引次数等多方面指标，采用文献计量、引文分析、数理统计等方法，综合以上指标用定量的方法对核心作者学术力进行综合评估。核心作者群学术力评估指标包括：

（1）发文方面。

作者论文产出数量：作者在一定时间范围内发表的论文数量；

作者合作论文数量：作者在一定时间范围内与他人合作创作的论文数量。

（2）引文方面。

总被引次数：作者在一定时间范围内发表的论文被引用的数量

自引次数：作者在一定时间范围内发表的论文自己引用自己文献的数量

3.3 学科发展评价指标

学科发展评价则在于客观科学地分析被评学科目前的发展基础、发展状况和态势，预测将来发展可能达到的程度，发现学科发展过程中存在的问题，分析问题产生的原因，探讨解决问题、促进学科发展的对策。开展学科发展评价，从而为制定学科发展战略以及进行学科建设和管理提供直接、有力的支撑。学科发展评价指标包括：（1）学科文献数量分布：科研机构在一定时间范围内发表的论文在各个学科分布数量；（2）学科文献数量增长趋势：科研机构在一定时间范围内