科学技术评价方法及PPT课件
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
持、预算制ห้องสมุดไป่ตู้改革的要求）。
10
四、科学技术评价方法及其应用
定性评价 ：同行评议法、回溯和案例评价法 定量评价 ：文献计量法、经济计量法 综合评价：多指标综合评价法、 定标比超法
11
1、同行评议方法(制度)
同行评议（peer review）是充分依靠科学家群体对科学 技术活动（包括科研活动、科研资助、科研管理等）进行 民主管理的一种方法（或制度）。
4
科技活动的本质规律对评价的要求
科学技术工作是集生产力和文化属性为一体的活动
共同理念自由发展
文 物质资源-精神产品 化 活 水平、质量、精品 动
方针、政策引导
个人创造与灵感
观念
共同目标严格管理
过程
物质财富循环增值 生
产
成果
效益、数量、规模 活
动
组织
制度规范
环境
团队精神与合作等
5
科技活动的本质规律对评价的要求
8
二、什么是科学技术评价
科学技术评价的原则 科学性 独立性 客观性(注意客观与主观的统一,反映事物的本质属性) 公正性 国际性 实效性 公开性
9
三、为什么要开展科学技术评价
科学技术评价的需求： 优化配置政府科技资源； 提高政府科技决策与管理的科学化水平； 提高科研工作的效率和质量（引入竞争激励机制）； 促进科学发展目标与国家目标紧密结合（政策引导）； 营造有利于原始性创新的环境和文化； 向公众“交帐”和说明公共资金使用效果（赢得公众的支
14
1、同行评议方法(制度)
同行评议广泛应用于各类科技评价活动： ——科学出版物（论文、著作等）的评审 ——学位、荣誉和职称评定 ——科研项目评审 ——科研成果的验收与评奖 ——科研机构评价 ——科技政策和科技计划评价
同行评议的方式： 通信评议（函评）；会议评审；函评+会评； 现场评议。
15
1、同行评议方法（制度）
——美国经济发展委员会 ：“美国基础研究体系的一个基 本优势就是，通过一种认真和具有竞争性的同行评议过程 来分配经费拨款。”
——美国国家科学技术理事会基础科学委员会：“在对单 个政府部门当前计划的评审中，以同行评议为基础的价值 评价将继续是主要工具。”
13
1、同行评议方法(制度)
——美国GPRA确定的评价原则：“为确保世界级研究水 平而对科学事业进行管理，同行评议是基础。研究项目要由 专家来评定其价值，资金的配置也须以研究项目的科学价值 为依据。潜在的科研项目和科研计划要根据知识前沿领域的 卓越的研究活动的标准进行评价。同行评议的价值评估同样 可以被用来对一个机构的基础科学项目作回顾性评价。
同行评议法的优点：价值评价
存在的缺陷： ——“熟人关系网” ——崇尚权威 ——“马太效应” ——不利于支持创新性的非共识项目 ——剽窃行为
16
NIH申请研究资助的同行评议
1、机构设置
主任办公室 18个专业研究所 4个综合研究中心、资源中心和图书馆 3个临床医疗、信息技术服务和评估机构（科学评估中心 CSR）
7
二、什么是科学技术评价
科学技术评价分类
按科技活动阶段：事前评价、事中评价、事后评价。 按评价目的：立项评审、中期评估、结题验收、绩效评价。 按评价对象：政策评价、计划评价、项目评价、机构评价、
人员评价、成果评价等。 按评价方法：定性评价、定量评价、综合评价等。 按评价执行方：内部评价、外部评价。
科学技术评价方法及 主要国家的做法
2004年12月 1
内容提要
一、引 言 二、什么是科学技术评价 三、为什么要开展科学技术评价 四、科学技术评价方法及其应用 五、主要国家科技评价的做法 六、几点启示
2
一、引 言
科学技术评价活动在科学技术发展的不同历史时期具有 不同的特征。 在近代科学技术发展的早期，由科学家个人兴 趣和好奇心驱动的自由探索研究成为科学技术活动的主要形 式，科研活动主要依靠自筹资金、社会资助和权贵的捐助， 政府的投入很少。科技活动的文化属性突出。科学技术评价 主要限于科学共同体内部的学术评价和对科学家重大科学发 现的优先权的识别，评价的目的在于促进学术交流、建立科 学规范、引导研究方向。
具体而言，同行评议是指某一领域或与其邻近领域的专 家采用同一种评价标准，共同对涉及相关领域的某一事项 进行独立的价值评议的过程，其评价结果为有关部门的决 策提供依据。
12
1、同行评议方法(制度)
同行评议是科技评价中应用最广泛和可信度较高的评价方 法，尤其是对用定量方法难以测度和判断的科研活动的价 值评估(merit review)，具有其他方法不可替代的优势。
评议
18
2、NIH科学评估中心（CSR）
（2）分配项目申请的依据 ——专业评审组基于
每个专业评审组的评审指南
——研究所基于 研究所的使命 研究所的方向
19
3、申请资助的双重评估系统
（1）第一层次的评估（项目评价） ——专业评审组（SRG）
对申请资助项目的科学创新价值进行评议 对于是否予以资助和资助期限提出建议
科技评价的困难在于： 需要寻找一种能兼顾生产力评价和文化评价 为一体的方法。
6
二、什么是科学技术评价
概念内涵 科学技术评价是对科学技术活动及其产出和影响的价值
进行判断的认识活动。 科学技术评价既是科学共同体和科学技术发展内在的、
基本的学术评价机制，也是科学技术管理的工具，是对科学 技术活动进行预测、规划、决策、管理、监督的手段。
3
一、引 言
20世纪以来，人类的科学技术活动进入“大科学”时代， 科学技术在国家经济、社会和安全中的战略地位日益凸现, 成为第一生产力。特别是二战以后，发展科学技术成为国家 战略和国家政策的重要方面。科技活动的文化属性和生产力 属性并重。政府对科学技术活动的宏观引导与组织管理不断 加强，对科学研究的投入不断加大。科学技术评价不仅限于 科学共同体内部的学术评价机制，也成为政府制定科技政策、 配置科技资源和实施有效管理的重要行为（手段）。
17
2、NIH科学评估中心（CSR）
（1）设立三大综合评审组（临床与人口基础研究、生理系统、 分子和细胞机理）和100多个专业评审组
集中受理申请 将项目申请分配给CSR的各专业评审组或研究所的学科评审
组 将潜在的资助项目申请分配给NIH的研究所 100多个专业评审组对提交的项目申请的科学创新价值进行
10
四、科学技术评价方法及其应用
定性评价 ：同行评议法、回溯和案例评价法 定量评价 ：文献计量法、经济计量法 综合评价：多指标综合评价法、 定标比超法
11
1、同行评议方法(制度)
同行评议（peer review）是充分依靠科学家群体对科学 技术活动（包括科研活动、科研资助、科研管理等）进行 民主管理的一种方法（或制度）。
4
科技活动的本质规律对评价的要求
科学技术工作是集生产力和文化属性为一体的活动
共同理念自由发展
文 物质资源-精神产品 化 活 水平、质量、精品 动
方针、政策引导
个人创造与灵感
观念
共同目标严格管理
过程
物质财富循环增值 生
产
成果
效益、数量、规模 活
动
组织
制度规范
环境
团队精神与合作等
5
科技活动的本质规律对评价的要求
8
二、什么是科学技术评价
科学技术评价的原则 科学性 独立性 客观性(注意客观与主观的统一,反映事物的本质属性) 公正性 国际性 实效性 公开性
9
三、为什么要开展科学技术评价
科学技术评价的需求： 优化配置政府科技资源； 提高政府科技决策与管理的科学化水平； 提高科研工作的效率和质量（引入竞争激励机制）； 促进科学发展目标与国家目标紧密结合（政策引导）； 营造有利于原始性创新的环境和文化； 向公众“交帐”和说明公共资金使用效果（赢得公众的支
14
1、同行评议方法(制度)
同行评议广泛应用于各类科技评价活动： ——科学出版物（论文、著作等）的评审 ——学位、荣誉和职称评定 ——科研项目评审 ——科研成果的验收与评奖 ——科研机构评价 ——科技政策和科技计划评价
同行评议的方式： 通信评议（函评）；会议评审；函评+会评； 现场评议。
15
1、同行评议方法（制度）
——美国经济发展委员会 ：“美国基础研究体系的一个基 本优势就是，通过一种认真和具有竞争性的同行评议过程 来分配经费拨款。”
——美国国家科学技术理事会基础科学委员会：“在对单 个政府部门当前计划的评审中，以同行评议为基础的价值 评价将继续是主要工具。”
13
1、同行评议方法(制度)
——美国GPRA确定的评价原则：“为确保世界级研究水 平而对科学事业进行管理，同行评议是基础。研究项目要由 专家来评定其价值，资金的配置也须以研究项目的科学价值 为依据。潜在的科研项目和科研计划要根据知识前沿领域的 卓越的研究活动的标准进行评价。同行评议的价值评估同样 可以被用来对一个机构的基础科学项目作回顾性评价。
同行评议法的优点：价值评价
存在的缺陷： ——“熟人关系网” ——崇尚权威 ——“马太效应” ——不利于支持创新性的非共识项目 ——剽窃行为
16
NIH申请研究资助的同行评议
1、机构设置
主任办公室 18个专业研究所 4个综合研究中心、资源中心和图书馆 3个临床医疗、信息技术服务和评估机构（科学评估中心 CSR）
7
二、什么是科学技术评价
科学技术评价分类
按科技活动阶段：事前评价、事中评价、事后评价。 按评价目的：立项评审、中期评估、结题验收、绩效评价。 按评价对象：政策评价、计划评价、项目评价、机构评价、
人员评价、成果评价等。 按评价方法：定性评价、定量评价、综合评价等。 按评价执行方：内部评价、外部评价。
科学技术评价方法及 主要国家的做法
2004年12月 1
内容提要
一、引 言 二、什么是科学技术评价 三、为什么要开展科学技术评价 四、科学技术评价方法及其应用 五、主要国家科技评价的做法 六、几点启示
2
一、引 言
科学技术评价活动在科学技术发展的不同历史时期具有 不同的特征。 在近代科学技术发展的早期，由科学家个人兴 趣和好奇心驱动的自由探索研究成为科学技术活动的主要形 式，科研活动主要依靠自筹资金、社会资助和权贵的捐助， 政府的投入很少。科技活动的文化属性突出。科学技术评价 主要限于科学共同体内部的学术评价和对科学家重大科学发 现的优先权的识别，评价的目的在于促进学术交流、建立科 学规范、引导研究方向。
具体而言，同行评议是指某一领域或与其邻近领域的专 家采用同一种评价标准，共同对涉及相关领域的某一事项 进行独立的价值评议的过程，其评价结果为有关部门的决 策提供依据。
12
1、同行评议方法(制度)
同行评议是科技评价中应用最广泛和可信度较高的评价方 法，尤其是对用定量方法难以测度和判断的科研活动的价 值评估(merit review)，具有其他方法不可替代的优势。
评议
18
2、NIH科学评估中心（CSR）
（2）分配项目申请的依据 ——专业评审组基于
每个专业评审组的评审指南
——研究所基于 研究所的使命 研究所的方向
19
3、申请资助的双重评估系统
（1）第一层次的评估（项目评价） ——专业评审组（SRG）
对申请资助项目的科学创新价值进行评议 对于是否予以资助和资助期限提出建议
科技评价的困难在于： 需要寻找一种能兼顾生产力评价和文化评价 为一体的方法。
6
二、什么是科学技术评价
概念内涵 科学技术评价是对科学技术活动及其产出和影响的价值
进行判断的认识活动。 科学技术评价既是科学共同体和科学技术发展内在的、
基本的学术评价机制，也是科学技术管理的工具，是对科学 技术活动进行预测、规划、决策、管理、监督的手段。
3
一、引 言
20世纪以来，人类的科学技术活动进入“大科学”时代， 科学技术在国家经济、社会和安全中的战略地位日益凸现, 成为第一生产力。特别是二战以后，发展科学技术成为国家 战略和国家政策的重要方面。科技活动的文化属性和生产力 属性并重。政府对科学技术活动的宏观引导与组织管理不断 加强，对科学研究的投入不断加大。科学技术评价不仅限于 科学共同体内部的学术评价机制，也成为政府制定科技政策、 配置科技资源和实施有效管理的重要行为（手段）。
17
2、NIH科学评估中心（CSR）
（1）设立三大综合评审组（临床与人口基础研究、生理系统、 分子和细胞机理）和100多个专业评审组
集中受理申请 将项目申请分配给CSR的各专业评审组或研究所的学科评审
组 将潜在的资助项目申请分配给NIH的研究所 100多个专业评审组对提交的项目申请的科学创新价值进行