元分析方法及其应用

元分析的局限性以及质量控制
各种偏倚及其控制 收集到的资料中缺少元分析所需的数据 关于各独立研究的质量评价问题 “桔子与苹果问题”及其控制 异质性的处理问题 元分析本身的质量控制问题
各种偏倚及其控制
偏倚类型
汇集偏倚
选择偏倚
纳入标准偏倚
选择者偏倚
研究内偏倚
提取者偏倚
研究质量评分偏倚
解
全面搜集发表和未发表的研究
元分析及其应用
1
涵义
2
元分析的目的和意义
3
案例——国内旅游竞争力评价
4
元分析的局限性以及质量控制
5
参考文献
涵义
资料综合
data synthesis
总观评述 overview
再分析
整
汇
合
分 元分析
总 分
析 Meta 析
analysis
集成分析 二次分析
资料汇总 data
pooling
定量综合 quantitative
式,找出异质性的来源,并不轻易剔除异质性文献。 ❖ 常用方法是按不同研究结果进行分层分析,如研究 设计、数据来源及被试来源等。
Biblioteka Baidu
元分析本身的质量控制问题
(1)要有合理的研究设计和文献检索策略,保证文献的查全率 和查准率,进行严格的文献筛选和质量评价. (2)选择恰当的统计学方法进行分析; (3)注意控制各种偏倚; (4)进行异质性检验,以保证合并分析的可比性和分析结果的 可靠性; (5)对结果进行敏感性分析,并予以合理的解释和应用。
指标类型分析
❖按照指标的性质
❖硬指标和软指标 ❖硬指标与软指标所使用的频率分别为45%和 55%
指标内容分析
一级指标分析
二 、 三 级 指 标 分 析
测评方法分析
指标数据收集方法
统计年鉴 统计年鉴+问卷调查
问卷调查
37.3% 36.4% 26.4%
只有 7篇文献进行了版面数据的分析，其余的文献都是采 取截面数据进行静态评价和分析。
地理类专业 6%
❖从作者身份进行分析 ,第一或第二作者是教授或副教授的文 献数量为 47篇 ,占 43 . 5% ❖从作者所属单位进行分析 ,“985工程 ” 或“211工程 ” 院校 教师发表的论文占 35% ❖以上统计结果显示 ,旅游竞争力评价研究得到国内旅游管理 领域学者的普遍关注
旅游竞争力评价
synthesis
定量评论
quantitative review
元分析是应用特定的设计和统计学方法对以往的研 究结果进行整体的和系统的定性与定量分析。 它是回顾性和观察性的,是概括以往研究结果的一种 方法,具有全面、系统和定量的特点,可以用以对以 前的具有不同研究设计的和不同时期收集到的资料 进行整合。
评价指标 体系的构 建评价
存在评价指标的选取理路依据不足、 指标含义不明确、 评价体系 结构笼杂、 指标重叠等问题。
应综合运用旅游学、 地理学、 管理学、 经济学等相关学科的理论 知识以便为评价体系的构建建立坚实的理论基础。
测评方法 评价
目前国内研究成果还是停留在浅层的定量分析层面上 ,研究方法较 为单一化和集中化 ，且重复性研究较多。 多数学者运用截面数据，很少采用面板数据。
❖研究内容及对象分析 ❖评价指标体系分析 ❖测评方法分析 ❖总结
研究内容及对象分析
研究内容分析
研究对象分析
评价指标体系分析
指标数量与层次分析 ❖根据评价指标的数量
❖单指标评价和多指标评价 ❖在笔者所获取文献中 ,除了 1篇文献是采用单指标
评价外 ,其余文献均采用多指标评价 ❖目前学术界对旅游竞争力的研究主要采用多因素综
经济类 29%
自然科学类 23%
社会科学类 22.1%
高校学报 18.3%
管理类 6.8%
按期刊级别，中文社会科学引文索引（CSSCI）的来源期刊和 中文核心期刊上的论文数量分别为11篇和43篇， 占期刊论文总 数的41.2%
(3)研究人员背景分析
按作者专业统计
旅游管理专业 83%
经济与工商管理专业 9%
等不可避免的问题
不受数量限制 来处理大量文献
节省研究费用
案例——国内旅游竞争力评价
文献的获取与整体分析
国内出版的旅游专著
中国学术期刊 全文数据库
文献获取
中国优秀硕博士学 位论文全文数据库
整体分析
（1）论文发表时间分析
（2）期刊类型和等级分析
153篇文献，14篇学位论文和8篇专著,131篇期刊论文按 类型划分如下：
“桔子与苹果问题”及其控制
对元分析的最尖锐的批评之一就是认为其不应该 将研究对象、结果测量指标、实验设计以及测量方 式等不同的各项研究所得的结果结合在一起,因为这 就好比将桔子与苹果拿来比较,是很难得出正确结论 的。目前主要是通过进行异质性检验来缓解这个问 题。
异质性的处理问题
❖ 资料间存在异质性时,是否进行或怎样进行元分析, 还是个没有完全解决的问题。 ❖ 目前还是通过进一步核实资料的可靠性与处理方
合法 ,通过建立指标体系来评价旅游竞争力
❖ 研究人员采用多层次评价体系评价旅游竞争力。他们构 建的评价体系的层次数量从 1层到 4层不等 (还有部分文 献没有构建评价体系 )。
1层评价体系 2层评价体系 3层评价体系 4层评价体系
10篇
71篇
46篇
1篇
构建多层次指标体系对旅游竞争力进行测评是目前国内旅游 竞争力评价研究的主流方式。
目的及意义
传统文献 综述的不足
定性分析为主， 难以得出定量结论
未考虑研究质量、 样本大小等因素的影响
文献数量多， 难以得出一般结论
不同作者 得出不同结论
文献使用 情况不明
结论具有主观性
提高统计 分析功效
元分析的作用
揭示分析 同类研究分歧
有助于 新研究问题
和新实验
定量估计， 全面总结
研究发表偏倚 （publication bias）
指标权重赋值方法
❖科学的赋权方法保证了测评对象得到合理的评价。 ❖目前国内研究人员主要采用专家调查法 (德尔菲法 )对
指标进行赋权 (占 50.4% )
旅游竞争力量化测评方法
总结
研究内容
及对象评 价
研究内容主要还是以城市旅游竞争力为主，跨城市的区域旅游竞争 力的研究相对较少 。
当前旅游竞争力评价研究成果应用在东部发达旅游城市的较多,对西 部地区的关注相对不足。
关于各独立研究的质量评价问题
❖ 如果把高质量和低质量的研究合并在一起,并给予相同的权值， 就会带来结果的偏倚甚至是错误,因为低质量的研究在结果估计 时就可能已经存在错误和无法纠正的偏倚了,因此包含低质量的 研究会增加结果变量的变异度和偏倚,增大犯第一或第二类错误 的概率。
❖ 有很多学者都推荐使用各种质量评估办法,并建议将质量评分作 为权值以调整结果。但质量评分又增加了主观标准,不同的评价 者可能会得出不同的结果,同时可能严重地混淆异质性来源。
决
偏
倚
的
方
绘制漏斗图（funnel plot）
案
运用失效安全系数 秩和相关检验
（ failsafeN,Nf） 线性回归法
有关统计方法
敏感性分析
收集到的资料中缺少元分析所需的数据
只收集到摘要 文献对最初的研究结果进行的是有选择的报道 文献对原始数据描述不完整。这就使进入元分析 的文献大大减少,从而降低了元分析的综合能力