04第四章-检验项目的临床效能评价

返回章目录
第三节 检验项目临床效能评价方法
一、敏感度和特异度 二、预测值和似然比 三、ROC曲线分析 四、临床应用评价指标的综合分析
第27页，共62页。
第三节 检验项目临床效能评价方法
•检验项目临床效能评价指标： ①敏感度
②特异度 ③预测值(含阳性预测值及阴性预测值) ④诊断指数
⑤诊断效率(含阳性似然比及阴性似然比)
（三）适用性的评价
•仪器设备、试剂的费用多少、来源、操作难度及效 率、效益、效能、不良反应、对患者的危险性、患者 的依从性
•首先要评价该项目是否有利于疾病的诊断、治疗和预 防策略，得到最佳的健康服务的结果
•其次考虑经济效益。若某检验项目虽然技术和诊断性能好 ，具有好的临床效能，但所需费用昂贵而患者难于接受， 也降低了其实用性
第四章 检验项目的临床效能评价
第1页，共62页。
第四章 检验项目的临床效能评价
第一节 检验项目临床效能评价内容和意义 第二节 检验项目临床效能评价的研究设计
第三节 检验项目临床效能评价方法 第四节 提高检验项目效率的方法
第2页，共62页。
第一节 检验项目临床效能评价内容和意义
对一个检验项目特别是新引进的检验项目在临床应用时，除 方法学的评价外，还需从临床应用价值进行评价，即对该检验项 目在临床诊断和治疗决策中能起多大的作用进行评价。
第30页，共62页。
一、敏感度和特异度
2．评价指标的计算 • 敏感度又称真阳性率(true positive rate，TPR) • 是诊断试验能将实际有病的人正确地判为患者
的能力，即患者被判为阳性的概率 • 反映检出患者的能力，该值越大，漏诊病例(漏
诊率)越少
第31页，共62页。
一、敏感度和特异度
第22页，共62页。
返回节目录
三、金标准和评价指标
•金标准(gold standard)是指被公认的诊断疾病的最可靠 的方法，病理诊断常常被作为肿瘤诊断的金标准
•金标准能正确地区分受试者患病与否，若金标准选择 不妥，可能会造成错误分类，影响对该临床检验项目 的正确评价
第23页，共62页。
三、金标准和评价指标
第13页，共62页。
（二）临床应用意义的评价
１．有敏感度、特异度或阳性似然比的计算或提供了 运算的数据
• 敏感度、特异度是临床应用评价两个基本指标
•阳性似然比指的是真阳性与假阳性的比值 •该试验阳性时患该病与不患该病概率的比值，是敏感度、特 异度的综合指标 •注意：统计学上判断不能代替临床应用意义评价
第19页，共62页。
返回节目录
二、样本的总体和抽样计划
•研究的样本总体要考虑患者的分布特征
•人口统计学、症状体征、合并症以及疾病的阶段、程 度、部位等
•应包含不同临床机构或地理位置的患者
第20页，共62页。
二、样本的总体和抽样计划
• 用于评价的受试对象包括两组 • 即被金标准证实的患者作为病例组 • 金标准证实为未患该病的人作为对照组 • 对照组可以是健康者或其他疾病的患者
FN FP D
测定值
图4-3 实际的检验项目健康群体与患者群体分布
第35页，共62页。
一、敏感度和特异度
• 分界值的高低直接影响检验项目诊断性试验评价指 标
• 在这种情况下，一般是先初步确定几个分界值 • 分别计算真阳性、真阴性、假阳性、假阴性数值 • 进一步计算诊断灵敏度、诊断特异度等指标 • 最后根据早期诊断、疗效观察、流行病学调查等各2．分层似然比的计算
• 由于不同测定值，其敏感度、特异度是不同 • 做ROC曲线时，必定要做分层统计
第15页，共62页。
（三）适用性的评价
• 适用性的评价包括： ①该试验可否推广应用 ②患者的验前概率能否合理估算 ③验后概率是否对患者处理有帮助
第16页，共62页。
种不同目的确定分界值
第36页，共62页。
一、敏感度和特异度
4．尤登指数 • 尤登指数(Youden’s index)又称正确指数 • 是指灵敏度和特异度之和减去1 • 是综合评价真实性的指标，理想的试验应为l • 计算公式为：
尤登指数=(灵敏度+特异度)－1
第37页，共62页。
返回节目录
二、预测值和似然比
• 循证检验医学就是在大量可靠的临床应用资料和经 验的基础上,研究检验项目的临床应用价值
• 为临床诊断、疗效观察、病情转归提供最有效、最 实用、最经济的检验项目及最合理的组合
第7页，共62页。
（一）真实性的评价
1．被评价的试验和标准诊断法进行盲法对比研究 • 标准诊断法是指对某疾病诊断最可靠的方法，通
• 方法学评价及临床应用价值评价两个方面 • 遵循循证医学(evidence-based medicine，EBM)原则 • 循证医学的原则在检验医学中的应用，产生了循证
检验医学(evidence-based laboratory medicint,EBLM)
第6页，共62页。
二、检验项目临床应用证据评价原则
第9页，共62页。
（一）真实性的评价
2．研究对象的选择恰当 •首先是病例组，必须明确诊断，各型病例
早期、中期、晚期病例 治疗前、治疗后的病例
典型及不典型病例
•如选择偏倚，必然产生不正确的结论，如肿瘤标志物 的检测，仅选用住院晚期患者，诊断敏感度必定估计 偏高
第10页，共62页。
（一）真实性的评价
第17页，共62页。
返回章目录
第二节 检验项目临床效能评价研究设计
一、确定研究目标 二、样本的总体和抽样计划 三、金标准和评价指标 四、估算样本量和避免偏倚
第18页，共62页。
一、确定研究目标
①评价的项目 ②观察内容 ③该研究的临床实际意义 ④这是一个新项目、新应用成熟的项目
还是已应用成熟的项目 ⑤已有类似的或可以与之竞争的项目
2．研究对象的选择恰当 • 对照组一定要选经标准诊断法诊断为无该病患者 • 选择健康人作对照组，特异度的估计必然偏高 • 应选择无目标疾病病例，尤其选与目标疾病易病例 • 同时性别、年龄应与病例组相近 • 这样对该试验的评价才比较客观 • 按统计学要求，病例组、对照组样本量应30例以上
第11页，共62页。
当准备在本单位开展此检验项目时，尚需进行适用性评价， 即此项试验是否适用于本单位及有无条件或有无必要开展此项目 检查。
第3页，共62页。
第一节 检验项目临床效能评价的内容和意义
一、检验项目临床效能评价的意义 二、检验项目临床应用证据评价原则
第4页，共62页。
一、检验项目临床效能评价的意义
• 方法学评价是了解检验项目其技术性能，保证方法 准确可靠
1．似然比(LR) • 表达的是患某种疾病患者所测定不同结果范围
中 • 患该病与不患该病的比值 • 只有阳性、阴性结果时，一般分阳性似然比及
阴性似然比两种
第38页，共62页。
二、预测值和似然比
1．似然比(LR) • 阳性似然比(+LR):真阳性率(TPR)与假阳性率(FPR)
的比值 • 当就诊者的该诊断性试验结果为阳性时，其患病与
第28页，共62页。
一、敏感度和特异度
1．四格表的应用
四格表的应用
金标准
有病
无病
合计
诊断性 阳性 真阳性（a） 假阳性（b） a+b
试验 阴性 假阴性（c） 真阴性（d） c+d
合计
a+c
b+d
a+b+c+d
第29页，共62页。
一、敏感度和特异度
2．评价指标的计算
敏感度(sensitivity，SEN)=a／(a+c) 特异度(specificity，SPE)=d／(b+d) 阳性预测值=a／(a+b) 阴性预测值=d／(c+d) 诊断指数=敏感度+特异度 诊断效率(准确度)=(a+d)／(a+b+c+d)100% 阳性似然比=敏感度/(1－特异度) 阴性似然比=(1－敏感度)／特异度
2．评价指标的计算 • 特异度又称真阴性率(true negative rate，TNR) • 在金标准诊断为“无病”的例数中，某检验项
目结果为阴性的比例，真阴性例数越多，则特 异度越高，误诊病例(误诊率)越少
第32页，共62页。
一、敏感度和特异度
2．评价指标的计算 • 敏感度与特异度是评价一项检验项目真实性的两个
阴性预测值(negative predictive value,NPV)
不患病的机会比,显然阳性似然比的值越高 • 检验结果阳性时，诊断为某病的概率越大，该检测
方法确诊疾病的能力就越强。
• 阳性似然比=真阳性率/假阳性率=灵敏度/（1-特异度）
第39页，共62页。
二、预测值和似然比
1．似然比(LR) • 阴性似然比(-LR) :假阴性率(FNR)与真阴性率(TNR)的比值 • 当某就诊者的该诊断性试验结果为阴性时，其患病与不患病的
• 灵敏度和特异度是最基本的准确度指标 • 还有综合指标：准确度、尤登指数、似然比 • 考虑了患病率的预测值 • 直观明确的受试者工作特征曲线
第24页，共62页。
返回节目录
四、估算样本量和避免偏倚
• 新检验项目是否具有临床意义，必须与金标准的诊 断作对比
• 每个检验项目的敏感度及特异度均是稳定的指标
• 按照估计总体率样本含量估算方法，计算病例组样 本含量n1，对照组样本含量n2, △为容许误差
第25页，共62页。
四、估算样本量和避免偏倚
• 通过选择可靠的金标准 • 严格地选择研究对象 • 以盲法同步用被评价检验项目测试研究对象 • 以避免信息偏倚 • 同时应注意统计学的正确使用
第26页，共62页。
常又称“金标准” • 只有用标准诊断法才能正确的诊断患者是否患有
某病或不患有某病，也只有这样，才能正确评价 某一试验的临床价值
第8页，共62页。
（一）真实性的评价
1．被评价试验和标准诊断法进行盲法对比研究 • “金标准”通常指的是病原学检查、细胞学检查、
活体组织检查、尸检、特殊影像检查、长期随访结 果、临床专家共同制定被公认的最新诊断标准 • 检验方法，即使是公认的参考方法，在临床应用评 价时，不要简单看作为“金标准”，务必注意 • 与标准诊断法进行比对，为避免产生的偏倚，必须 采用盲法
（一）真实性的评价
3．参考区间的确定恰当
• 参考区间如是作者自己确定的，则要考察其正常 人群的选择、样本数量的确定、测定方法的可靠性 、数据处理等方面是否正确 • 如是应用文献资料，则应考虑是否适合本地区， 有无进行验证
第12页，共62页。
（一）真实性的评价
4．验证
• 某试验应用于另一组病例具有相同真实性 • 实际上就是考察其复现性 • 即对原评价进行验证的问题
• 必须了解该项目的临床应用效能 • 了解其对疾病的诊断和治疗的影响和价值 • 选择合理、可靠、有效的临床检验项目 • 正确判断检验结果对于某疾病诊断的贡献大小，从
而确定和执行合理的医疗决策
第5页，共62页。
返回节目录
二、检验项目临床应用证据评价原则
• 任何一个检验项目用于临床之前都必须经过科学的 评价
第21页，共62页。
二、样本的总体和抽样计划
抽样时需要考虑不同的研究阶段
1. 探索研究阶段 对每个患者采用回顾性抽样，其真实疾病 从试验记录和疾病登记资料得到 2. 挑战研究阶段 仔细考虑目标患者总体特征频谱，重点 考虑目标患者病理学、临床表现、合并症 3. 临床研究阶段 患者样本必须真实代表样本总体
基本指标 • 从理论上讲，一项理想的检验项目其灵敏度、特异
度最好均为100％ • 即假阳性与假阴性均为零，无一漏诊与误诊 • 实际上灵敏度和特异度是矛盾的统一体，随着诊断
分界点的变化而变化
第33页，共62页。
对照组
诊断界点
特异度 （1-α）
灵敏度 （1-β）
病例组
漏诊率(β)
误诊率(α)
图4-1灵敏度与特异度的关系
第34页，共62页。
一、敏感度和特异度
3．诊断分界
•当健康分布与患者分布没有重叠,取中间一点(D点)分界值假阳性 和假阴性均为O。这是一种理想模式，目前没有这样检验项目，许
多检验项目健康人与患者结果分布有交叉
正常人
频 数
患者
正常人
患者
频
TN
TP
数
D
测定值
图4-2 理想的检验项目健康群体与患者群体分布
机会比。 • 显然阴性似然比越小，则检验结果阴性时，患某病的概率越
小，该检测方法排除疾病的能力就越好
阴性似然比=假阴性率/真阴性率=（1-灵敏度）/特异度
第40页，共62页。
二、预测值和似然比
2.预测值(predictive value，PV) • 是表示试验能做出正确判断的概率，又分为： • 阳性预测值(positive predictive value,PPV)