准确性的指标灵敏度与特异度等共38页文档
定性检测质量指标与性能评估
定性检测性能评估方法
中南大学湘雅医院检验科
胡丽涛
2013年6月21日
定性试验（qualitative tests）：只提供两种结果的检测方法（阴性或阳性，是或否，正常或异常）。
根据临床用途可分为：
筛查试验（screening tests）：用来检查被分析物在全部人群或者部分人口亚群中的存在情况，如梅毒血清学试验。
诊断试验（diagnostic tests）：通常用于特殊的疾病或者临床有怀疑的情况，比如各种微生物的培养用于感染的诊断。
确诊试验（confirmatory tests）：对于筛查实验和诊断实验结果进一步确认的实验，荧光梅毒螺旋体抗体吸附试验。
●分析敏感性analytical sensitivity/测定下限detection limits
可重复检测出待测物质的最低浓度水平。
●临床敏感性clinical sensitivity
当特定疾病存在时，患者标本检测结果为阳性或超过正常值范围的比率。
●分析特异性analytical specificity
一种检测方法仅对样本中的待测物质反应，而与其它物质不发生反应的能力。
●临床特异性clinical specificity
当特定疾病不存在时，患者标本检测结果为阴性或者在正常值范围内的比率。
●C
50处于或接近临界值的分析物浓度，多次重复检测此浓度的单一样本时将获得
50%的阳性结果和50%的阴性结果。
●C
5检测浓度为C
5
的分析物时将产生5%的阳性结果。用浓度
5
的样本进行重复
性检测时，将持续得到阴性结果。
●C
95 检测浓度为C
95
的分析物时将分别产生95%的阳性结果。用浓度>C
检测系统的精密度和正确度性能评价方法
CLSI EP9-A2正确度性能评价方 案
❖ CLSI EP9-A2：Method Comparison and Bias Estimation Using Patient Samples; Approved Guideline - Second Edition
❖ 用途：主要用于厂商和实验方法的开发者的精密度评价
❖ 实验方案：2×2×20
仪器熟悉阶段
方法熟悉阶段（正式实验开始）
EP5-A2精密度试验流程图
初步的精密度评价
后续实验阶段（正式实验）
数据收集与整理
统计学处理，得出结论
EP5-A2 精密度性能评价实验基本要求和注意事 项
❖ 人员：熟悉检测系统的检测、校准和保养程序及评价方案。
批内离群值检验：采用初步精密度评价实验获得的标准差作 为批内重复测量结果的离群值的判断标准。如果重复测量的 变异绝对值超出了5.5倍标准差，则该批数据被拒绝。
不精密度的计算
不精密度的计算
临床可接受性能判断
临床可接受性能判断
精密度评价实验举例（高值血糖，240mg/dL）
工作日 日期
批次1
批次2
致。
❖ sr 〉r ，需进行差异的显著性检验 .
估计批内精密度的可接受性评价
5%错误拒绝率下试验的水平数对应的2 分布值
诊断试验准确性的Meta分析
诊断试验准确性的Meta分析
一、问题与数据
某肿瘤科大夫希望了解CT对某肿瘤的诊断准确性，他查阅了很多国内外文献，发现文献中各研究样本量都偏小，且对该方法的准确性评价结果不一，因此想通过Meta分析的方法对其准确性进行较为可靠的评价。通过对相关文献的检索，共获得以下数据：
表1 部分研究数据
变量意义及赋值情况如下：
表2 变量意义与赋值情况
二、对问题分析要进行诊断试验准确性的Meta分析，至少应当收集真阳性、假阳性、假阴性与真
阴性的人数。然而，Meta分析并不是简单的进行数据的加权合并，因为各研究结果不同的原因通常不仅仅是因为样本量小造成的结果不稳定，还可能是因为研究的设计、执行等多方面的因素存在差异所导致，因此Meta分析的一个重要的任务便是对可能的因素进行探讨，找出文献结果不一的原因，这也是证据评价的过程。
表1中，是否是前瞻性研究（predesign）、金标准是否是同一个（samemth）、是否详细描述待评价试验（index）、是否详细描述金标准（reftest）和是否详细描述待评价人群（subject）是本研究中研究者认为可能的影响因素。
三、Stata分析
1. 安装分析包
一般认为，诊断试验准确性的数据异质性比较明显，因此推荐使用随机效应模型进行分析。Stata中有专门针对诊断试验准确性Meta分析的分析包midas和metandi，均是采用两水平的随机效应模型进行分析。由于后者不支持meta回归功能，因此本文仅介绍midas包的使用。
在command窗口，依次输入以下命令，安装必需的分析包：
实验室管理考试重点
方法学评价：是通过实验途径测定分析方法的技术性能，并评价其是否可接受，其目的在于明确该方法是否具有足够的方法性能来说明检测系统的可靠性及可以满足临床需求，检测系统的性能评价是方法学评价的具体实施，具体内容包括：准确度、精密度、检测限、生物参考区间和可报告范围。
POCT：即床旁检验，指在患者医疗现场对任何医疗措施所需进行的检验，在患者身边或病房对其包括血、尿或其他样本在内的标本所进行的检验，这类检验方式可由实验室人员或非实验室人员完成。参考方法：是准确度与精密度已经充分证实，干扰因素少，系统误差与重复测定的随机误差相比可以忽略不计，有适当的灵敏度、特异度及较宽的分析范围。主要用于鉴定常规方法，也用于二级参考物和质控血清的定值。
室间质量评价（EQA）：又称外部质量评价，是多家实验室分析同一样本，由外部独立机构收集和反馈实验室测定结果，并以此评价实验室对某类或某些检验项目的检验能力，因此室间质量评价又称能力验证（PT）
室内质量控制（IQC）：临床实验室的质量控制，往往按照一定频率定性或定量地检测稳定样品中的某种或某些成分，并将测定值标在符合一定统计学规律的质控图上，运用设定的判断限或质控规则对控制图上的测定值进行评估，以此推测同批次患者标本的检测质量是否在控，这一过程就是室内质量控制。
实验室工作人员，采用一定的方法和步骤，连续评价实验室工作的可靠程度，诣在监控本实验室常规工作的精密度，提高本实验室常规工作中批内，批间样本检测的一致性，以确定实验结果是否可靠，可否发出报告的一项工作。
正确度：指多次测量结果的均值与被测量真值之间的一致程度，用偏倚表达。表示系统误差。
肿瘤标志物及其临床意义详解演示文稿
第14页，共38页。
常用的肿瘤标志物
甲胎蛋白（AFP）
当肝细胞或生殖腺胚胎组织发生癌变时，AFP特异性升高
临床意义
n 原发性肝癌血清AFP增高，阳性率可达70%-90% n 用于诊断肝癌：①AFP＞ 500ng/ml持续4周以上；②AFP ＞ 200ng/ml持续8周以
上；③AFP由低浓度逐渐 升高不降 n AFP动态观察可用于病情监测、治疗预后和疗效评价
ü存在于体液特别是血液中易于检测
第11页，共38页。
三、肿瘤标志物的临床意义
第12页，共38页。
肿瘤标志的临床价值
l 原发性肿瘤的发现和探测；
l 肿瘤高危人群的普查； l 肿瘤复发和转移的监测；
l 肿瘤的鉴别诊断；
l 肿瘤治疗的疗效观察；
l 预后判断； l 肿瘤免疫显像； l 肿瘤标志靶向治疗。
世界卫生组织作出的最新权威性结论： 癌症患者如果能早期发现，治愈率可达80％以上
第6页，共38页。
二、肿瘤标志物概述
肿瘤标志物（tumor marker，TM ）定义
在恶性肿瘤发生/发展过程中，由肿瘤细胞合成分泌或由机体对 肿瘤细胞反应而产生和/或升高的、可预示肿瘤存在的一类物质 。
存在于血液、体液、细胞或组织中。
第18页，共38页。
糖类抗原125（CA125）
诊断试验临床效能评价
一、确定研究 (yánjiū)目标
① 评价(píngjià)的试验是什么？ ② 试验观察的内容？ ③ 该研究的临床实际意义？ ④ 这是一个新试验,还是已应用成熟试验？ ⑤ 已有类似的或可以与之竞争的试验？ ⑥ 在研究期间，该试验可能会发生的变化？
第九页，共76页。
二、目标(mùbiāo)患者 总体
第三十九页，共76页。
六、临床应用评价(píngjià)指标综合分析
• 特异度、灵敏度，两个最重要(zhòngyào)的指标 • 其他评价指标都可用它们来推导
• 缺少这两个指标，该检验项目无法进行评价
• 在撰写和评价论文，在引进或评价一项新检验项 目，这两个指标必须具备可供分析的资料
第三页，共76页。
二、内容 (nèiróng)
1.真实性（validity） ——反映患病实际情况(qíngkuàng)
的程度。
真实 性
灵敏度（ sensitivity）
特异度（ specificity）
第四页，共76页。
二、内容 (nèiróng)
2.可靠性（reliability） ——一项诊断试验在完全相
第二十一页，共76页。
3.漏诊(lòu zhěn)率和误诊率
与灵敏度和特异度互补的指标是漏诊率和误诊率 漏诊率（β），又称假阴性率（False negative
流行病学原理和方法MicrosoftWord文档
流行病学原理和方法MicrosoftWord文档
重点一：
流行病学的基本原则1.群体原则2.现场原则3.对比原则4.代表性原则重点二：
疾病分布常用的测量指标
疾病的分布：时间、空间和人间，疾病的三间分布。（联想记忆：天
时地利人和）
1.发病率：指在一定期间内（一般为1年）、特定人群中某病新病例
出现的频率。重点是新病例。
2.罹患率：人群新病例发生频率的指标；适用于小范围、短时间内疾
病频率的测量。（新病例、短时间暴发、病情相对严重而且比较急）
3.患病率：指某特定时间内，总人口中现患某病者（包括新、旧病例）所占的比例。（新+旧病例）
（横断面调查-现况研究-患病率研究）
4.续发率：又称二代发病率，指某传染病易感接触者中，在最短潜伏
期与最长潜伏期之间发病的人数占接触者总数的百分率。（评价传染病的
传染性）。5.感染率6.病残率7.死亡率8.病死率
9.存活率（顾名思义即可）重点三：疾病流行强度
4.暴发：指在一个局部地区或集体单位中，短时间内，突然出现大量相同患者的现象。（小范围，短时间，罹患率）重点四：
常用流行病学研究方法
观察法：包括描述流行病学和分析流行病学（无干预措施）；
实验法，也称实验流行病学（干预措施）数理法，也称理论流行病学。重点五：现况研究：
横断面研究/患病率研究可以采用两种方法：1.普查2.抽样调查抽样
调查
按一定的比例从总体中随机抽取有代表性的一部分人（样本）进行调查，以样本统计量估计总体参数，称调查。
样本代表性是抽样调查能否成功的关键。
随机抽样和样本含量适当是保证样本代表性的两个基本原则。
诊断实验评估指标-灵敏度（sensitivity）特异度（specificity）准确度（。。。
诊断实验评估指标-灵敏度（sensitivity）特异度（specificity）
准确度（。。。
在临床上经常会⽤到诊断试验的⼿段，⽤于疾病诊断、病⼈随访或疗效监测等。判断某⼀诊断试验的结果是否真实、可靠，是否具有实⽤性，从⽽确定合理的医疗决策。
⼀项诊断试验需要具备能正确的鉴别患病和未患病的能⼒，以反映患病实际情况的准确程度，这其中涉及到⼏个重要概念：灵敏度（sensitivity）、特异度（specificity）、准确度（accuracy）、阳性预测值以及阴性预测值。
希望⼤家能够准确理解以上5个重要指标，并通过以下模拟试题练习加深理解。
模拟试题：⼀项胃癌临床诊断试验受试⼈数是200⼈，实际情况为50⼈患胃癌，150⼈正常；诊断结果显⽰，有160⼈正常，40⼈诊断为胃癌，⽽这40⼈当中实则仅有35⼈真正患癌。请根据数据判断该项诊断试验的灵敏度（sensitivity）、特异度（specificity）、准确度（accuracy）、阳性预测值以及阴性预测值。
其实，这5个指标在也适⽤于评价我们call变异所⽤的软件效能。⽐如：全基因组测序进⾏SNV检测时使⽤了2个软件： GATK和MuTect，共检出1300个变异，其中GATK检出1000个SNV，MuTect检出1100个SNV，共有SNV是800个；经过⽬标区域测序进⾏验证后，发现共有的800个突变均得到验证， GATK特有的SNV有80个得到验证，MuTect特有的SNV有150个得到验证（假定经过⽬标区域测序验证成功的SNV即为真实存在的突变）。请计算MuTect软件的以上5个指标。
诊断试验评价课件
患者 62 8
70
非患者 162 348 510
合计 224 356 580
14
灵敏度
灵敏度的95%可信区间为： Se ±uα/2 SE(Se) =0.8857 ±1.96×0.0380= (0.8112 ，0.9602)
15
特异度
灵敏度的95%可信区间为： Sp ±uα/2 SE(Sp) =0.6824 ±1.96×0.0206= (0.6420 ，0.7228)
似然比
v似然比(Likelihood Ratio ，LR)为两个概率之比， 包括阳性似然比LR(+)和阴性似然比LR(-) 。
v 阳性似然比表示患者诊断结果阳性的概率是非患 者诊断结果阳性的概率的多少倍。
v 阳性似然比实为真阳性率与假阳性率之比，阳性 似然比越大，诊断准确度越高。
29
似然比
v阴性似然比表示患者诊断结果阴性的概率是 非患者诊断结果阴性的概率的多少倍。
46
47
两样本ROC曲线下面积的比较
48
两样本ROC曲线下面积的比较
vH0 ：A1=A2 v α=0.05
H1 ：A1≠A2
v U<1.96 ，P>0.05，按照α=0.05的水准，不拒绝 H0 ，不能认为两检测技术的ROC曲线下面积 的差异有统计学意义。
49
诊断试验评价的注意事项
乙肝、HIV、梅毒检测技术2016913
HIV试验和检测
第 30 页
HIV检测：抗体检测 一个人感染了HIV病毒后，体内将产生特异性抗体 对抗HIV病毒* HIV抗体通常在感染后4 – 6周出现，但也有时也会 在感染后3个月才出现 从感染HIV病毒到出现特异的HIV抗体的一段时期 称为“窗口期”
标准的HIV诊断检测是识别HIV抗体* *
* IgM抗体反映近期感染，可帮助鉴别婴儿先天梅毒，但我国尚不能广泛开展
第 23 页
梅毒暴露婴儿的评估
梅毒暴露婴儿： 婴儿RPR检测 婴儿RPR检测不能使用脐带血，因其易被母体血液 污染，从而出现假阳性结果 检查先天梅毒临床表现： 非免疫性水肿、黄疸、肝脾大、鼻炎、皮疹、末端肢体假性麻痹 对可疑病灶或体液进行暗视野显微镜检查
苍白螺旋体 密螺旋体属
苍白亚种 地方亚种 极细亚种
梅毒 地方性梅毒 雅司病
品他螺旋体
品他病
第4 页
检方法 RPR/TRUST
TPPA ELISA POCT检测
梅毒血清学试验基本实验室设备
血清 √ √ √ √
检测样本类型 血浆 √ √ √ √
全血
必要设备 水平旋转仪
震荡仪
酶标仪、洗板机
√
源自文库
无需特殊设备
第5 页
筛查时间
梅毒
检测方法
• 非梅毒螺旋体抗原血清学试验（RPR或TRUST检测） • 梅毒螺旋体抗原血清学试验（TPPA、ELISA或梅毒快速检测）
医学统计实验设计概述PPT学习教案
例：观察赖氨酸对儿童生长发育的影响，给实验组的 儿童课间加餐含赖氨酸的面包，对照组儿童课间加 食不含赖氨酸的面包。处理因素是赖氨酸，实验因 素“面包量”是非处理因素，两组的非处理因素是 相同的。
第23页/共58页
对照的原则－－对照的形式
3、标准对照：不设立专门的对 照组，而是用现有的标准值或 正常值做对照。在临床试验中 常以某疗法为标准对照组，这 种对照应注意标准组必须是代 表当时水平的疗法，切Baidu Nhomakorabea以降
所谓随机化(randomization)，就是每一 个受试对象都有同等的机会被分配到任何一 组中，分组的结果不受人为因素的干扰和影 响。实验设计中必须遵循随机化的原则，这 是保证各组受试对象的非处理因素均衡一致 的重要手段。
随机分配的方法：抽签、抓阄、随机数字表、 随机排列表。
第34页/共58页
医学统计实验设计概述
会计学
1
过氧化值检测 方法学验证
过氧化值检测方法学验证
全文共四篇示例，供读者参考
第一篇示例：
过氧化值是衡量食品油脂氧化程度的指标之一，它可以反映食品
油脂的新鲜程度和稳定性。通过检测食品油脂中的过氧化值，可以及
时发现氧化过程的情况，保证食品质量和安全。
过氧化值的检测方法有很多种，其中比较常用的是采用碘量法和
自动滴定法。碘量法是一种传统的检测方法，通过碘气和溴化钾溶液
作用，可以将不饱和脂肪酸中的双键氧化成碘化物，再通过滴定的方
法测定溶液中的碘量，从而计算出过氧化值。而自动滴定法则是比较
先进的方法，可以利用自动滴定仪进行精确的滴定，提高了检测结果
的准确性和可靠性。
为了验证过氧化值检测的准确性和可靠性，需要进行一些方法学
验证。首先是方法的选择和比较，可以通过对比不同方法的检测结果，评估各种方法的优缺点和适用范围。其次是准确性和精密度的验证，
可以通过标准品的测定和重复性实验来考察检测方法的准确性和重现性。还可以进行不同实验室之间的比对，验证不同实验室使用同一方
法所得结果的一致性。
在进行过氧化值检测时，还需要注意一些影响结果准确性的因素。首先是食品样品的处理和保存，需要避免氧化过程的发生，保持食品
样品的新鲜度和完整性。其次是实验条件的控制，包括温度、湿度、
光照等因素的影响，需要严格控制实验条件，确保检测结果的准确性。还需要注意实验操作的规范性和技术人员的培训，提高实验的可重复
性和可靠性。
过氧化值检测方法的验证是保证食品质量和安全的重要环节，只
有通过科学的方法学验证，才能得到准确可靠的检测结果，为食品生
产和检验提供可靠的数据支持。希望越来越多的食品生产企业和检验