定性检测质量指标与性能评估--胡丽涛

灵敏度的95%得分可信区间是[84.3%，97.4%]。
诊断明确时定性方法性能评价（举例）
检测方法的特异度：
特异度=100%(39/41)=95.1% 计算95%得分可信区间： Q1=2×39+3.84=81.84
Q2=1.96 =6.632
Q3=2×41+7.68=129.68 100%（Q1-Q2）/Q3=100%（81.84-6.632）/89.68=83.9%
C50 处于或接近临界值的分析物浓度，多次重复检测此浓度的单一样本时将获得 50%的阳性结果和50%的阴性结果。 C5 检测浓度为C5的分析物时将产生5%的阳性结果。用浓度<C5的样本进行重复 性检测时，将持续得到阴性结果。 C95 检测浓度为C95的分析物时将分别产生95%的阳性结果。用浓度>C95的样本 进行重复性检测时，将持续得到阳性结果。
合计
61
41
102
诊断明确时定性方法性能评价（举例）
比较方法性能参数
灵敏度(sens)=100%[A/(A+C)]=100%[54/61]=88.5% 特异度(spec)=100%[D/(B+D)]=100%[34/41]=82.9%
患病率=100%(A+C)/N=100%(61/102)=59.8%
9
临床检验定性测定精密度 1.不精密度的来源 • 样本状态及处理； • 样本、试剂的运输和贮存条件； • 操作人员； • 环境条件； • 仪器、试剂或检测系统； • 检测程序（加样、温育、洗涤、结果判读时间等）
10
临床检验定性测定精密度 2.不精密度的评估方法 定性测定的精密度（只提供两种检测结果的定性检测） 可以COI（cut-off Index）或S/CO比值报告结果的精密度评 价。
46
诊断明确时定性方法性能评价（举例）
检测方法的灵敏度：
灵敏度=100%（57/61）=93.4% 计算95%得分可信区间： Q1=2 ×57+3.84=117.84 Q2=1.96 =8.496
Q3=2×61+7.68=129.68
100%（Q1-Q2）/Q3=100%（117.84-8.496）/129.68=84.3% 100%（Q1+Q2）/Q3=100%（117.84+8.496）/129.68=97.4%
4
评估前准备——仪器设备的培训和熟悉
1.厂家工程师对科室相应工作人员进行培训 2.培训过程中要求操作人员实际操作
3.培ห้องสมุดไป่ตู้完成之后科室应该组织相应的考核及评估 4.若考核不合格，应进行再培训再评估
5
评估前准备——仪器设备的培训和熟悉 样本的收集、处理和贮存 试剂的接收、处理和贮存 正确的实验操作 建立并正确执行常规质量控制程序
阳性预测值(PVP)=100%[A/(A+B)]=100%(54/61)=88.5% 阴性预测值(PVN)=100%[D/(C+D)]=100%(34/41)=82.9%
临床定性检验定性测定精密度 定性测定精密度的要求（只提供两种结果的定性检测） • C5-C95浓度区间（亦即“灰区”）≤C50±20%。
具体工作
阴阳性质控对照
接近临界值浓度的分析物 接近C50浓度分析物的重复性试验
13
如何获得C50？
检测试剂或系统说明书可能会注明分析物的临界浓度，实 验室人员需要通过重复性研究对临界点（C50）进行验证。 如果临界浓度未知，则可以将阳性样本进行一系列稀释， 然后进行重复检测以确定能够获得50%阳性和50%阴性结果 的那个稀释度。这一稀释度的分析物浓度即为临界点 （C50）。
合理地解释结果
具体时间并没有严格的要求，可视仪器复杂程度而定 。
6
评估前准备——评估材料和方法
1. 质控品：
选择合适的质控品 按照厂家提供的试剂盒说明进行使用 不同方法间比较，需采用同一质控物
评估前准备——评估材料和方法
2. 患者标本的采集及处理
标本的采集要严格按照操作规程进行 强调尽量采用新鲜标本
定性检测性能评估方法
中南大学湘雅医院 检验科 胡丽涛 2014年6月19日
一. 概念和术语
主要 内容
二. 评估前准备
三. 定性检测质量指标的内容
四. 具体评估内容
2
概念和术语
定性试验（qualitative tests）：此处的定性测定仅限
于只有两种检测结果（例如：阳性/阴性、存在/不存在、有 反应的/无反应的）的方法，不包括结果报告为阴性、+1、 +2、+3、+4或滴度的半定量方法。
诊断明确时定性方法性能评价（举例）
试验方法和金标准检测102可能感染幽门螺旋菌的患者的 血清，所得结果见列表。
表1 检测方法与诊断明确时的2x2列链表
金标准
试验方法 阳性 阳性 57 阴性 2 合 59 计
阴性
合计
4
61
39
41
43
102
诊断明确时定性方法性能评价（举例）
试验方法性能参数
灵敏度(sens)=100%[A/(A+C)]=100%[57/61]=93.4% 特异度(spec)=100%[D/(B+D)]=100%[39/41]=95.1% 患病率=100%(A+C)/N=100%(61/102)=59.8% 阳性预测值(PVP)=100%[A/(A+B)]=100%(57/59)=96.6% 阴性预测值(PVN)=100%[D/(C+D)]=100%(39/43)=90.7% 效能=100%[(A+D/N)]=100%(96/102)=94.1%
以COI（cut-off Index）或S/CO比值报告结果的精密度评价
批间精密度的评估 • 试剂和校准品。可使用使用不同批号的试剂和校准物。 • 评估方法。三个不同浓度（参考试剂盒说明书）的样本，在10天以上 时间内进行至少20次重复检测，计算所得S/CO值的均值和SD，计算 批间CV%。 • 质量控制。检验时应同时至少测一个质控品。当质控品结果超出规定 的失控限，不论实验结果是否满意都应弃去不用，重新进行试验以取 得实验数据。要保存所有的质控数据和失控处理记录。 批间精密度的要求 • 批间变异系数应小于15%，同时应不大于试剂盒说明书指出的批间 CV%的20%。
18
C50浓度分析物是否正确？
序号 结果 结果分析（40次测试） 结论（C50）
=<13/40(32.5%) 1 阳性结果 >=27/40(67.5%) 不正确
2
（14~26）/40 阳性结果 （35%~65%）
正确
19
不同C50重复检测次数与检出阳性数的关系
20
候选方法的C50±20%浓度范围是否包含 了C5~C95区间？
临床检验定性测定精密度——报告内容
•批内标准差； •批内变异系数； •批间标准差； •批间变异系数； •实验进行的工作天数；
•重复检测数和总检测数。
临床定性测定准确度评估
特定的定性测定系统或试剂的准确度以与临床诊断、金标 准方法和经过验证确认血清样本盘的检测比较来评价，常 以敏感性（包括临床敏感性）/特异性（包括临床特异性） 和阳性符合率/阴性符合率来表示。
31
临床定性测定准确度评估
样本含量 ：至少 50/50阴阳性标本。
实验持续时间 ：10-20天
数据的收集：制定实验记录表格收集数据。
不一致结果的解释
结合临床诊断
32
1.诊断明确时定性方法准确度评价
计算灵敏度和特异性。
下表为检测方法与明确诊断比较的2×2列联表， 表中列出了定性检测的结果与患者的明确诊断结果
关注标本采集的时间
8
临床定性检测的分析中质量控制指标
• 精密度：包括定性测定的精密度和可以COI（cut-off Index） 或S/CO比值报告结果的精密度评价两类。 • 准确度：常与临床诊断、金标准方法和经过验证确认血清 样本盘的检测比较来评价，常以敏感性（包括临床敏感性） /特异性（包括临床特异性）和阳性符合率/阴性符合率来 表示。 • 分析敏感性(即最低检出下限)。 • 对转化血清盘的检测能力。 • 分析特异性（交叉反应）。 • 干扰因素。
。
33
灵敏度、特异性、预测值及检验效能的计算方法
预估灵敏度（sens）=100%[A/(A+C)] 预估特异性（spec）=100%[B/(B+D)] 患病率（prev）=100%[(A+C)/N] 阳性预测值（PVP）=100%[A/(A+B)] 阴性预测值（PVN）=100%[D/(C+D)] 检验效能=100%[(A+D)/N]
14
不精密度曲线
15
两种不同方法的不精密度曲线比较
16
接近C50浓度分析物的精密度试验
目的：
（1）确定检测方法的临界值浓度（验证）； （2）确定该临界值±20%浓度范围是否位包含了 C5-C95区间。
17
精密度试验——步骤
标本准备（临界点浓度及其±20%）
重复测定次数（40次）
计算阴阳性率
数据分析
100%（Q1+Q2）/Q3=100%（81.84+6.632）/89.68=98.7%
特异度的95%得分可信区间是[84.6%, 98.7%]。
诊断明确时定性方法性能评价（举例）
表2 可比较方法与诊断明确的2x2列链表
金标准
比较方法 阳性 阴性 阳性 57 7 阴性 7 34 合 计 61 41
34
上述方法的缺点:
不清楚所选择的样本其是否具有代表性或代表性很差，因
此计算灵敏度和特异性就很不现实，此时需要通过计算置
信限（可信区间）来量化随机取样导致的影响。
35
计算灵敏度和特异性的可信区间
36
当试验方法的灵敏度和特异性都优于可比较方法时 ，还需要进行联合灵敏度/特异性统计，视其有差 异进一步判断哪种方法的效能更高。 通常采用试验方法、可比较方法和临床诊断三组两
3
概念和术语
分析敏感性 analytical sensitivity/测定下限detection limits 可重复检测出待测物质的最低浓度水平。 临床敏感性 clinical sensitivity 当特定疾病存在时，患者标本检测结果为阳性或超过正常值范围的比率。 分析特异性 analytical specificity 一种检测方法仅对样本中的待测物质反应，而与其它物质不发生反应的能力。 临床特异性 clinical specificity 当特定疾病不存在时，患者标本检测结果为阴性或者在正常值范围内的比率。
批内精密度是指严格的相似条件下，所得到的最佳的精密度； 批间精密度指在同一实验室，由同一（组）操作员在同一仪器上，使用同一 方法和同种、同一批号试剂，在一段时间内(一般为一个月或20个工作日)对同一 检测样本（常用质控品）测量结果的精密度。
以COI（cut-off Index）或S/CO比值报告结果的精密度评价
批内精密度的评估 • 试剂和校准品：可使用不同批号的试剂和校准物。 • 评估方法：三个不同浓度（参考试剂盒说明书）的样本，在一个测试 批内重复进行至少20个检测，计算所得S/CO值的均值和SD，计算批 内CV%。 • 质量控制：检验时应同时至少测一个质控品。当质控品结果超出规定 的失控限，不论实验结果是否满意都应弃去不用，重新进行试验以取 得实验数据。要保存所有的质控数据和失控处理记录。 批内精密度的要求 • 批内变异系数应<10%，同时应不大于试剂盒说明书声明的批内CV%的 10%。
两比较的方式报告。
37
38
计算检测（可比较）方法灵敏度
39
灵敏度差异的95%可信区间计算公式：
计算参数
40
灵敏度差异的95%可信区间计算公式：
计算参数
41
计算检测（可比较）方法特异性
特异性差值=
特异性差异的95%可信区间计算公式：
计算参数
43
特异性差异的95%可信区间计算公式：
计算参数
21
候选方法的C50±20%浓度范围是否包含 了C5-C95区间？
22
24
以COI（cut-off Index）或S/CO比值报告结果的精密度评价 有些定性免疫测定，如ELISA、CLIA等，样本的测定结 果可以COI（cut-off Index）或S/CO比值来表示，通过计算 批内和批间变异来进行精密度评价。
根据临床用途可分为：
筛查试验（screening tests）：用来检查被分析物在全部人群或者
部分人口亚群中的存在情况，如梅毒血清学试验。 诊断试验（diagnostic tests）：通常用于特殊的疾病或者临床有怀 疑的情况，比如各种微生物的培养用于感染的诊断。 确诊试验（confirmatory tests）：对于筛查实验和诊断实验结果 进一步确认的实验，荧光梅毒螺旋体抗体吸附试验。