ISO15189方法学评估概述
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
相互关系：LoB < LoD ≤ LoQ
α= 假阳性可能 β= 假阴性可能 总误差 < 检验目标
相 对 频 率
β
α
0 < LoB 报告 不能检出
LoB < LoD 能检出
LoD < LoQ 能检出
ISO15189 医学实验室--质量和能力专用要求提出：
因此，按照ISO1519要求需要对仪器进行检定或 校准，对性能参数进行评价或验证。
实验室设备5.3.4中提出的仪器每年校准和/或验 证要求，贝克曼库尔特公司一直在认真执行，如 瑞金医院、曙光医院、同济医院等，工程师或技 术支持人员都给予每年一次或两次的仪器校准。
定水平范围内，与“配套系统”比对， 每天用两种方法测定，至少测定 5 天（ EP9-A2）
性能参数证 实/验证和评 价 性能参数验 证/评价方案 举例 用户对厂家提供性能参数通过 实验进行证实/验证：精密度、 正确度、可报告范围、参考区 间 精密度 用户对系统做性能参数评价：精密度、 正确度、可报告范围、参考区间、灵敏 度、特异性 精密度
EP15-A2
实验方法②（ 《EP15-A2用户对精密度和准确度性能的核实》）
样本应模拟病人标本基质（质控品、校准品、已分析过的病人标本 及厂家用于精密度试验的物质都可使用）， 尽可能选择接近“医学决 定水平”的浓度或与厂商提供的浓度相近，也可选择可报告范围内的 上限或下限附近的浓度。 每天分析1个批次，2个浓度，每个浓度重复测定4次，连续5天 计算获得：批内精密度、总精密度 判断：与厂家声明比较，如大于厂家声明，则计算验证值，并与验 证值比较，≤验证值则核实了厂家声明，否则需要查找原因。
实验方法3：对定值参考物质检测 实验方案：通过检测定值的参考物质计算其回收率或者偏差来验证。 定值参考物来源：
a、用参考方法或决定方法定值的新鲜冰冻人血清，可从美国国家 标准局（NIST）和CAP获得
b、从能力比对试验（proficiency test，PT）中获得的参考物，如 CAP或卫生部临检中心提供的室间质量评价控制品？ c、厂家提供的正确度确认物或质控品，也可用不同批号的校准品
按照《CNAS-GL21：2008医学实验室质量和能 力认可准则在临床生物化学检验领域的指南》要 求：
配套分析系统
系统性质 溯源性 已获认可的检测系统 有溯源性 没有溯源性
非配套分析系统
用户自建的检测系统 用户需通过下述方法证明其自建系统的 每个项目与“配套系统”具有可比性 至少 40 例新鲜血样，均匀分布于医学决
三、分析测量范围性能验证
分析测量范围（analytical measurement range，AMR）： 指患者样本未经任何处理（稀释、浓缩或其它预处理），由检测系统直接测 量得到的可靠结果范围，在此范围内一系列不同样本分析物的测量值与其实 际浓度（真值）呈线性比例关系。AMR的评价有助于发现方法学原理、仪器、 校准品、试剂、操作程序、质量控制计划等很多方面的误差来源。
认可及认证
认可： 正式表明合格评定机构具备实施特定合格评 定工作的能力的第三方证明。
认证： 定义：由认证机构证明产品、服务、管理 认证只能向客户保证某组织处于有效的质量或 环境、安全管理体系，认证不适合实验室或检查 机构。
问题： 作为供应商我们如何提供ISO15189认可实验 室更好的服务？ 文件提供： 仪器校准及性能验证报告、仪器校 准SOP文件、仪器SOP文件、试剂SOP文件、试剂项 目溯源性及不确定度文件、仪器操作卡、仪器保养 卡 服务提供：提供技术支持咨询服务
样品：2 个浓度水平，最好使 用与厂家评价时浓度相似的样 品 实验天数：5 天以上 实验次数：每批每个水平作 4 次重复检测(EP15)
样品：基质与临床样品相似，2 个以上 浓度（参考医学决定水平） 实验天数：20 天以上 实验次数：每天 2 批，每批 2 个样品， 每个样品重复 2 次（EP5-A2）
EP6-A
c. EP6-A 实验方法：
EP6-A采用了二元一次直线回归、二次与三次的曲线回归统计处理， 以统计估计值与实际检测值的差异（统计误差）来判断，统计误差最 小的，为最适直线或曲线。而且在分析过程中和临床应用紧密结合， 设定临床允许偏差。当线性评价的结果从统计上认为非线性，但是若 采用线性方式处理病人结果，引入的误差不超过临床允许误差，可以 接受作为线性处理，称为临床可接受线性。
推荐使用2个浓度，尽可能选择与厂商声明性能相近的浓度或接近 “医学决定水平”浓度。 2×2×20方案：每天检测2批，每批间隔1小时，每批检测2次，共 进行20天，获得80个有效数据
通过计算可获得：批内、批间、天间、以及总不精密度
判断：进行离群值检验后，计算批内精密度和室内精密度与厂商提 供的性能参数比较，小于95%区间上限界值可接受。
实验方法2：方法学比对（CLSI EP15-A《用户对精密度和准确度性能
的核实实验－批准指南》） 实验方案：收集20份病人样本，其浓度应分布整个线性范围，不要 使用超过线性范围的样本； 分别用实验方法和比较方法检测，可1天 内全部测完，也可持续3－4天，每天测定5－7个样本。 统计判断：计算偏倚或百分比偏倚，如小于厂家声明，则核实了厂 家声明。
二、正确度性能验证 概念：
正确度（trueness）：完整的表述为测量正确度，是大批检测结果 的均值与真值的一致程度。用“偏倚（bias）”表示。 准确度（accuracy）：完整的表述为测量准确度，是检测结果与被 测量真值之间的一致程度。 用“偏离（deviation）”表示。
EP15-A2
EP9-A2
四、分析灵敏度性能验证
• 空白限（limit of blank，LoB）：在规定的可能性条件下，空白样品被 观察到的最大检测结果。
• 检出限（limit of detection，LoD）：样本中分析物的最小量，可以在 规定的可能性条件下予以检出，但可能还不能量化为一个确切的值。
• 定量检出限（limit of quantitation，LoQ）：在规定的可接受精密度和 正确度条件下（总误差符合准确度要求，临床应用可接受），能定量 测出样本中分析物的最小量。
ISO15189:方法学评估概述
李志付 2014-08-18
CNAS
中国合格评定国家认可委员会
(China National Accreditation Service for Conformity Assessment): 是根据《中华人民共和国认 证认可条例》的规定，由国家认证认可监督管理委 员会批准设立并授权的国家认可机构，统一负责对 认证机构、实验室和检查机构等相关机构的认可工 作。
实验方法1：方法学比对（CLSI EP9-A2《用患者样本进行方法学比对及偏倚评估）
实验方案：选取至少40份临床病人样本，其浓度应尽可能均匀分布于分析 测量范围内。分别用实验方法和比较方法（可以是参考方法，或厂家声明的 方法或者用户目前使用的常规方法，且其准确度已经得到确认）检测，每天 检测8个样本，每个样本重复测定2次，重复测定时样本的顺序应颠倒，共进 行5天。 统计判断：进行离群值检验和偏倚恒定评估，对x值合适范围进行检验，通 过线性回归计算预期偏倚，并与允许偏倚比较，判断是否可以接受。 接受标准：1/2 CLIA’88允许总误差（TAE），或者以生物学变异导出的分析质 量目标
基于国际要求的实验室认可
认可体系建立依据的标准： ISO/IEC17011《合格评定机构认可机构通用要求》 ILAC（国际实验室认可合作组织）、APLAC的要求（亚太实验室认可合 作组织）的要求
认可活动依据的标准: ISO/IEC17025《检测和校准实验室能力的通用要求》 ISO/IEC17020《各类检查机构能力的通用要求》 ISO/IEC指南43《标准物质生产者能力的通用要求》 ISO15189《医学实验室—质量和能力的具体要求》 ISO15190《医学实验室—安全要求》 ISO15195《医学参考测量实验室的要求》 ILAC、APLAC的相关要求
收集分析测量范围的低限（L）和高限（H）浓度水平分析物的病人样本，按 六个浓度操作为例：1L，0.8L+0.2H,0.6L+0.4H,0.4L+0.6H,0.2L+0.8H,1H。
b. 用线性验证品验证： 线性验证品来源：厂商、美国病理学家协会（CAP）、卫生部临床检验中心 分析物的浓度或活性涵盖分析物的可报告范围，6份样本，每份样本测定2次，并 计算平均值。（卫生部临床检验中心规定分析物的浓度或活性应涵盖分析物 的可报告范围，共5份样本，每份样本测定4次，并计算平均值） 线性1：采用多项式回归分析判断多项式拟合数据时线性还是非线性，当最适多 项式为线性拟合模型时，直接判断为线性。 线性2：当非线性多项式拟合数据点比线性好时，先看最适多项式与线性拟合之 间的平均线性偏差（ADL）,如果ADL小于方法学允许线性偏差时，可当线性对 待。
最大稀释度实验：
• 实验室可以从日常检测的样品中选择一到三个浓度较高的样品（接近 线性范围上限）。 • 用厂商提供的稀释液（即日常检测用的稀释液）按照厂商提供的可稀 释倍数来稀释。
• 然后检测稀释后的样品浓度，将检测值与预计值比较，以美国CLIA'88 能力验证计划的分析质量要求为标准判定结果是否可接受，如果在可 接受范围内，证明验证了该稀释倍数是可靠的。
检测系统分析性能验证
一、精密度性能验证 概念：指规定条件下所获得的独立测量结果的接近程度， 通过不精密度反映。常用标准差或变异系数来表示。 可分为批内精密度、批间精密度、日间精密度、室内精 密度（总精密度）。
EP5-A2
Байду номын сангаас
实验方法①： （ 《EP5-A2 定量测定方法的精密度性能评价》）
整个评价过程应使用同一批号的试剂和校准品。选用稳定的、血清 基质的质控品。
临床可报告范围（clinical reportable range，CRR）： 指定量检测项目向临床能报告的检测范围，患者样本可经稀释、浓缩或其它 预处理。对于CRR大于AMR的检验项目，需进行最大稀释度验证试验，并结合 临床决定水平和功能灵敏度来共同确定该项目的CRR。
实验方法： a. 平均斜率法 采用最小二乘法直线回归作统计分析方法。 直线回归方程：Y=b0 + b1X， b0：为Y轴截距，代表恒定系统误差，应尽可能接近0 b1：为斜率，代表比例系统误差，多有仪器校准时样本的加样量误差所引起 最好有5个或以上的系列浓度的样本，浓度范围遍布整个预期检测范围，各实 验样本内含分析物浓度可以呈等间距比例关系。
选择合适的高、低浓度水平混合血清，按比例配制成系列浓度的样本。 核实测量范围：5到7个样本，每个样本重复测2次； 改良方法：7到9个样本，每个样本重复测2到3次； 建立测量范围：9到11个样本，每个样本重复测2到4次。
临床可报告范围：
可报告范围 = 定量检测限 + 分析测量范围（线性范围） + 最大稀释倍数
检验程序中5.5.3C中提到性能参数：如线性、精 密度、以测量不确定度表示的准确性、检出限、 测量区间、测量真实性、分析灵敏度和分析特异 性。医院检验科室会按照不同的仪器来执行性能 参数的验证。同样，我们也会提供仪器校准后的 一份性能验证报告。
那么，不同仪器的校准和性能验证的方案也不尽 相同，但大的方向是一致的，即“ISO 15189的 5.5.2中明确要求：实验室应只用确认过的程序证 实所用检验程序适合其预期用途，证实应尽量充 分以满足给定用途或满足某领域应用的需求。实 验室应记录证实所得的结果及使用的程序。应评 估所选用方法和程序，在用于医学检验之前应证 实其可给出满意结果。实验室负责人或指定的人 员应在开始即对程序评审并定期评审。评审通常 每年一次。评审应文件化。”
生化仪器校准报告模板
按照《YYT 0654-2008 全自动 生化分析仪》行业标准进行 仪器硬件校准，并出具校准 合格报告。
免疫仪器校准报告模板
特定蛋白仪器校准报告模板
检测系统的性能验证内容
• • • • • • • 精密度 正确度 分析测量范围（线性范围） 可报告范围 参考区间 灵敏度 特异性
α= 假阳性可能 β= 假阴性可能 总误差 < 检验目标
相 对 频 率
β
α
0 < LoB 报告 不能检出
LoB < LoD 能检出
LoD < LoQ 能检出
ISO15189 医学实验室--质量和能力专用要求提出：
因此，按照ISO1519要求需要对仪器进行检定或 校准，对性能参数进行评价或验证。
实验室设备5.3.4中提出的仪器每年校准和/或验 证要求，贝克曼库尔特公司一直在认真执行，如 瑞金医院、曙光医院、同济医院等，工程师或技 术支持人员都给予每年一次或两次的仪器校准。
定水平范围内，与“配套系统”比对， 每天用两种方法测定，至少测定 5 天（ EP9-A2）
性能参数证 实/验证和评 价 性能参数验 证/评价方案 举例 用户对厂家提供性能参数通过 实验进行证实/验证：精密度、 正确度、可报告范围、参考区 间 精密度 用户对系统做性能参数评价：精密度、 正确度、可报告范围、参考区间、灵敏 度、特异性 精密度
EP15-A2
实验方法②（ 《EP15-A2用户对精密度和准确度性能的核实》）
样本应模拟病人标本基质（质控品、校准品、已分析过的病人标本 及厂家用于精密度试验的物质都可使用）， 尽可能选择接近“医学决 定水平”的浓度或与厂商提供的浓度相近，也可选择可报告范围内的 上限或下限附近的浓度。 每天分析1个批次，2个浓度，每个浓度重复测定4次，连续5天 计算获得：批内精密度、总精密度 判断：与厂家声明比较，如大于厂家声明，则计算验证值，并与验 证值比较，≤验证值则核实了厂家声明，否则需要查找原因。
实验方法3：对定值参考物质检测 实验方案：通过检测定值的参考物质计算其回收率或者偏差来验证。 定值参考物来源：
a、用参考方法或决定方法定值的新鲜冰冻人血清，可从美国国家 标准局（NIST）和CAP获得
b、从能力比对试验（proficiency test，PT）中获得的参考物，如 CAP或卫生部临检中心提供的室间质量评价控制品？ c、厂家提供的正确度确认物或质控品，也可用不同批号的校准品
按照《CNAS-GL21：2008医学实验室质量和能 力认可准则在临床生物化学检验领域的指南》要 求：
配套分析系统
系统性质 溯源性 已获认可的检测系统 有溯源性 没有溯源性
非配套分析系统
用户自建的检测系统 用户需通过下述方法证明其自建系统的 每个项目与“配套系统”具有可比性 至少 40 例新鲜血样，均匀分布于医学决
三、分析测量范围性能验证
分析测量范围（analytical measurement range，AMR）： 指患者样本未经任何处理（稀释、浓缩或其它预处理），由检测系统直接测 量得到的可靠结果范围，在此范围内一系列不同样本分析物的测量值与其实 际浓度（真值）呈线性比例关系。AMR的评价有助于发现方法学原理、仪器、 校准品、试剂、操作程序、质量控制计划等很多方面的误差来源。
认可及认证
认可： 正式表明合格评定机构具备实施特定合格评 定工作的能力的第三方证明。
认证： 定义：由认证机构证明产品、服务、管理 认证只能向客户保证某组织处于有效的质量或 环境、安全管理体系，认证不适合实验室或检查 机构。
问题： 作为供应商我们如何提供ISO15189认可实验 室更好的服务？ 文件提供： 仪器校准及性能验证报告、仪器校 准SOP文件、仪器SOP文件、试剂SOP文件、试剂项 目溯源性及不确定度文件、仪器操作卡、仪器保养 卡 服务提供：提供技术支持咨询服务
样品：2 个浓度水平，最好使 用与厂家评价时浓度相似的样 品 实验天数：5 天以上 实验次数：每批每个水平作 4 次重复检测(EP15)
样品：基质与临床样品相似，2 个以上 浓度（参考医学决定水平） 实验天数：20 天以上 实验次数：每天 2 批，每批 2 个样品， 每个样品重复 2 次（EP5-A2）
EP6-A
c. EP6-A 实验方法：
EP6-A采用了二元一次直线回归、二次与三次的曲线回归统计处理， 以统计估计值与实际检测值的差异（统计误差）来判断，统计误差最 小的，为最适直线或曲线。而且在分析过程中和临床应用紧密结合， 设定临床允许偏差。当线性评价的结果从统计上认为非线性，但是若 采用线性方式处理病人结果，引入的误差不超过临床允许误差，可以 接受作为线性处理，称为临床可接受线性。
推荐使用2个浓度，尽可能选择与厂商声明性能相近的浓度或接近 “医学决定水平”浓度。 2×2×20方案：每天检测2批，每批间隔1小时，每批检测2次，共 进行20天，获得80个有效数据
通过计算可获得：批内、批间、天间、以及总不精密度
判断：进行离群值检验后，计算批内精密度和室内精密度与厂商提 供的性能参数比较，小于95%区间上限界值可接受。
实验方法2：方法学比对（CLSI EP15-A《用户对精密度和准确度性能
的核实实验－批准指南》） 实验方案：收集20份病人样本，其浓度应分布整个线性范围，不要 使用超过线性范围的样本； 分别用实验方法和比较方法检测，可1天 内全部测完，也可持续3－4天，每天测定5－7个样本。 统计判断：计算偏倚或百分比偏倚，如小于厂家声明，则核实了厂 家声明。
二、正确度性能验证 概念：
正确度（trueness）：完整的表述为测量正确度，是大批检测结果 的均值与真值的一致程度。用“偏倚（bias）”表示。 准确度（accuracy）：完整的表述为测量准确度，是检测结果与被 测量真值之间的一致程度。 用“偏离（deviation）”表示。
EP15-A2
EP9-A2
四、分析灵敏度性能验证
• 空白限（limit of blank，LoB）：在规定的可能性条件下，空白样品被 观察到的最大检测结果。
• 检出限（limit of detection，LoD）：样本中分析物的最小量，可以在 规定的可能性条件下予以检出，但可能还不能量化为一个确切的值。
• 定量检出限（limit of quantitation，LoQ）：在规定的可接受精密度和 正确度条件下（总误差符合准确度要求，临床应用可接受），能定量 测出样本中分析物的最小量。
ISO15189:方法学评估概述
李志付 2014-08-18
CNAS
中国合格评定国家认可委员会
(China National Accreditation Service for Conformity Assessment): 是根据《中华人民共和国认 证认可条例》的规定，由国家认证认可监督管理委 员会批准设立并授权的国家认可机构，统一负责对 认证机构、实验室和检查机构等相关机构的认可工 作。
实验方法1：方法学比对（CLSI EP9-A2《用患者样本进行方法学比对及偏倚评估）
实验方案：选取至少40份临床病人样本，其浓度应尽可能均匀分布于分析 测量范围内。分别用实验方法和比较方法（可以是参考方法，或厂家声明的 方法或者用户目前使用的常规方法，且其准确度已经得到确认）检测，每天 检测8个样本，每个样本重复测定2次，重复测定时样本的顺序应颠倒，共进 行5天。 统计判断：进行离群值检验和偏倚恒定评估，对x值合适范围进行检验，通 过线性回归计算预期偏倚，并与允许偏倚比较，判断是否可以接受。 接受标准：1/2 CLIA’88允许总误差（TAE），或者以生物学变异导出的分析质 量目标
基于国际要求的实验室认可
认可体系建立依据的标准： ISO/IEC17011《合格评定机构认可机构通用要求》 ILAC（国际实验室认可合作组织）、APLAC的要求（亚太实验室认可合 作组织）的要求
认可活动依据的标准: ISO/IEC17025《检测和校准实验室能力的通用要求》 ISO/IEC17020《各类检查机构能力的通用要求》 ISO/IEC指南43《标准物质生产者能力的通用要求》 ISO15189《医学实验室—质量和能力的具体要求》 ISO15190《医学实验室—安全要求》 ISO15195《医学参考测量实验室的要求》 ILAC、APLAC的相关要求
收集分析测量范围的低限（L）和高限（H）浓度水平分析物的病人样本，按 六个浓度操作为例：1L，0.8L+0.2H,0.6L+0.4H,0.4L+0.6H,0.2L+0.8H,1H。
b. 用线性验证品验证： 线性验证品来源：厂商、美国病理学家协会（CAP）、卫生部临床检验中心 分析物的浓度或活性涵盖分析物的可报告范围，6份样本，每份样本测定2次，并 计算平均值。（卫生部临床检验中心规定分析物的浓度或活性应涵盖分析物 的可报告范围，共5份样本，每份样本测定4次，并计算平均值） 线性1：采用多项式回归分析判断多项式拟合数据时线性还是非线性，当最适多 项式为线性拟合模型时，直接判断为线性。 线性2：当非线性多项式拟合数据点比线性好时，先看最适多项式与线性拟合之 间的平均线性偏差（ADL）,如果ADL小于方法学允许线性偏差时，可当线性对 待。
最大稀释度实验：
• 实验室可以从日常检测的样品中选择一到三个浓度较高的样品（接近 线性范围上限）。 • 用厂商提供的稀释液（即日常检测用的稀释液）按照厂商提供的可稀 释倍数来稀释。
• 然后检测稀释后的样品浓度，将检测值与预计值比较，以美国CLIA'88 能力验证计划的分析质量要求为标准判定结果是否可接受，如果在可 接受范围内，证明验证了该稀释倍数是可靠的。
检测系统分析性能验证
一、精密度性能验证 概念：指规定条件下所获得的独立测量结果的接近程度， 通过不精密度反映。常用标准差或变异系数来表示。 可分为批内精密度、批间精密度、日间精密度、室内精 密度（总精密度）。
EP5-A2
Байду номын сангаас
实验方法①： （ 《EP5-A2 定量测定方法的精密度性能评价》）
整个评价过程应使用同一批号的试剂和校准品。选用稳定的、血清 基质的质控品。
临床可报告范围（clinical reportable range，CRR）： 指定量检测项目向临床能报告的检测范围，患者样本可经稀释、浓缩或其它 预处理。对于CRR大于AMR的检验项目，需进行最大稀释度验证试验，并结合 临床决定水平和功能灵敏度来共同确定该项目的CRR。
实验方法： a. 平均斜率法 采用最小二乘法直线回归作统计分析方法。 直线回归方程：Y=b0 + b1X， b0：为Y轴截距，代表恒定系统误差，应尽可能接近0 b1：为斜率，代表比例系统误差，多有仪器校准时样本的加样量误差所引起 最好有5个或以上的系列浓度的样本，浓度范围遍布整个预期检测范围，各实 验样本内含分析物浓度可以呈等间距比例关系。
选择合适的高、低浓度水平混合血清，按比例配制成系列浓度的样本。 核实测量范围：5到7个样本，每个样本重复测2次； 改良方法：7到9个样本，每个样本重复测2到3次； 建立测量范围：9到11个样本，每个样本重复测2到4次。
临床可报告范围：
可报告范围 = 定量检测限 + 分析测量范围（线性范围） + 最大稀释倍数
检验程序中5.5.3C中提到性能参数：如线性、精 密度、以测量不确定度表示的准确性、检出限、 测量区间、测量真实性、分析灵敏度和分析特异 性。医院检验科室会按照不同的仪器来执行性能 参数的验证。同样，我们也会提供仪器校准后的 一份性能验证报告。
那么，不同仪器的校准和性能验证的方案也不尽 相同，但大的方向是一致的，即“ISO 15189的 5.5.2中明确要求：实验室应只用确认过的程序证 实所用检验程序适合其预期用途，证实应尽量充 分以满足给定用途或满足某领域应用的需求。实 验室应记录证实所得的结果及使用的程序。应评 估所选用方法和程序，在用于医学检验之前应证 实其可给出满意结果。实验室负责人或指定的人 员应在开始即对程序评审并定期评审。评审通常 每年一次。评审应文件化。”
生化仪器校准报告模板
按照《YYT 0654-2008 全自动 生化分析仪》行业标准进行 仪器硬件校准，并出具校准 合格报告。
免疫仪器校准报告模板
特定蛋白仪器校准报告模板
检测系统的性能验证内容
• • • • • • • 精密度 正确度 分析测量范围（线性范围） 可报告范围 参考区间 灵敏度 特异性