数据质量评估测算简易模板
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
总部经分数据质量评估测算方法
序列 Sheet页标题 指标说明页面 1 QEvaluation_Indicators 简写 功能描述
QEIN
质量评估指标ຫໍສະໝຸດ 测算类页面 2 3 4 5 QEvaluation_Result IEntities_Col_Quality KIndicators_Run_Quality PRoc_Run_Quality QERE IECQ KIRQ PRRQ 测试结果包含指标与实体的评估测算的结果 每个实体的涉及列的测算值 关键指标对应的存储过程的质量 存储过程的执行质量
填报类页面 6 7 8 9 10 11 KIndicators_List KILI 关键指标列表 指标与接口层的关系 实体的数据标准 实体对应的规则执行结果 指标与过程的关系 存储过程的执行的日志
KIndicators_IEntities_RelaKIER IEntities_Data_Standards IEDS IEntities_Check_Result KIndiactors_Proc_Rela PRoc_Run_Log IECR KIPR PRRL
数据质量评估测算方法模板列表
数据来源 数据质量评估的指标范围，主要体现数据质量评估工作涉及到 的那些内容
依据IEntities_Col_Quality、KPI_Proc_Quality两类计算数 据统计出来。 计算表，依据IEntities_CK_Result的稽核结果以及指标的重 省分、指标编码、指标名称、接口系统、接口名、字段名 要度计算出来分省到接口系统的字段的质量情况 、重要度、质量评分 计算表，依据指标与过程关系计算出指标所对应过程执行情况 省分、指标编码、指标名称、运行质量 计算表，依据存储过程需要执行的次数占总执行次数的比 省分、存储过程、运行质量
关键性指标--来源于系统 指标的重要度---需要手工设置 依据血缘关系的梳理--字段级（指标与字段的关系） 依据接口规范、血缘关系的梳理--字段级所形成的数据标准
指标编码、指标名称、重要度 指标编码、指标名称、接口系统、接口名、字段名 接口系统、接口名、字段名、重要度
数据来源于系统稽核问题列表，根据实体选取所有的稽核规则 帐期、省分、接口系统、接口名、字段名、运行结果 问题 数据来源于血缘的梳理（指标与过程的关系） 明细数据来源于系统的运行日志，目前只考虑了运行次数。 指标编码、指标名称、存储过程 省分、存储过程、帐期
1、指标重要度的指定，这个是需要手工录入的，具体的参照因子还需要讨论确定。 2、接口实体的每个字段存在对应多个规则，在测算的时候是否要考虑规则的重要度---目前是取所有规则的最小 3、可能存在指标对应的过程以及实体字段的关系一样的情况，这种情况下可能导致的指标的质量是一样的（比如 如果要区分的话，需要从维度的质量下手，目前还没有比较好的方法进行区分。 4、稽核规则形成的结果---无法直接形成运行结果数据，目前是手工计算的，这个需要讨论一下如何直接形成可
要讨论确定。 规则的重要度---目前是取所有规则的最小值 况下可能导致的指标的质量是一样的（比如2G业务网上用户、3G网上用户就可能一样，只是对应的数据不同） 比较好的方法进行区分。 计算的，这个需要讨论一下如何直接形成可用的结果。
序列 Sheet页标题 指标说明页面 1 QEvaluation_Indicators 简写 功能描述
QEIN
质量评估指标ຫໍສະໝຸດ 测算类页面 2 3 4 5 QEvaluation_Result IEntities_Col_Quality KIndicators_Run_Quality PRoc_Run_Quality QERE IECQ KIRQ PRRQ 测试结果包含指标与实体的评估测算的结果 每个实体的涉及列的测算值 关键指标对应的存储过程的质量 存储过程的执行质量
填报类页面 6 7 8 9 10 11 KIndicators_List KILI 关键指标列表 指标与接口层的关系 实体的数据标准 实体对应的规则执行结果 指标与过程的关系 存储过程的执行的日志
KIndicators_IEntities_RelaKIER IEntities_Data_Standards IEDS IEntities_Check_Result KIndiactors_Proc_Rela PRoc_Run_Log IECR KIPR PRRL
数据质量评估测算方法模板列表
数据来源 数据质量评估的指标范围，主要体现数据质量评估工作涉及到 的那些内容
依据IEntities_Col_Quality、KPI_Proc_Quality两类计算数 据统计出来。 计算表，依据IEntities_CK_Result的稽核结果以及指标的重 省分、指标编码、指标名称、接口系统、接口名、字段名 要度计算出来分省到接口系统的字段的质量情况 、重要度、质量评分 计算表，依据指标与过程关系计算出指标所对应过程执行情况 省分、指标编码、指标名称、运行质量 计算表，依据存储过程需要执行的次数占总执行次数的比 省分、存储过程、运行质量
关键性指标--来源于系统 指标的重要度---需要手工设置 依据血缘关系的梳理--字段级（指标与字段的关系） 依据接口规范、血缘关系的梳理--字段级所形成的数据标准
指标编码、指标名称、重要度 指标编码、指标名称、接口系统、接口名、字段名 接口系统、接口名、字段名、重要度
数据来源于系统稽核问题列表，根据实体选取所有的稽核规则 帐期、省分、接口系统、接口名、字段名、运行结果 问题 数据来源于血缘的梳理（指标与过程的关系） 明细数据来源于系统的运行日志，目前只考虑了运行次数。 指标编码、指标名称、存储过程 省分、存储过程、帐期
1、指标重要度的指定，这个是需要手工录入的，具体的参照因子还需要讨论确定。 2、接口实体的每个字段存在对应多个规则，在测算的时候是否要考虑规则的重要度---目前是取所有规则的最小 3、可能存在指标对应的过程以及实体字段的关系一样的情况，这种情况下可能导致的指标的质量是一样的（比如 如果要区分的话，需要从维度的质量下手，目前还没有比较好的方法进行区分。 4、稽核规则形成的结果---无法直接形成运行结果数据，目前是手工计算的，这个需要讨论一下如何直接形成可
要讨论确定。 规则的重要度---目前是取所有规则的最小值 况下可能导致的指标的质量是一样的（比如2G业务网上用户、3G网上用户就可能一样，只是对应的数据不同） 比较好的方法进行区分。 计算的，这个需要讨论一下如何直接形成可用的结果。