数据质量工作汇报ppt课件
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
彩铃 与综合
江西电信企业信息化部 8
提升数据一致性——业务流程
省 公 司 信 息 化 部 牵 头 、 推 动 工 作 完 成
江西电信企业信息化部 9
提升数据一致性——数据修改工单流程
需求人提需求 ❖ 以清理彩铃平台数据为例描述工单流转过程。
接口人送审批
接口人判断是否送审批，送哪个部门审批。
网支审批
主管部门对工单内容进行审批。
接口人派单
验 收
彩铃平台修改数据
不
通
接口人确认
过
需求人验收
接口人根据需求内容将工单派发给相关系统或平台。
结束工单
江西电信企业信息化部 10
提升数据一致性——相关文件
中国电信江西公司
数据一致性清理流程
为了进一步提高公司 IT 系统间数据一致性，达到“数据应用能
规范化的流程管理保证了数据一致性清理 工作有条不紊的进行。
在执行计划
已完成计划
数据比对管控
数据同步管控
准
质量分析报告
确
性
稽核结果报告
异常数据报告
数据修正考核
数据同步报告
任务配置定义
规则比对稽核 命令脚本稽核
存储过程稽核
数据采集
数据预处理
完
解析、过滤
整
采集 数据 数据
校验、规整 预处理
性 计划 提取 校验
合并
规则
数据比对
比对 方式
比对 周期
数据同步
同步 差异 同步 规则 确认 处理
考核。分公司每月应针对存量差异进行清理修改，针对新量差异进行 问题核查并提出解决建议，省公司根据这两部分的工作情况综合对分 公司进行评价。
2、 清理流程 1）每月 1 日各业务平台数据源、CRM 及计费数据源按既定格式 准时把源文件送达指定 ftp 服务器，具体文件格式、时间点、FTP 地址见附件 1。 2）每月 4 日 18 点前，完成核心资料一致性比对工作，封网期间 可不进行相应数据比对任务；5 日 18 点前下发差异清单给分公 司，通知分公司数据质量负责同志开始核查。 3）分公司在 10 日前将数据协查需求提交省网支、网优、业务中 心、IT 中心，省公司各单位要在 15 日前配合分公司完成差异数
提升数据一致性——关键指标
❖ 根据数据的重要程度以及流程中可能存在的问题定 位出影响数据一致性的关键指标。
与计费
产品 相关 附属 产品
主产品 属性
主产品
销售品 目标 定价
来显 彩铃
城乡标识 目标 用户属性 产品标志 付费模式
主产品
与平台目标
固网与平台
移动与平台
窄带 宽带
速率 彩铃 预付费
与的后付费 与的预付费 与平台鉴权数据 与平台的
力提升”TOP 项目的考核目标，特对数据清理流程进行进一步的明确： 一、工作方式与流程 1、工作方式 根据“数据应用能力提升”TOP 项目的要求和工作现状，省信息
化部对数据清理的流程进行优化调整，将每月通报所有差异改为每月 通报存量差异1，但是年中（6 月），年底（12 月）按照所有差异进行
比对结果处理方案中明确了对差异结果数 据的清理方法，有效指导实际操作。
数据预处理
过
程
管 控
数据比对
采集计划管理
采集计划管理是把采集请求的信息如采集的范围、 时间等进行管理。
数据提取
数据提取是根据采集的范围以及时间向或网元业务 平台提取数据。有批量采集和单个采集。
文件FTP采集
实时接口查询
人工取数输入
数据同步
数据校验
数据校验是对从或网元业务平台提取出来的数据进 行文件名称、文件大小、采集点等完整性的校验。
1 存量差异指上月比对出来的、但在当月清单中还存在的差异，新量差异指在上月清单中不存在、但在当 月清单中存在的差异。对存量差异进行通报能够体现出分公司数据清理的进度，对分公司新量差异的原因 核查能够避免影响数据一致性问题的持续出现，从根本上保证数据质量，避免前清后乱。
数据比对结果处理方案
按照集团公司关于开展移动业务用户数据比对工作的文件要求，结合本省前期开展的数据比对工 作的进展情况，特制订我省移动业务用户数据比对处理方案。 一、工作范围
本次用户数据比对工作，主要针对基础语音业务、无线宽带、短信、彩信、智能网、彩铃六大类 业务。在此基础之上，逐步开展其他业务的用户数据的比对工作。 二、工作原则
鉴于数据比对工作涉及到对用户数据的修正，一旦出现差错，会直接影响用户业务的使用，对用 户感知产生不好的影响，因此我省计划采用先试点、再推广的原则推进该项工作。 三、工作目标
江西电信企业信息化部 15
数据预处理
稽核计划管理
数据采集
稽 核
数据预处理
过
程
用户管理
日志管理
系统管理
监控告警
统计分析
江西电信企业信息化部 1133
稽核计划管理
稽核计划管理
数据采集
稽 核
数据预处理
过
程
管 控
数据比对
பைடு நூலகம்数据同步
一致性 准确性 完整性
江西电信企业信息化部 14
数据采集
数据采集根据采集请求，向系统或网元提取原始数据,数据 稽核计划管理 的完整性校验。
数据采集
稽 核
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 6
数据管理的五大内容
❖ 将端到端收入稽核融入江西电信数据管理，极大提升工作的 推进力度
围绕“五性”开展工作，构筑数据应用完整体系。
▪数据完整性 ▪数据准确性
✓按照集团规范，对CRM系统、计费等系统的信 息完整性进行分析和整改。
✓使用系统功能对关键客户信息进行稽核并发分公 司进行清理。
▪ 数据及时性 ▪ 数据一致性 ▪数据安全性
✓ 在各主要系统开展数据提速工作。
✓根据比对结果处理方案对每月比对出的差异数据 进行清理，提高各系统数据一致性。
✓制定工号权限管理细则，对工号进行审核和清理 ✓进行操作日志自查，完善系统日志功能
江西电信企业信息化部 7
提高移动业务一次自动开通成功率指标，指标逐步达到并超过99％。 四、工作内容 1、基础语音业务
江西电信企业信息化部 11
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 12
功能框架
企业数据质量管理系统
一
稽核计划管理
致
性
创建计划
待审核计划
稽核过程管控
数据采集管控
数据预处理管控
数据质量工作汇报
江西电信企业信息化部
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 2
数据质量历程
❖ 数据质量管理历程(计费主产 品一致性)
❖ 年月 ❖ 年月 ❖ 年月 ❖ 年月 ❖ 年月
江西电信企业信息化部 3
企业数据管理
江西电信企业信息化部 4
数据考核
江西电信企业信息化部 5
江西电信企业信息化部 8
提升数据一致性——业务流程
省 公 司 信 息 化 部 牵 头 、 推 动 工 作 完 成
江西电信企业信息化部 9
提升数据一致性——数据修改工单流程
需求人提需求 ❖ 以清理彩铃平台数据为例描述工单流转过程。
接口人送审批
接口人判断是否送审批，送哪个部门审批。
网支审批
主管部门对工单内容进行审批。
接口人派单
验 收
彩铃平台修改数据
不
通
接口人确认
过
需求人验收
接口人根据需求内容将工单派发给相关系统或平台。
结束工单
江西电信企业信息化部 10
提升数据一致性——相关文件
中国电信江西公司
数据一致性清理流程
为了进一步提高公司 IT 系统间数据一致性，达到“数据应用能
规范化的流程管理保证了数据一致性清理 工作有条不紊的进行。
在执行计划
已完成计划
数据比对管控
数据同步管控
准
质量分析报告
确
性
稽核结果报告
异常数据报告
数据修正考核
数据同步报告
任务配置定义
规则比对稽核 命令脚本稽核
存储过程稽核
数据采集
数据预处理
完
解析、过滤
整
采集 数据 数据
校验、规整 预处理
性 计划 提取 校验
合并
规则
数据比对
比对 方式
比对 周期
数据同步
同步 差异 同步 规则 确认 处理
考核。分公司每月应针对存量差异进行清理修改，针对新量差异进行 问题核查并提出解决建议，省公司根据这两部分的工作情况综合对分 公司进行评价。
2、 清理流程 1）每月 1 日各业务平台数据源、CRM 及计费数据源按既定格式 准时把源文件送达指定 ftp 服务器，具体文件格式、时间点、FTP 地址见附件 1。 2）每月 4 日 18 点前，完成核心资料一致性比对工作，封网期间 可不进行相应数据比对任务；5 日 18 点前下发差异清单给分公 司，通知分公司数据质量负责同志开始核查。 3）分公司在 10 日前将数据协查需求提交省网支、网优、业务中 心、IT 中心，省公司各单位要在 15 日前配合分公司完成差异数
提升数据一致性——关键指标
❖ 根据数据的重要程度以及流程中可能存在的问题定 位出影响数据一致性的关键指标。
与计费
产品 相关 附属 产品
主产品 属性
主产品
销售品 目标 定价
来显 彩铃
城乡标识 目标 用户属性 产品标志 付费模式
主产品
与平台目标
固网与平台
移动与平台
窄带 宽带
速率 彩铃 预付费
与的后付费 与的预付费 与平台鉴权数据 与平台的
力提升”TOP 项目的考核目标，特对数据清理流程进行进一步的明确： 一、工作方式与流程 1、工作方式 根据“数据应用能力提升”TOP 项目的要求和工作现状，省信息
化部对数据清理的流程进行优化调整，将每月通报所有差异改为每月 通报存量差异1，但是年中（6 月），年底（12 月）按照所有差异进行
比对结果处理方案中明确了对差异结果数 据的清理方法，有效指导实际操作。
数据预处理
过
程
管 控
数据比对
采集计划管理
采集计划管理是把采集请求的信息如采集的范围、 时间等进行管理。
数据提取
数据提取是根据采集的范围以及时间向或网元业务 平台提取数据。有批量采集和单个采集。
文件FTP采集
实时接口查询
人工取数输入
数据同步
数据校验
数据校验是对从或网元业务平台提取出来的数据进 行文件名称、文件大小、采集点等完整性的校验。
1 存量差异指上月比对出来的、但在当月清单中还存在的差异，新量差异指在上月清单中不存在、但在当 月清单中存在的差异。对存量差异进行通报能够体现出分公司数据清理的进度，对分公司新量差异的原因 核查能够避免影响数据一致性问题的持续出现，从根本上保证数据质量，避免前清后乱。
数据比对结果处理方案
按照集团公司关于开展移动业务用户数据比对工作的文件要求，结合本省前期开展的数据比对工 作的进展情况，特制订我省移动业务用户数据比对处理方案。 一、工作范围
本次用户数据比对工作，主要针对基础语音业务、无线宽带、短信、彩信、智能网、彩铃六大类 业务。在此基础之上，逐步开展其他业务的用户数据的比对工作。 二、工作原则
鉴于数据比对工作涉及到对用户数据的修正，一旦出现差错，会直接影响用户业务的使用，对用 户感知产生不好的影响，因此我省计划采用先试点、再推广的原则推进该项工作。 三、工作目标
江西电信企业信息化部 15
数据预处理
稽核计划管理
数据采集
稽 核
数据预处理
过
程
用户管理
日志管理
系统管理
监控告警
统计分析
江西电信企业信息化部 1133
稽核计划管理
稽核计划管理
数据采集
稽 核
数据预处理
过
程
管 控
数据比对
பைடு நூலகம்数据同步
一致性 准确性 完整性
江西电信企业信息化部 14
数据采集
数据采集根据采集请求，向系统或网元提取原始数据,数据 稽核计划管理 的完整性校验。
数据采集
稽 核
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 6
数据管理的五大内容
❖ 将端到端收入稽核融入江西电信数据管理，极大提升工作的 推进力度
围绕“五性”开展工作，构筑数据应用完整体系。
▪数据完整性 ▪数据准确性
✓按照集团规范，对CRM系统、计费等系统的信 息完整性进行分析和整改。
✓使用系统功能对关键客户信息进行稽核并发分公 司进行清理。
▪ 数据及时性 ▪ 数据一致性 ▪数据安全性
✓ 在各主要系统开展数据提速工作。
✓根据比对结果处理方案对每月比对出的差异数据 进行清理，提高各系统数据一致性。
✓制定工号权限管理细则，对工号进行审核和清理 ✓进行操作日志自查，完善系统日志功能
江西电信企业信息化部 7
提高移动业务一次自动开通成功率指标，指标逐步达到并超过99％。 四、工作内容 1、基础语音业务
江西电信企业信息化部 11
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 12
功能框架
企业数据质量管理系统
一
稽核计划管理
致
性
创建计划
待审核计划
稽核过程管控
数据采集管控
数据预处理管控
数据质量工作汇报
江西电信企业信息化部
目录
数据组织 数据管理 系统支撑 运营效果
经验体会
江西电信企业信息化部 2
数据质量历程
❖ 数据质量管理历程(计费主产 品一致性)
❖ 年月 ❖ 年月 ❖ 年月 ❖ 年月 ❖ 年月
江西电信企业信息化部 3
企业数据管理
江西电信企业信息化部 4
数据考核
江西电信企业信息化部 5