电信行业元数据管理经验

接 口 文 件 说 明
维护管理
系统扩容 需求管理 系统实现 业务模型
数据质量 规则库
指 标 库
开发流程 项目管理 战略规划
业务模型 业务规则
元数据管理系统
www.carnation.com.cn
ODS元数据
信息地图
元数据承载平台在项目中的应用
战 略 初始阶段 构建阶段
项目立项 项目规划
项目管理 项目统筹
处理特性的根本不同 大量的历史数据 跨部门数据集成和使 用 业务人员直接使用数 据
www.carnation.com.cn
电信行业元数据系统建设目标
总目标：

实现企业级数据资产的统一视图，支持有效的数据资源管理 建设数据质量管理体系中符合CWM标准的元数据管理平台，为全网ODS/DW数据 质量管理体系的建设、扩充和数据交换打下基础，为数据质量管理提供支撑 完善企业ODS/DW系统基础设施，为数据仓库开发和管理奠定基础
高层领导 信息，kpi
数据集市 传 输 源系统2 ETL 源系 统3
简单专题 分析
数据集市 MetaOne 元数据 管理平台
数据仓 库
数据集市
生产系统
接口监控 变更分析
数据抽取/转 换 业务系统数据
抽 取 源系统1
清 洗
… .
转 换
ODS
装 载 源系统n
应用
知识反馈 质量监控 指标监控 程序监控
数据质量管理
元数据
系统设计、实现
系 管统 理运 维
管理、集中
知识间建立关系 统一保存便于使用
www.carnation.com.cn
元数据对系统的价值
元数据的应该贯穿整个系统的生命周期 – 规划、业务分析、设计、实现、维护、扩容… 元数据协助企业的规划、设计、业务分析“落地”，为IT系统系统开 发提供指导； 元数据提供IT实现过程的展示，在过程中消除系统、平台有关性， 为规划、设计、业务提供可理解的反馈信息； 元数据促进企业统计口径的一致; 元数据促进企业流程的规范化; 规
报表 业务分析
渠道 10000号 其他生产系统
挖掘 1 子系 I 统
基础应 用 OLAP分
+ 0
Product 系统 Store Month
大客 户分 析子
领导 信息 子系 统
专题分析
专题 分析 子系 统 元数据维护与
指标管理系统
系统调度 管理及监控
指标分析 主题分析
报表，
adhoc 数据集市
析
ODS
www.carnation.com.cn
产品逻辑结构
展现层
元数据展现：以Web方式展现元数据，能够让用户 随时随地的访问元数据；图形方式的展现能以更 易于理解的形式表现元数据的内容和依赖关系
处理层
应用处理层：系统应用逻辑控制
存储层
提供元数据的永久存储、元模型控制等功能，支持 以主流关系型数据库作为存储库，以面向对象的方 式构建存储模式、易于管理和扩展
www.carnation.com.cn
产品关键特性（二）
主流开放性
100%JAVA、J2EE模式构建、基于Web瘦客户端架构； 元数据存储于主流关系型数据库； 能识别和产生符合CWM国际规范的XML文件； 提供开放的调用接口，易于扩展和应用集成
强大的分析功能
图形化分析、多种分析功能，如血统分析可快速追溯数据来源 和加工过程；影响分析可掌握元数据之间的相互影响
划 、 设 计 业务分析
MetaData
系统设计、实现
www.carnation.com.cn
系 管统 理运 维
元数据承载平台在系统中的应用
CRM 计费
综合管理
DW
专业应用 C 1 营销活动设计/管理 (Campaign Mgmt) 1 23 12 1 w 数据 1 C 2 客户流失管理 (Churn Mgmt) 交叉销售设计/管理 (Campaign Mgmt)
www.carnation.com.cn
元数据全文检索

帮助用户在企业级海量信息库中快速检索并准确定位信息项 帮助用户解决“有哪些信息”、“这些信息在哪里”的问题
点击可以查看该指标的元数据具体信息 www.carnation.com.cn
业务流程管理的应用
图形化维护需求业务流程元数据的相互关系；
www.carnation.com.cn
需求变更影响评估
需求变更影响评估应用主要利用元数据支撑功能， 对经营分析维护开发过程提供需求变更评估方面 的IT化支撑，减少对人的依赖，在提高需求变更 评估效率的基础上，使需求变更的影响评估更全 面可靠。 需求变更影响评估应用应满足以下要求 :关联实 体影响评估 、受影响实体关联处理过程评估 、 维表变更影响评估 、灵活展现 、影响评估报告
电信元数据管理
（版本 V0.2）
2008年3月
石竹软件
www.carnation.com.cn
目录
元数据基本概念
电信行业 元数据管理 解决方案
MetaOne功能介绍
元数据建设与维护 元数据实施简介
www.carnation.com.cn
背景
知识保存介质：
规 划 、 设 计
业务分析
文档DOC、 EXCEL、语言、 程序、逻辑设计图、 ER图… 分散、孤立

帮助系统维护 1）降低维护成本：通过影响分析，掌握各程序、数据之间的关系和 相互影响，更好地明确系统变更所涉及的范围，避免遗漏； 2）帮助数据库管理：通过表重要程度分析，掌握使用率集中或及相 对沉寂的库表，帮助库表的重点监控、数据迁移及清理
www.carnation.com.cn
元数据在电信ODS/DW系统的重要性
www.carnation.com.cn
MetaOne元数据产品定位 —— 企业级元数据管理
综合管理
C 1
营销活动设计/管理 (Campaign Mgmt)
C 2
1w I1 + 1 0
1 1 2 2 3
客户流失管理 (Churn Mgmt)
交叉销售设计/管理 (Campaign Mgmt)
专业应用
元数据价值
对整个企业

协助企业管理数据资产管理； 形成统一信息地图，知识传承的平台，有助Βιβλιοθήκη Baidu决数据孤岛 集中浏览分布在企业内部的所有电子文档，形成虚拟文档库 建设企业范围的指标库，统一指标定义和管理
对管理人员

明确人员在系统维护中的职责，责任到人 明确新需求所涉及到的人员和功能，帮助任务安排 通过元数据发布流程管理，保证数据标准的权威性和可控性
www.carnation.com.cn
元数据价值
对业务人员 提供业务数据，如指标、报表定义和统计口径，帮助理解和使用 更好地维护业务数据之间的关系一致性 增加对数据的信任度：通过血统分析、ETL映射分析
对技术人员 帮助系统建设 1）提供跨平台跨工具软件的数据模型 2）快速部署数据集 3）可协助系统移植或扩容
具体目标：

保证数据描述的准确性、一致性，端到端管理 提供业务处理的统一解释，提高数据可信性 支持数据校验、清理，提高数据质量

展示数据和处理的相关性，提高系统运行可靠性
www.carnation.com.cn
目录
元数据基本概念
电信行业 元数据管理 解决方案
产品简介 元数据建设与维护
元数据实施简介
数据抽取/转 换
业务系统数 www.carnation.com.cn 据
元数据的承载平台, 抽取 传输 E T L 清洗 转换 装载 为其他需要元数据信息 源系统n 源系统2 …. 源系统1 源系统3 的产品、应用提供支撑和服务。
MetaOne环境描述
www.carnation.com.cn
产品优势
在国内拥有最多元数据实施的成功案例，如上海电信、安徽电信、 吉林移动、广东移动、中国银行等 可快速部署元数据管理系统，并支持元数据范围的不断扩展 提供预定义元模型


目前国内唯一支持全中文内核的元数据产品，同时适用于管理人 员、技术人员、业务人员
是完全独立的第三方元数据产品，不依附于任何工具软件，开放、 通用、支持主流BI工具软件 开放式元数据存储库，采用主流关系型数据库，以面向对象的方 式构建存储模式、易于管理和扩展 提供完善的元数据发布流程管理，把元数据变更纳入流程监控， 使之更具权威性和可控性 提供完善的元数据版本管理，便于追踪元数据变更
面向运维技术人员 数据结构和数据处理 细节方面的技术化描述 •源系统接口规范 面向运维管理人员 是对运维管理相关 信息的描述
• 业务术语
• 指标业务口径 • 信息分类
• 数据仓库结构的描述
•数据集市定义描述 •分析数据处理过程的 描述等信息
•管理流程
•人员职责 •工作内容分配描述
www.carnation.com.cn
元数据自动获取
支持主流BI工具软件如DB2、Oracle、Teradata、DB2 OLAP、Essbase OLAP、PowerCenter、Erwin等，并持续 推出更多工具软件接口
系统可独立运行，并可与其他系统如经分系统无缝整合及双向 www.carnation.com.cn 交互
系统整合
获取层
元数据自动获取： DB2、Oracle、Teradata、Powercenter、 DB2 OLAP、ESSBASE OLAP、Erwin…… 元数据批量导入：XLS格式、XMI格式 元数据手工维护：界面操作
www.carnation.com.cn
产品物理架构
www.carnation.com.cn
产品关键特性（一）
第三方产品
完全独立、第三方产品，定位于企业级元数据管理
全中文支持
目前国内支持全中文内核、唯一成熟的元数据管理产品 同时适用于各种用户
元模型可完全扩展
支持CWM规范，可完全扩展，适应企业中长期发展需要
端到端的元数据管理
提供企业级元数据统一视图，提供了清晰定义和分析跟踪业 务运作历史数据的实际可行的解决方案
数据挖掘 子系统
大客户分 析子系统
Product Store Month
领导信息 子系统
专题分析 子系统
元数据维护与 指标管理系统
系统调度 管理及监控
基础应用
OLAP分析
专题分析
高层领导信息 ，kpi 简单专题分析
报表，adhoc
数据仓库
数据集市
数据集市
数据集市
数据集市
MetaOne 元数据 管理平台
www.carnation.com.cn
Carnation MetaOne成功案例
已成功实施上海电信、安徽电信、 吉林移动、四川移动、浙江移动、 广东移动、中国银行等元数据管 理系统 近期多个移动公司将基于 Carnation MetaOne实施元数据 管理
Carnation MetaOne 是目前唯 一可快速部署、全中文的成熟的 元数据管理产品，满足企业业务 要求，适应企业中长期发展需要
元数据管理标准_CWM体系结构
UML描述各种元数据模型 MOF(Meta Object Facility)提供操纵元数 据的接口 www.carnation.com.cn XMI(XML Metadata Interchange)提供元
产品遵循的元数据与元模型规范

遵循标准化、国际化的CWM模型：Common Warehouse Metamodel 元模型可完全扩展、主流开放性（100%JAVA)
交付阶段 运营维护阶段
业 务
统一规范 分析模型
需求收集
项目移交后使用
元 数 据 承 载 平 台 METAONE
逻 辑
系统设计
物 理
www.carnation.com.cn
需求控制 主动控制 物理实现
运营维护
元数据概念 —元数据是什么
元数据即描述数据的数据 在ODS系统中，如果认为ODS的报表、指标的内容都是数据，用来描述这 些指标定义、业务口径、技术口径、关键字、指标数据来源、 ETL程序处 理过程的信息就是元数据。
www.carnation.com.cn
产品主界面

基于Web的浏览器方式，操作界面简洁美观、便于操作
界面可更换皮肤，便于适应用户的各种需要
www.carnation.com.cn
主要应用及分析功能
主要应用 – 元数据全文检索 – 业务流程管理的应用 – 需求变更影响评估 – 维表变更评估 – 企业指标库 – API接口 元数据分析 – 图形血统分析 – 表重要程度和无关程度分析 – 图形映射分析 – 差异分析
指标类
数据库管理
程序维护
库表维护
元数据
潜在大客户
TERADATA
mis_run.sh Cust_msg_ms
新增用户数
DB2
Stat_12.tcl stat_defend
www.carnation.com.cn
元数据概念 —元数据分类
业务 元数据 技术 元数据 管理 元数据
面向业务分析人员 数据和处理规则的 业务化描述 • 业务规则