湖南联通经营分析系统讲稿

PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
东方国信-服务体系
公司的生存：产品-客户-服务
工程实施
前期现场勘测，取得客户的现场情况 工程界面的细分 多工程组的并行实施，核心技术人员综合支持 工程文件的交换与认定 现场培训
售后服务
培训计划 支持电话/现场服务承诺 产品升级与更新
•经营分析与决策支持 •客户关系管理系统 •客户服务中心系统 •综合计费帐务系统 •综合语音平台系统
• 服务器处理能力应以未来3-5年考虑， • 到2003年底，全部业务的用户数估计达到250万， • 以此计算ETL/ODS/DW服务器的TPMC值接近4万， • 采用类似IBM M85或HP rp7410档次的小型机，比
较符合未来发展的需要； • 从功能上分析，报表/OLAP/WEB服务的处理能力
• 系统存贮容量要求
– ODS存储容量要求 数据仓库存储容量估算
– 整个数据仓库的容量
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
硬件组网方案图
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
主要服务器列表
• 按照完整的经营分析系统的建设，从逻辑上讲应 用服务应包括：
• ETL服务 • ODS服务 • DW服务 • 报表服务 • OLAP服务 • WEB服务 • 元数据信息服务 • 数据挖掘服务
• 元数据信息和数据挖掘服务功能可以考虑在二期 建设完成，其它服务功能在一期开始建设。
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
系统实际的物理主机
PPT文档演模板
（字节） 存储期限（月） 次数（天） 含子项
计算公式
A
话单存储
200
6
5
存储单位*平均使用次 数*30*存储期限
增值业务话
B
单存储
60
6
4
存储单位*平均使用次 数*30*存储期限
C
月帐单存储
42
存储单位*平均包含子
6
每月一次
6
项*存储期限
用户资料存
D
储
105
存储单位*用户数
用户资料变
E
更存储
6
用户资料存储*10%*6
•OA系统
•数 •据
•总 部 标 准 数 据文件/报表
传输
•综合型EIS报• OLTP 查
表
询
•统计报表 • OLAP
•标准报表数据文件/报表生成
•数据仓库接 口
•数据仓库数据装载
•收集层数据抽取、转换
•数据装载至收集层
•数据抽取、清洁、转换
•数据格式检查
•系 统
管 理
2020/11/20
•生产系统数据
用户服务使
F
用存储
41
存储单位*平均包含子
9
项*用户数
用户服务变
G
更存储
6
用户服务使用存储 *10%*6
总计
(A+B+C+D+E+F+G)*(1+ 调整因子)
结果(G) 419.10 100.58 3.52 0.24 0.15 0.86 0.52 656.21
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
0.2
、索引、临时表等因素）
RAID5因子系数
1.2
•系统的存储容量(G)=整个数据仓库容量*（1+系统因子系数）*RAID5因子数
•
= 2.837 T
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
系统总体处理流程
•信息展现
•数据分析 •数据加载 •数据采集
PPT文档演模板
•总部统一经营信息服 •ERP系统 务子系统
应大于或等于ETL/ODS/DW服务器的TPMC值， • 所以系统采用两台小型机来完成全部服务功能。
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
主机性能分析的一些知识
• TPMC
– 衡量服务器处理处理能力（每秒钟处理事务的能力） – 配置的操作系统 – 处理的数据 – 估算应用的事务要求，来反推 主机的要求 – 主机TPMC值是通过实验手段取得的；
2020/11/20
湖南联通经营分析系统讲稿
系统外购软件物理承载
• 系统外购软件物理承载分布
– DW/ODS/ETL服务器承载软件 – 数据库软件：如Oracle 9i、SybaseASE+Sybase IQ – ETL软件：如CA Advantage Data Transformer、
Informatica PowerMart – 元数据管理软件：如CA Advantage Repository
•客户关系管理 •经营分析与决策支持
•计 费 帐 务 系 统 •呼 叫 中 心
•综 合 语 音 平 台
•合作伙伴 •SAS/COGNOS
•SAP/SPSS •IBM/MICROSOFT
湖南联通经营分析系统讲稿
东方国信-市场情况
•客户关系管理
•经营分析与决策支持
•呼叫中心系统 •综合帐务系统 •综合语音平台
湖南联通经营分析系统 讲稿
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
交流内容介绍
PPT文档演模板
• 东方国信简介 • 系统建设背景 • 系统的建设方案 • 数据仓库的建设 • 信息服务平台组成 • 数据挖掘 • 交流与探讨
2020/11/20
湖南联通经营分析系统讲稿
一、公司介绍-基本情况
•硬件-主机产品 •硬件-网络产品 •硬件-外设产品
PPT文档演模板
•东方国信客户服务中心
•软件-数据库 •软件-统计分析 •软件-中间件
2020/11/20
•客户
•双赢
湖南联通经营分析系统讲稿
二、系统建设背景
1. 联通公司面临的挑战 2. 联通对统一经营信息的基本需求 3. 统一经营信息服务平台建设的必要性
•长春办事处 •西安办事处 •内蒙办事处 •上海办事处 •办事处 •广州办事处 •办事处
PPT文档演模板
2020/11/20
•
反 应 迅 速 ， 沟 通 及 时
湖南联通经营分析系统讲稿
东方国信-质量保证
软件设计及质量保证：
▪ 严格、详细的需求调研 ▪ 采用标准化软件设计方案 ▪ 详细的文档要求 ▪ 版本控制 ▪ 软件测试（综合性/模块性） ▪ 阶段性评定
数据仓库存储容量估算
PPT文档演模板
•二、数据仓库存储容量估算： •计算公式：(XY)Z*(Z*ZB+XYB)*T*WZ*S*SE
公式因子解释 X是平均维数： Y是平均层次数： Z是平均分类： T是存储期限（年）：
XYB 是维度量字节数 是层次及分类度量字
ZB 节数 W是维的有效压缩比
S是主题个数 SE是业务个数 数据仓库容量(G)=
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
行业背景—挑战
•市场
PPT文档演模板
•WTO
•国外电信巨头
2020/11/20
ຫໍສະໝຸດ Baidu
湖南联通经营分析系统讲稿
三、系统建设方案
• 硬件组网方案图 • 主要服务器列表 • 系统实际的物理主机 • 系统外购软件物理承载 • 服务器处理性能指标
– 主机性能分析的一些知识 – ODS/ETL服务器性能分析 – DW/OLAP/WEB服务器性能分析
•一个New-Order事务由平均4-5个SQL语句处理完成•ODS/ETL服务器完成的功能： •整个测试的执行过程中，New-Order处理占45%。• 1.从源数据到ODS地抽取、清洁、转换和装载
• 2.从ODS到DW地抽取、清洁、转换和装载 • 3.在ODS中保存接近当前业务的数据
• 以详细话单汇总和分析为例来分析主机的性能。
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
系统存储容量要求
• 系统存储容量
• 系统目前建设的存储容量应先考虑到2003年底， 到2003年底，联通全部业务的用户数估计达到 250万，以此计算ODS/DW数据库的存储容量为 2.837 TB
• 系统使用两台小型机采用双机群集方式运行， 充分利用公司现有营帐的EMC 8430，相应扩展 其存储容量。
– 话单汇总和分析，的TPC-C 值要求满足：
• 17362 * 0.9 ≈ 15626
– 假设其他经营分析的TPC-C总和与话单分析的TPC-C相等。
• 15626*2=31252
– 考虑25%的冗余（系统其它开销）：
• 主机性能=31252*1.25 =39065
• 支持到2003年底的主机性能的TPC-C值约为39065
平均取值 4 3 4 2 30
5 0.4 15
6 1314
2020/11/20
湖南联通经营分析系统讲稿
整个数据仓库的容量
•三、整个数据仓库的容量： • ODS容量+数据仓库容量(G)= 656.21+1314=1970.21G
•系统的物理磁盘存储容量：
系统因子系数：操作系统和数据库本身工 作空间（需要考虑系统缓冲区、工作空间
•北京中关村科技园区高新技术企业 •信息产业部软件企业认定证书 •主要客户群：电信运营商
• 人员结构： •博士研究生： 4% •硕士研究生：16%
• 本 科 生： 70% •其 他 人 员：10%
PPT文档演模板
•技术状况 •CRM/Work Flow •Call Center/ IVR /ACD /CTI
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
ODS存储容量的估算
•估算条件： • 用户数(万)：250万 • 存储时间（月）：6月 • 调整因子：0.25 • 注：该用户数为联通全部业务（GSM,CDMA,193,165,固定网等）以GSM为准折合的用户数。
序号
项目
存储单位
平均使用 平均包
•OS:UNIX/Windows •DB:ORACLE/SYBASE/INFORMIX/
• SQL Server •C++/DELPHI/JAVA/J2EE
2020/11/20
•客户市场
•售前支持 •产品开发 •服务体系 •市场开拓 •产品测试 •工程实施 •辅助部门 •产品营销 •质量管理 •客户保障
• TPC-R
– 它也是以每小时处理能力为计量单位的。这种指标是在用户知道要查询什 么数据，并可以对可相应的数据表进行优化。
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
ODS/DW/ETL服务器性能分析
•根据TPC-C的标准： •tpmC值是根据标准模型中New-Order事务的处理数目来计 算的
• OLAP/WEB/报表服务器承载软件
– OLAP软件：如Cognos PowerPlay Enterprise Server – WEB/报表软件：Cognos Impromptu Web Report
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
服务器处理性能指标
• 服务器处理性能指标
• 估算条件：( 可以根据实际情况进行修改)
– 总用户数按250万计算
– 每天每用户按5个话单
• 分析过程：
– 每分钟处理： （用户数）250万*5/24/60 ≈8681
– 峰值处理：
8681*2 = 17362
– 需执行约8个SQL语句，则估算一个话单汇总处理业务相当的TPC-C值为：
• 8*0.45/4 = 0.9 TPC-C
PPT文档演模板
2020/11/20
湖南联通经营分析系统讲稿
报表/OLAP/WEB服务器性能分析
• DW/OLAP/WEB服务器主要完成的功能：
– 1．数据仓库的数据存储 – 2．对数据进行OLAP分析 – 3．提供用户的连接 – 4．提供WEB展现功能
• 从功能上分析，该服务器既有OLAP处理，又有OLTP的处 理。是两种应用的结合，因此，在性能的分析上，我们要 进行了综合考虑。OLAP分析的时长是与数据量有一定的 关系的，也就是数据量的增加，相应的分析时长也会增加。 OLAP数据模型的生成要对数据库进行OLTP处理，所以该 服务器的性能应大于或等于ODS/ETL服务器的TPC-C值。
• 特定配置的主机硬件 • 特定配置的操作系统 • 特定配置的数据库系统 • 其配置中任何一项的变化都可能会对TPMC值有很大的影响
• TPC-H
– 针对决策支持系统中的即席查询，应当采用TPC－H（每小时处理的性能） 作为衡量主机处理能力的指标。这种指标处理是面向大量的即席查询和并 发的数据修改操作。这种处理用户往往不知道要查询什么数据，不能对预 见的数据进行优化工作。
湖南联通经营分析系统讲稿
外购软件分布
PPT文档演模板
•数据仓库存储工具
•Oracle9i Database Enterprise Edition •SybaseASE+Sybase IQ
•ETL工具 •CA Advantage Data Transformer
•Informatica •元数据管理 •CA Advantage Repository Engine for Distributed System •CA Advantage Repository Data Shopper Option •CA Advantage Repository Exchange for Application( SQL,PowerBuilder,C++….) •CA Advantage Repository Exchange for DB ( Oracle,DB2,Informix…. )