北京移动大数据研究项目

大数据处理技术
目前，从技术层面大数据处理技术种类繁多，主要包括数据仓库技术、Hadoop、NoSql 、流式处理技术等
北京移动大数据演进路线

第一．试验验证阶段。选择具有典型意义的系统开展试验验证，为大面积现网推广部署提供试验
数据，进行云平台的探索和验证，结合云计算标准化工作，逐渐规划出统一云平台的基础框架。 第二，试点部署阶段。试点部署应遵循先易后难的原则，优先选取对实时性要求较低，对业务影 响较小的系统，开展现网部署。
管控规范设计
功能、技术架构 设计
大数据模型设计
wenku.baidu.com
大数据特点及难题
大数据主要特征：量大（PB级别的数据）、实时性（更短的时间处理数据）、多样性（非结 构的文档数据为主）。也正是它的这些独具特点，给我们主要带来了“存”、“管”、“ 用”这三个方面的难题。 “存”—如何解决 PB 级别大数据的存储问题？ “管”—如何解决非结构化数据的管理问题？ “用”—如何解决这种大规模复杂结构下的实时应用问题？
东方国信公司简介 本项目的要求及我们的理解 大数据咨询过程介绍
项目组织安排
成功案例介绍
Information Change the World
通信行业大数据项目经验
项目名称 建设内容描述
整合M域及外部数据，实现财务、业务、资源数据的深度关联， 2012年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件 建立基于云架构的企业级集中化数据仓库，成为企业唯一的数 更新改造工程(M域-东方国信）应用软件开发合同 据服务提供者。 整合M域及外部数据，实现财务、业务、资源数据的深度关联， 2012年中国联通总部渠道集中管理系统应用软件更新改造工程 建立基于云架构的企业级集中化数据仓库，成为企业唯一的数 总部数据分析系统全渠道全数据整合及服务部分委托开发合同 据服务提供者。 实现经营的日监控和企业绩效的一点展现，保障各级分析服务 2012年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件 及营销的全面化支撑，充分发挥大数据在经营中的商机效用， （B域分析应用优化部分）更新改造工程 实现集团对业务运营的垂直化管理。 11.2.1.4 2012年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件（B域数据部分）更新改造工程 通过从生产到应用的端到端数据管控和流程保障，构建上下统 一的数据管控和评价体系。从而构建基于数据集中化的业务和 数据联动。
Information Change the World
关于大数据的几点建议

北京移动数据采集和预处理可采用基于Hadoop的分布式ETL技术，引入流计算提高数据转换 效率。 数据存储和处理采用Hadoop和数据仓库混搭的方式，通过透明访问机制为上层应用提供透

明的访问环境

采用PaaS的方式向各部门提供资源和应用开发、运行环境，解决平台/数据集中化和各部门应 用开发个性化的矛盾。 充分利用各种处理平台的特征，实现高效低成本
软件及建设服务；
• 东方国信为国家电网、中国石油、西部机场集团、中航三星 人寿及多家地方商业银行等客户，提供数据仓库及商业智能 解决方案。
3
Information Change the World
东方国信在商业智能领域的核心竞争力
在群雄逐鹿的商业智能领域， 东方国信靠什么一路走来？
领先 经验
大规模研发资金投入，紧跟云计算、 “大数据”处理、社交化、数据可视 化等业界脉搏
大数据实施的目标及工作步骤，以及大数据思想下未来MSS域的发展建议。
目录
1 2 3
东方国信公司简介 本项目的要求及我们的理解 大数据咨询过程介绍 项目组织安排 成功案例介绍
4
5
Information Change the World
大数据现状调研与梳理
输入
阶 段 一
访 谈 及 现 状 梳 理 大数据战略 管理架构调研 业务现状调研 系统现状调研 数据现状调研 目标评估
• 作为核心合作伙伴供应商，我公司承建了中国联通25个省分 公司及联通集团公司集中化经营分析系统的建设工作。这其 中东方国信帮助中国联通构建了全国最大的数据仓库系统— —集中化数据仓库（总数据量193PB）； • 我公司承建了中国电信14个省分公司的数据仓库系统和核心
经营分析系统的建设和运营工作；
• 我公司为中国移动9个省分公司和移动集团公司提供数据仓 库系统和经营分析系统的建设及运营工作。同时为中国移动 全资子公司中国铁通集团公司及4个省分公司提供核心系统
使系统能够更有效地满足业务部门的支撑需求
Build 系统建设
• 主要工作描述 • 业务梳理 • 问题诊断 • 原因定位 • 监控分析 • 模型设计 • 策略建议 • 效果评估 • 需求编写
平台中的技术数据是业务分析与模型构建的基础， 咨询的成果来源于系统平台，通过业务咨询能够充 分发挥平台建设的价值
大数据涉及的关键技术
X86 虚拟化技术

UNIX 虚拟化技术

VMware---vSphere Microsoft—Hyper-V Citrix– XenServer Linux—Xen/KVM/UML Parallels Server Bare Metal
IBM AIX– LPar、Micro-partition HP-UX—vPar/nPar Sun--Domain
5
Information Change the World
• 主要工作描述 • 平台规划 • 架构设计 • 需求理解 • 数据准备 • 接口建设 • 系统开发 • 系统测试 • 调优
目录
1 2 3 4
东方国信公司简介 本项目的要求及我们的理解 总体技术方案 项目组织安排
5
成功案例介绍
Information Change the World
Information Change the World
北京移动大数据研究项目
投标方案
2013年6月 北京东方国信科技股份有限公司
目录
1 2 3 4
东方国信公司简介 本项目的要求及我们的理解 总体技术方案 项目组织安排
5
成功案例介绍
Information Change the World
东方国信是国内唯一一家以商业智能为题材的上市公司
北京
江苏 徐州 北京 北京
公司致力于夯实国内商业智能与软件服务第一品牌
最适用的商业智能产品
及解决方案
最专业的商业智能业务
专家库
最高效的商业智能交付
实施团队
最优产品，最佳服务构筑民族BI全产业链第一品牌 2
Information Change the World
东方国信为多行业客户提供专业化的商业智能解决方案

非结构化数据处理在Hadoop平台上存储与处理。
结构化、不需要关联分析、Ad-hoc查询较少的数据，建议保存在Nosql数据库或hadoop平 台。 结构化、需要关联分析或经常ad-hoc查询的数据保存在关系型数据库中，短期高价值数据放

在高性能平台，中长期放在低成本产品中。
目录
1 2 3 4 5
工具、流程
大数据分类及分布 评估 业务流程评估
输出
大数据现状 梳理报告 问题分析报告
阶 段 二
方 案 研 究 及 应 用 建 议
大数据架构设计 大数据方案研究 业务流程优化 大数据应用研究
业务流程改进 设计
大数据方案
大数据应用建议
阶 段 三
大数据方案 实 施 规 划 演进路线规划 实施方案规划
大数据维护业务 流程报告 大数据管控规范 功能及技术架构 设计报告 大数据模型设计 报告
汇聚业内800名精通商业智能业务的专家，
辅助客户有效地挖掘数据资产 超过2600人的专业服务队伍提供专业化商业智能 定制方案
团队 专注
1997年至今，始终专注于国内数据仓库及商业智能领域的 产品研发，专注于做适合国内客户的Bi软件 借助资本市场的有利条件，实现充沛的资金保障，确保公司的稳 定和可持续发展
资金
4
Information Change the World
多年的BI领域运营经验告诉我们： 商业智能系统的价值彰显本质上依靠持续不断的运营
东方国信一直采用“T+B”的运营模式辅助客户用好BI系统，确保客户投入的商业智能系统有效
地发挥其价值
将业务咨询的分析与研究成果在平台上进行固化，
Think 业务咨询
大数据逻辑架构
云服务提供：为云服务对象提供统一的界面和访问，包装云服务资源，建立服务等级(SLA)，管理云 服务对象状态和请求 云服务管理：管理和维护云计算架构，保障云架构的稳定和可靠 云平台资源：构建服务器、存储资源池，实现IaaS；建设企业级数据中心，实现PaaS；通过SOA架 构整合系统应用，以提供SaaS。
大数据与云计算
云计算有几个很显著的特征：
它基于资源共享，这样就可以实现资源的池化共享和管理，为大数据提供最基本的生存基础 它基于服务可用性与快速交付，这样可以降低IT管理的复杂度，提高资源利用率，降低大数据管理的复杂性 它基于按需服务与交付能力，通过高性能的扩展，为大数据的实时应用环境提供可能性
项目需求
本项目主要针对管理支撑域大数据专题研究，其范围主要为MSS域，旨在梳理企业内部管理数据化工 作现状，探索管理支撑领域大数据的应用价值，规划管理支撑领域大数据的实施路线。研究内容包括
企业内部管理数据化现状调研与梳理、管理支撑大数据应用价值及方案研究、管理支撑大数据实施规
划建议几部分。 1．企业内部管理数据化现状调研与梳理：伴随企业内部管理的电子化水平不断提升，企业内部管理 数据也在逐年增长，包括企业内部人财物信息、内部知识、业务流程数据、企业内部用户的工作行为 等。本部分针对MSS域，梳理目前企业内部管理数据化现状，旨在考察目前企业管理的数据化现状。 2．管理支撑大数据应用价值及方案研究：在数据化现状调研的基础上，借鉴大数据的宏观思想，结 合目前企业内部管理的问题与面临的挑战，以挖掘企业内部管理数据价值为目标，总结出目前北京公 司管理支撑大数据的应用价值。 基于挖掘出的大数据应用价值分析，结合北京公司目前MSS域建设现状及数据现状，设计出大数据思 想落地实施的初始化方案建议，建议可以包括组织及流程、人员能力、设计思想、业务逻辑、技术建 议等。该建议可以较全面指导北京公司MSS域大数据工作的落地，较完备的保证前期分析的大数据应 用价值能够有效的产生。 3．管理支撑大数据实施规划建议：根据北京公司实际情况制定出阶段性的演进路线，给出未来三年
比例
x86资源池
软件投资 IBM资源池 SUN/HP资源池 集成费 软件费 合计 硬件投资 硬件投资
目录
1 2 3 4 5
东方国信公司简介 本项目的要求及我们的理解 大数据咨询过程介绍
项目组织安排
成功案例介绍
Information Change the World
项目人员安排
北京移动大数据实施步骤
证券代码
300315.SZ 300288.SZ 300298.SZ 300306.SZ 300222.SZ 300285.SZ
主营产品
移动游戏和互联网页面游戏 对对碰和朗玛网广告 配套专用试条和血糖测试仪 光谱仪及其配套设备 配电和用电自动化系统 MLCC系列配方粉
总部所在地
北京 贵州 贵阳 湖南 长沙 浙江 杭州 上海 山东 东营


第三，规模推广阶段。在试点部署的基础上，总结经验，优化方案。稳步推进云计算平台在整个
管理支撑系统的应用部署。
大数据应用价值
北京移动大数据成本规划
北京移动大数据项目前期成本主要是建立虚拟化资源池的硬件、软件及集成费成本，后期成本会 因规划建设的进度有较大的变化。
资源池
项目 硬件投资
投资(万元)
在2013年1月《福布斯》中文版发布其2013年
度榜单“中国潜力企业榜”中，我公司再一次 被列入“中国最具潜力100家上市公司”榜单 第七位，这是我公司连续两年被福布斯中国收 录该榜单之中。我公司被列入“中国潜力上市
排名
1 2 3 4 5 6
证券简称
掌趣科技 朗玛信息 三诺生物 远方光电 科大智能 国瓷材料
公司100强”，证明了《福布斯》中文版对东
方国信的未来发展规划、商业运行模式、核心 技术实力、管理理念和人才理念的认可。
7
8 9 10
东方国信
云意电气 邦讯技术 舒泰神
300166.SZ
300304.SZ 300312.SZ 300204.SZ
企业商业智能系统 解决方案
整流器和调节器 通讯配套服务 苏肽生和苏生