集团企业大数据治理分析平台建设方案

主
账户汇总 机构汇总
……
题
数
协议主题 产品主题
……
据
区
供应链数据
……
贴源数据区
……
大数据交换组件 数 据 安 全
企业内外部半结构化、非结构化数据
数据库数据交换组件
数据区数据交换组件
数据交换平 台
集团零售
供应链XXX 人人贷系统 基金系统
……系统
用户 访问 层 数据 应用 层
数据 计算
层
数据 交换
层 数据 产生
通过数据平台和BI应用建设，XXX大数据将搭建统一的大数据共享和分析平台，对各类业务进行前瞻 性预测及分析，为集团各层次用户提供统一的决策分析支持，提升数据共享与流转能力
统一制定目标和 分析模型
600% 500% 400% 300% 200% 100%
0%
2004年 2005年 2006年 2007年 2008年 铁矿石 焦煤
5.改善数据质量
从中长期看，数据仓库对XXX大数据分散在各个业务系统中的数据整合、清洗，有助 于企业整体数据质量的改善，提高的数据的实用性
目录
1
3 4 5
集团企业大数据云平台总体架构
数据 IT人员
管控
平台
流程
数
调度
据 标
平台
准
流
程
调
数 据 管 控 层
数流
据 质 量
程 调 度
层
元
度 监 控 告 警
集团决策层
集团职能管控 层
各级业务操作层
集团企业大数据云平台建设预期收益
1.实现数据共享
通过数据平台实现数据集中，确保XXX大数据各级部门均可在保证数据隐私和安全的 前提下使用数据，充分发挥数据作为企业重要资产的业务价值
2.加强业务协作
实现分散在供应链XXX、人人贷、保理等各个业务系统中的数据在数据平台中的集中 和整合，建立单一的产品、客户等数据的企业级视图，有效促进业务的集成和协作 ，并为企业级分析、交叉销售提供基础
数据平台整体架构； 数据平台各层建设的标准； 较成熟的XXX业数据模型； 数据质量治理； 元数据管理； 数据标准建设 数据整合； 数据应用建设； 数据平台的软硬环境 ……
基础数据平台和BI应用建设是未来一段时间的重点！
企业大数据解决方案，解决三大关键问题
形成端到端的整体解决方案，将处于技术底层的数据资产，通过软硬件平台和专业化服务，一步 步转化为上层业务价值
自定义报表工具 行＋列的简单定义方式
多种格式报表
BI 分析工具
云数据推送平台已实现 了主要零售及XXX业务系 统数据清洗、整合，为 未来XXX大数据数据平台 提供了丰富的数据源。
供应链XXX系统
POP系统
统一定义BI 应用
统一规划分析方法 统一划分分析主题 统一设计数据模式 统一部署技术基础
外部非结构化数据 采购wk.baidu.com理系统 其他业务系统
业务分析
组织形态
如何构建高效的大数据组织及文 化，以保证企业数据价值的释放
- 架构与流程
如何基于数据来描述、研究、 解决以及评估业务痛点问题
- 岗位与技能 - 数据文化建设
- 客户管理、营销管理、服务管理
数据变现
- 产品管理、流程管理、运营管理 - 收入管理、财务管理、资产管理
如何基于跨业数据来创新各种 行业场景下的数据价值和商业
需- 求平台架构、系统架构
- 应用架构、信息架构、数据架构
2
目录
2 3 4 5
智慧XXX管理分析类应用建设现状基本分析
基本的现状
集团已建立面向整个XXX业务的数据 仓库，整合了前台业务运营数据和后 台管理数据，建立了面向XXX的管理 分析应用；
XXX大数据已开展供应链XXX、人人贷 和保理等多种业务，积累了一定量的 业务数据，同时业务人员也从客户管 理、风险评级和经营规模预测等方面 ，提出了大量分析预测需求；
层
集团企业大数据云平台总体架构——数据产生层
源数据内容
内部业务系统产生的结构化数据
❖ 集团日常零售业务处理过程中产生的结构化数据，存储在关系型数据库中，如：供应商信息、采购信息、商品信息、销售流水…… ❖ XXX大数据日常业务处理过程中产生的结构化数据，存储在关系型数据库中，如：客户信息、账户信息、XXX产品信息、交易流水……
……
存在的问题
关注的内容
集团数据仓库累积数据没有充分利用 缺乏面向整个XXX大数据的统一、完
整的数据视图； 缺乏支撑XXX大数据日常业务运转的
风险评估体系； 缺乏XXX大数据客户360度视图，客户
行为分析和预测无法实现； 缺乏面向XXX业务运营管理的关键绩
效指标体系； ……
数据平台、数据应用、数据管控……
当客户需要一个成熟的、 高性能的大数据平台及 解决方案时
当客户难以管理自己多 源、异构、海量的大数 据资产时
当客户需要将数据资产 转化为业务洞察和商业 价值时
存
服务器与 分布式存储
与
算
大数据 计算平台
清
软件工具 实施服务
与
管
数据管控 咨询服务
析
数据挖掘 算法开发
与
用
分析应用 咨询服务
5
集团企业大数据云平台建设目标
2020
集团企业大数据治理分析 平台建设方案
集团企业大数据治理的“七种武器”
演进规划
如何创建一个企业级的大数据
战略意图
企业如何借助大数据来应 对行业与趋势带来的挑战
- 行业理解、企业研究 - 大数据宏观价值阐述 - 系统工程的高层支持
生态体系，以及如何发展和演
- 能力成熟度评进估
- 业务演进规划 - 技术体系规划
数
据
内部用户
实时数 历史数 据查询 据查询
内部管理分析
应用集市数据区
客户管理 财务管理 风险管理
历
实
史
大数据区
时
归
数
档
待 社交媒体 处
据 区
数 据
处 理
用户评价
理 后
区
大 移动互联 大
数
数
据 访问日志 据
客户汇总 客户主题 零售数据
外部用户
业务沙盘演练
数据增 值产品
……
沙盘演练数据区
增值产 品数据区
数据管控
如何整合数据资产，并保障 数据的质量和业务可用性
- 行业理解、企业研究 - 大数据宏观价值阐述 - 系统工程的高层支持
企业级大数据建 设是一个复杂而
“七种武器”
长期的系统工程
模- 式对内价值与对外变
现
- 数据产品创新与合
架构设计
作 - 商业模式创新与生
如何构建一个统一混态搭的大数据
平台环境来支撑多变复杂的业务
3.促进业务创新
XXX大数据业务人员可以基于明细、可信的数据，进行多维分析和数据挖掘，为XXX 业务创新（客户服务创新、产品创新等）创造了有利条件
4.提升建设效率
通过数据平台对数据进行集中，为管理分析、挖掘预测类等系统提供一致的数据基 础，改变现有系统数据来源多、数据处理复杂的现状，实现应用系统建设模式的转 变，提升相关IT系统的建设和运行效率