大数据咨询方法论白皮书

赋能
能否用机器来处理？
千人干面
全面上云 70%以上的GMV由机器运营
从人指挥机器到机器指挥人
50%的服务器用于处理数据而不是处理业务
数据平台部成立
不去IOE会死
阿里云成立
PB
推荐算法对存储 和计算消耗最大 人群定向对存储和计算消耗最大
TB
BI对存储和计算消耗最大
2007
2009
2012
2015
2019
大数据咨询的需求来源
Big Data Consultancy
02
数字化转型遇上了越来 越多的数据问题
采集到的数据
一半是空值？
有几亿行数据，
却不知道能用来干什么？
数字化转型过程中遇 到的问题
数据不通
数据不可用
黑箱决策
发票数据总和和销售数据总和
居然相差几千万？
线索到店转化率出乎意料的低，
但不知道原因是什么？
内部正式组织 生态伙伴 数据技术创新 数据委员会 运营数据专家
个性化推荐 智 能服务平台 语 音识别 计算视觉 智能算法平台
数据化运营 精准营销 金 融风控 精细 化财务 智慧 物流
数据大屏 数据报表
多维分析 即席查询
数据组织
总体架构
数据智能应用
360º数据管 家
数据上云
数据业务应用
数据资产化
数据可视化 与分析
技术架构
数据收集和存储 数据治理和管理 数据应用和分析
组织设计
提案和决策框架 工作职责 工作规范
大数据咨询项目实施路径
单条数据简单处理（增删改查）
面向分析（用于制作报表）
数据库阶段 数据记录业务
数据仓库阶段 数据支撑业务
数据平台阶段 数据提效业务
数据业务化
场景化使用数据 AI驱动业务自动化、无人化、智能化
云+数据仓库
视图声数据（EB级）
数据中台阶段 数据引领业务
大数据咨询覆盖范围
业务价值
数据驱动的商业设计 数据业务化效果 成本-收益分析
HYDRO 数EL据EC合TR规IC性
业务在线化 业务中台化 企业云计算化
数据集中存储 大 规模计算能力 多场景计算能力
全域数据中心 数据价值 数据管理 数据地图
数据服务化 数据质量 计 量计费
ห้องสมุดไป่ตู้
全流程合规 全 产业链合规
数据分级 数据创新实验
1.0 数字化跟随者
S 战略 K KPI O 组织
算力
T 数据
算法
T 人才
数字化转型现状评估： SKOTT评估方法论
2.0 数字化转型者
3.0 数字化变革者
1.0
2.0
3.0
未进入企业核心战略，与核 数字优先战略，与企业核 数字战略引领企业核心业务
心战略脱节
心业务战略保持一致
战略
数字化转型投资增速；数 数字化项目所达到的降本增
字人才占比；流量、转化 效
等等
嵌入数字技术的产品与服务 的收入增速与占比；平台收 入增速等等
临时数字化转型项目组 金字塔型的刚性组织
由首席数字官领导的转型 团队，且直接汇报给集团 最高领导，扁平化趋势等
首席数字官进入集团董事会 ，所有核心业务数字化转型 等等
局部试点 示范数字化转型项目
创新技术在集团内部规模 化复制、推广
数字技术重塑新商业模式， 带来了新的营收、组织的改 变等等
掌握新数字技术的人才，如 跨学科复合型人才，如算
传统咨询公司缺乏数据 资产管理经验
如何面向未来建立合适的企业数据战略？
数据资产是企业的战略资产 数字化转型战略目前遇到的主要是数据问题
如何建设企业数据资产管理体系？
数据资产管理体系需要从零到壹的建设经验 需要有数据资产管理体系的实施能力
如何建立企业数据中台基础设施？
用什么技术来建设企业数据中台？ 用什么方式来建设企业数据中台？
大数据咨询方法论白皮书
Big Data Consultancy White Book
Contents 目录
01 大数据咨询的时代背景 02 大数据咨询的需求来源 03 大数据咨询的方法论
大数据咨询的时代背景
Big Data Consultancy
01
数字化转型的本质是信 息技术驱动商业变革
智能经济 成为经济发展新引擎
数据分析师
法工程师
跨界人才，如业务架构师
数据战略发展现状评估：
四阶段评估方法论
企业所处阶段
企业未来目标
1.0 数字化跟随者
2.0 数字化转型者
3.0 数字化变革者
OLTP（联机事务处理）为主
OLAP（联机分析 处理）为主
OLAP（联机分析处理）为主
通过系统对接OLAP和OLTP
用
记账需求
事后差距分析 追溯分析
如何让数据资产增值和变成业务价值？
如何建立企业内部数据生态？ 如何通过组织保障和数据生态让数据变成业务价值？
大数据咨询端到端帮助企 业解决数字化转型难题
数
字
化
转
需
型
求 端
需
求
和
问
题
品牌咨询 财务咨询
人才咨询 管理咨询
IT 咨询
大数据咨询
数字化转型战略咨询 需要具备端到端的解决能力
帮助企业成为面向未来的数据公司
来。
数据指数级增长带来了 「数据富足」挑战
2015年之后，人类社会的数据 量每年增长40%-50%。
2015年一年产生的数据量，是人类 过去历史上产生的数据量的总和。
阿里巴巴如何跨越数据 指数级增长奇点
每天处理 数据量
连 接
如何连接买
家和卖家？
100 PB
看见
发生了什么？ 怎么发生的？
使用
为什么发生？ 未来将发生什么？
过去10年中，云计算、大数据和人工智能技术 的发展，不断颠覆既往的运营和商业模式，成
为市场的共识。
数据中台 成为数字化转型基础设施
随着越来越多的企业上云，借鉴阿里巴巴而来 的数据中台需求也日益增长，越来越多的企业
把数据中台作为数字化转型的基础设施。
数据问题 成为数字化转型关键问题
随着企业把越来越多的业务和流程搬上云，以 及使用了新的数字技术进行研发、生产、制造 和销售领域的革新，数据问题开始大量暴露出
商业设计
组织设计
技术驱动
场景落地
数字化转型战略咨询
数字化转型现状评估、诊断和对策 和数据相关的商业和组织设计策略
数据（中台）战略咨询 数据中台/平台建设 数据资产管理体系建设
业务调研 数据摸底
数 字 化 转能 型力 能端 力 建 设
大数据咨询的方法论
Big Data Consultancy
03
数据成熟度评估方法论： 360º数据管家
经营效率提升 经营预测
商业模式创新 数据创收
数据在线化
通
业务在线化
IT基础设施建设
数据中心化
（业务）高内聚，低耦合
数据资产化
标签化 价值化（ROI可见）
数据库（Database）
存
高并发
分布式数据库、数据仓库（ DataWarehouse）
低并发、大批量
去IOE（Hadoop）
海量数据处理（PB级）