大数据业务解决方案指南
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
QQ聊天记录 微博 微信
IPHONE有3个传感器 三星有6个传感器
高德、百度、Google地图 导航、足迹数据
购买喜好 物流信息 资金流动信息
大数据在多领域中的应用
医疗领域
通过大数据可以筛选出各种疾病发病原因,并筛选出最佳治疗方案,更可以做 到疾病的预防、预报、预警;
教育领域
通过大数据可以筛选出各类人才的最佳成才路径和环境,彻底颠覆现在教育的 盲目性和低效率。
自助分析
MDM主数据
主数 据域
主数据
数据维护 责任部门
数据维护 操作部门
数据使用系统
MTDS MSCS WCC AS MES MCTS K3
品类(二级) 市场部
营销信息中心
√
√
√
√
品牌
市场部
营销信息中心
√
√
√
√
排产要求
生产技术部 制造信息管理部
√
√
√
订单齐套要求 生产技术部 制造信息管理部
√
√
√
√
发货策略
DT时代,信息化建设带给企
业高管层的直接应用体验?
DT时代
你负责干活,我负责美
IT时代
ERP
(财务、供应链、制造生产、人力资源……)
协同OA
电商
手工时代
。。。。。。
EXCEL
TXT
日志
WORD
数据源
业务系统数据 机构数据
非系统数据 填报数据 外部数据
集团级主数据规则集成
数据集成(DI)
批量
清洗
MDM体系
主数据管理解决方案 同步 分发
数据采集工具 网络爬虫 文本分析技术
调度管理
Databroker 埋点分析 流式数据处理
数据适配器
大数据产品功能
存储与管理
关系型数据库
分析建模
统一建模与管理
数据加速引擎(AE)
Acceleration Engine
终端
调度
用户
海量结构化数据
大数据处理平台(KuDu)
渐成为重要的生产因素;而人们对于海量数据的运用将预示着新一波生产
率增长和消费者盈余浪潮的到来。
互联网、移动互联网、物联网、云计算的快速兴起以及移动智能终端的快速
普及,正使得当前人类社会的数据增长比以往任何一个时期都要快。
越来越大、越来越快、越来越复杂,数据特性的演变和发展,催生了一个全
新的概念——大数据。
生产 组织
基地 车间
财务中心
财务中心核算管控部 信息规划线
√
√
财务中心
财务中心核算管控部 信息规划线
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
数据集成
数据可视化
数据源管理
主数据建设
数据建模
数据资产
数据应用
大数据
数据载体
数据源管理
数据集成
数据 处理
主数据建设
数据建模
数据可视化
数据 应用
数据应用
大数据定义
定义大数据
更广的信息范围 新的数据与分析类型 实时信息 来自新技术的数据 非传统形式的媒体 大数据量 最新流行词 社交媒体数据
* 2012年IBM对95个国家中26个行 业的1144名专业人员调查结果
结构化数据:存在于关系数据库中,多年来一 直主导着IT应用;
半结构化数据:包括网络日志、聊天记录、文 稿、视频、图片、地理位置等;
iUAP Distribution for Hadoop NoSQL SQL
SQL oቤተ መጻሕፍቲ ባይዱ Hadoop
资源库
日志
监控
OLAP模型 挖掘模型
语义模型
Hadoop/HDFS Cluster Manager
元数据
应用与可视化
集团运营管理 客户画像
集团人力资本 自助应用
数据产品体系
BI产品
领导驾驶舱
数据大屏
“大数据”理念可定义为4个V,即数量(Volume)、多样性 (Variety)、速度(Velocity)及数据的价值(Value)。
大数据与传统数据相比,其产生方式、存储载体、访问方式、表现形式完全不同
海量社交媒体数据
移动智能设备传感数据
电子地图数据
电商交易数据
Facebook每天有18亿 张照片上传或被传播
生产技术部 制造信息管理部
√
√
√
√
订单类别
生产技术部 制造信息管理部
√
√
订单 信息
订单类型
生产技术部 制造信息管理部
√
√
√
√
√
√
√
产品类别
生产技术部 制造信息管理部
√
√
√
√
√
PLM √
促销类型
生产技术部 制造信息管理部
√
√
设计来源
生产技术部 制造信息管理部
√
√
水盆安装方式 生产技术部 制造信息管理部
互联网 领域
政府公共 机构领域
通过大数据,可以掌握消费者的消费行业习惯,做到精准营销。
通过大数据,分析社会问题,通过数据支持决策,可以大幅改进政府的工作效 率,实现全局化掌控,个性化区域管理,解决各种社会复杂问题,缓和各类矛 盾,实现智慧管理和智慧城市模式。
公共安全 领域
通过大数据可以建立各种犯罪模型和规则库,建立高危人群数据库,做到预防 犯罪和快速侦破,实现长治久安的管理目标。
非结构化数据:广泛存在于社交网络、物联网、 电子商务之中。伴随着社交网络、移动计算和 传感器等新技术不断产生,有报告称,超过 80%的数据属于非结构化数据。
大数据(big data, mega data),或称巨量资料,指的是需 要新处理模式才能具有更强的决策力、洞察力和流程优化 能力的海量、高增长率和多样化的信息资产。
√
√
提货方式
物流中心
物流中心
√
√
营销
经销部
财务中心
财务中心核算管控部 信息规划线
√
√
组织
线别
财务中心
财务中心核算管控部 信息规划线
√
√
营销 渠道
各事业线的营销 各事业线的营销内务
商场
内务组->财务中 组->财务中心核算管 √
√
心
控部信息规划线
门店
营销中心管理的 营销中心管理的商场
商场方人员
方人员
√
√
大数据业务解决方案指南
什么是大数据
什么是商业大数据
大数据概念的提出
最早提出“大数据”时代已经到来的机构是全球知名咨询公司麦肯锡。
2011年,麦肯锡出版了研究报告《大数据:创新、竞争和生产力的下一个新 领域》,产学研界对“大数据”的关注达到历史性新高度。
麦肯锡在研究报告中指出,数据已经渗透到每一个行业和业务职能领域,逐
大数据
数据资产
数据载体
数据处理-数据源管理
业务数据源
覆盖市场主流数据库类型
文本数据接入
EXCEL
TXT
日志
WORD
数据填报
企业报表&表单填报 管理与统计数据补充
组织建模
组织和基础数据、用户角色权限; 多口径组织体系和多版本;
业务建模
资源多级管控,多场景格式设计 中间级管理:任务再分配
报送审核
报送管理新增确认环节 报送管理支持审批
数据处理-数据集成
1.按雷士照明BI主题的数
据应用进行项目划分。梳 理对应项目ETL文件夹及 其流程级数据转换过程。
2.ETL流程设计数据质量
的初步校验。对直连及 ESB方式的数据流入做准 入控制。
IPHONE有3个传感器 三星有6个传感器
高德、百度、Google地图 导航、足迹数据
购买喜好 物流信息 资金流动信息
大数据在多领域中的应用
医疗领域
通过大数据可以筛选出各种疾病发病原因,并筛选出最佳治疗方案,更可以做 到疾病的预防、预报、预警;
教育领域
通过大数据可以筛选出各类人才的最佳成才路径和环境,彻底颠覆现在教育的 盲目性和低效率。
自助分析
MDM主数据
主数 据域
主数据
数据维护 责任部门
数据维护 操作部门
数据使用系统
MTDS MSCS WCC AS MES MCTS K3
品类(二级) 市场部
营销信息中心
√
√
√
√
品牌
市场部
营销信息中心
√
√
√
√
排产要求
生产技术部 制造信息管理部
√
√
√
订单齐套要求 生产技术部 制造信息管理部
√
√
√
√
发货策略
DT时代,信息化建设带给企
业高管层的直接应用体验?
DT时代
你负责干活,我负责美
IT时代
ERP
(财务、供应链、制造生产、人力资源……)
协同OA
电商
手工时代
。。。。。。
EXCEL
TXT
日志
WORD
数据源
业务系统数据 机构数据
非系统数据 填报数据 外部数据
集团级主数据规则集成
数据集成(DI)
批量
清洗
MDM体系
主数据管理解决方案 同步 分发
数据采集工具 网络爬虫 文本分析技术
调度管理
Databroker 埋点分析 流式数据处理
数据适配器
大数据产品功能
存储与管理
关系型数据库
分析建模
统一建模与管理
数据加速引擎(AE)
Acceleration Engine
终端
调度
用户
海量结构化数据
大数据处理平台(KuDu)
渐成为重要的生产因素;而人们对于海量数据的运用将预示着新一波生产
率增长和消费者盈余浪潮的到来。
互联网、移动互联网、物联网、云计算的快速兴起以及移动智能终端的快速
普及,正使得当前人类社会的数据增长比以往任何一个时期都要快。
越来越大、越来越快、越来越复杂,数据特性的演变和发展,催生了一个全
新的概念——大数据。
生产 组织
基地 车间
财务中心
财务中心核算管控部 信息规划线
√
√
财务中心
财务中心核算管控部 信息规划线
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
√
数据集成
数据可视化
数据源管理
主数据建设
数据建模
数据资产
数据应用
大数据
数据载体
数据源管理
数据集成
数据 处理
主数据建设
数据建模
数据可视化
数据 应用
数据应用
大数据定义
定义大数据
更广的信息范围 新的数据与分析类型 实时信息 来自新技术的数据 非传统形式的媒体 大数据量 最新流行词 社交媒体数据
* 2012年IBM对95个国家中26个行 业的1144名专业人员调查结果
结构化数据:存在于关系数据库中,多年来一 直主导着IT应用;
半结构化数据:包括网络日志、聊天记录、文 稿、视频、图片、地理位置等;
iUAP Distribution for Hadoop NoSQL SQL
SQL oቤተ መጻሕፍቲ ባይዱ Hadoop
资源库
日志
监控
OLAP模型 挖掘模型
语义模型
Hadoop/HDFS Cluster Manager
元数据
应用与可视化
集团运营管理 客户画像
集团人力资本 自助应用
数据产品体系
BI产品
领导驾驶舱
数据大屏
“大数据”理念可定义为4个V,即数量(Volume)、多样性 (Variety)、速度(Velocity)及数据的价值(Value)。
大数据与传统数据相比,其产生方式、存储载体、访问方式、表现形式完全不同
海量社交媒体数据
移动智能设备传感数据
电子地图数据
电商交易数据
Facebook每天有18亿 张照片上传或被传播
生产技术部 制造信息管理部
√
√
√
√
订单类别
生产技术部 制造信息管理部
√
√
订单 信息
订单类型
生产技术部 制造信息管理部
√
√
√
√
√
√
√
产品类别
生产技术部 制造信息管理部
√
√
√
√
√
PLM √
促销类型
生产技术部 制造信息管理部
√
√
设计来源
生产技术部 制造信息管理部
√
√
水盆安装方式 生产技术部 制造信息管理部
互联网 领域
政府公共 机构领域
通过大数据,可以掌握消费者的消费行业习惯,做到精准营销。
通过大数据,分析社会问题,通过数据支持决策,可以大幅改进政府的工作效 率,实现全局化掌控,个性化区域管理,解决各种社会复杂问题,缓和各类矛 盾,实现智慧管理和智慧城市模式。
公共安全 领域
通过大数据可以建立各种犯罪模型和规则库,建立高危人群数据库,做到预防 犯罪和快速侦破,实现长治久安的管理目标。
非结构化数据:广泛存在于社交网络、物联网、 电子商务之中。伴随着社交网络、移动计算和 传感器等新技术不断产生,有报告称,超过 80%的数据属于非结构化数据。
大数据(big data, mega data),或称巨量资料,指的是需 要新处理模式才能具有更强的决策力、洞察力和流程优化 能力的海量、高增长率和多样化的信息资产。
√
√
提货方式
物流中心
物流中心
√
√
营销
经销部
财务中心
财务中心核算管控部 信息规划线
√
√
组织
线别
财务中心
财务中心核算管控部 信息规划线
√
√
营销 渠道
各事业线的营销 各事业线的营销内务
商场
内务组->财务中 组->财务中心核算管 √
√
心
控部信息规划线
门店
营销中心管理的 营销中心管理的商场
商场方人员
方人员
√
√
大数据业务解决方案指南
什么是大数据
什么是商业大数据
大数据概念的提出
最早提出“大数据”时代已经到来的机构是全球知名咨询公司麦肯锡。
2011年,麦肯锡出版了研究报告《大数据:创新、竞争和生产力的下一个新 领域》,产学研界对“大数据”的关注达到历史性新高度。
麦肯锡在研究报告中指出,数据已经渗透到每一个行业和业务职能领域,逐
大数据
数据资产
数据载体
数据处理-数据源管理
业务数据源
覆盖市场主流数据库类型
文本数据接入
EXCEL
TXT
日志
WORD
数据填报
企业报表&表单填报 管理与统计数据补充
组织建模
组织和基础数据、用户角色权限; 多口径组织体系和多版本;
业务建模
资源多级管控,多场景格式设计 中间级管理:任务再分配
报送审核
报送管理新增确认环节 报送管理支持审批
数据处理-数据集成
1.按雷士照明BI主题的数
据应用进行项目划分。梳 理对应项目ETL文件夹及 其流程级数据转换过程。
2.ETL流程设计数据质量
的初步校验。对直连及 ESB方式的数据流入做准 入控制。