大数据与数据智能化
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
认证和标 杆测试 确保行销/销售及客 户支持准备就绪 可获得性 决策评审
发布阶段
启动 量产 填充分 销渠道 执行客户 过渡计划 各部门支持 发布和发货 发布 产品
管理产品 运行情况
生命终止 决策评估
生命周期阶段
转移到 服务
结果
生命终止 决策评审
32
政府、金融、电信等行业投资建立大数据的处理分析手段,实现综合治理、业务开拓等目 标;应用到制造等更多行业。
www.gjzq.com.cn www.gjzq.com.cn
中国企业大数据现状
中国500强企业日数据生成量 企业非结构化数据越来越多
结构化数据
半结构化数据
中国500强企业数据中心数据年增长率
非结构化数据
中国企业级数据中心数据存储量正在快速增长, 非结构化数据呈指数倍增长,如果能有效的处理 和分析,非结构数据中也富含了对企业非常有价 值的信息。
www.gjzq.com.cn www.gjzq.com.cn
摩尔定律
用户在线的每一次点击,每一次评论,每一个视频点播,就是大数据的典型来源。互联网 企业之所以取得令人瞩目的成绩,其核心的本质就是包括用户网络操作的大数据,进行记 录和分析,形成用户“行为指纹”,从而洞悉用户的潜在的、真实的需求,形成预判。这 是传统企业花费重金都难以企及的梦想。所有传统的产品公司都只能沦为这种新型用户平 台级公司的附庸。
大数据热点分析
存储、分类、统计、建模、预测 的技术手段
能够在不同的数据类型中,进行交叉分析的技术,是大数据的核心技术之一。语义分析技术 、图文转换技术、模式识别技术、地理信息技术等等,都在大数据分析时获得应用。
www.gjzq.com.cn www.gjzq.com.cn
大数据为什么重要?决定企业 是否有未来、业务可延伸范围
数据在整个交付过程中是交付漩涡的中心,需求的提前获取和需求的不可 知的矛盾;大量的急单与供应柔性的冲突;及时交付与库存管理的平衡;定 制开发与定制交付的衔接;外协制造与自制的平衡;物流布局需求响应与物流 成本的合理性……,构成了大数据永恒的话题。
www.gjzq.com.cn www.gjzq.com.cn
IBM
IBM的策略是提供一个全面的方法来解决前所未有的信息爆 炸提出的挑战,因为信息量无论在流量、种类、速度还是活 力上都是爆炸式增长 IBM一直致力于扩大对包括数据仓库中的大数据、信息流和 结构化数据的分析 在过去四年中,IBM已经投入超过120亿美元进行了23项相 关并购,其中包括: • 2010年9月收购数据库分析供应商Netezza公司,花费17 亿美元 • 2010年10月收购网络分析软件供应商Coremetrics • 2009年10月收购数据分析和统计软件提供商SPSS, 花费 12亿美元 • 2009年1月收购业务规则管理软件供应商ILOG, 花费3亿4 千万美元 • 2007年花费20亿美元收购商务智能软件供应商Cognos
甲骨文
甲骨文大数据提供的数据库和数据库软件主要用于配合Sun 的硬件,特别是它的最高端服务 • 2009年7月收购专注于数据复制和实时数据集成解决方案 的私人企业GoldenGate Software
微软
微软提供了高性能计算能力,并在2005年靠Windows Compute Cluster服务器进入相关市场 最近,微软的HPC部门开发了该公司的Dryad 并行处理技术 社区技术预览(CTP),第一步是向Windows HPC Server的用 户提供处理大数据工具
www.gjzq.com.cn www.gjzq.com.cn
改变商业模式
卖license
卖服务
• 易复制、利润率高 • 边际成本为零 • 卖人头 • 盗版
因泛在计算而导致 行业需求变化
• 客户粘度高 • 软硬一体化 • 利润率较卖license低, 需要解决复用问题
从对license的需求到对整体解决方案、服务的需求
未来IT投资重心转移
结构化数据向非结 构化数据演进,使 得未来IT投资重点 不再是建系统为核 心,而是围绕大数 据为核心; 海量数据可以在各 个部门创造重大的 财物价值,未来投 资倾斜。
业绩型+趋势型
大数据技术提供商:超图软件、科大讯飞、拓尔思、新浪
IT系统改造商:汉得信息、太极股份、用友软件、东方国信、久其软件 终端提供商:广联达、大智慧、四维图新、阿里巴巴 新型展现方式:威创股份
4
奥巴马大数据战略
2012年3月29日, 白宫发布美国政府 的大数据计划 通过提高从大型复 杂的数字数据集中 提取知识和观点的 能力,承诺帮助加 快在科学与工程中 的步伐,加强国家 安全,并改变教学 研究
能源行业面临的大数据问题
大数据 挑战
数据激增,IT系统负担加重; 地域分隔,信息孤岛拉低效能; 无法共享,数据同步成为难题; 标准各异,数据规范有待统一。
大数据与数据智能化
云计算的起源
所有研究都表明,未来数年数据量会呈现指数增长。根据麦肯锡全球研究院(MGI)估计, 全球企业2010年在硬盘上存储了超过7EB(1EB等于10亿GB)的新数据,而消费者在PC和 笔记本等设备上存储了超过6EB新数据。1EB数据相当于美国国会图书馆中存储的数据的 4000多倍。事实上,我们如今产生如此多的数据,以至于根本不可能全部存储下来。例如, 医疗卫生提供商会处理掉他们所产生的90%的数据(比如手术过程中产生的几乎所有实时视 频图像)。
大数据比云计算更为可靠
云计算本身是大数据的一种业务模式
摩尔定律
集成电路芯片上所集成的电路的数目, 每隔18个月就翻一番,同时性能也提升 一倍
制造行业大数据应用场景
100%
80%
72.5%
66.3%
60% 50.9%
40% 24.8% 20%
0% 供应链优化 产品研发 仓储监控 企业统一管理
www.gjzq.com.cn www.gjzq.com.cn
Google精确掌握用户行为、获取需求
这是正向的循环,谷歌好用的、免费得软件产品,换 取对用户的理解;通过精准的广告,找到生财之道。 颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨 擘。
大数据比较
EMC
EMC的大数据解决方案专注于使组织更有效地使用他们从 不同来源产生的数据,包括网络上,网页上,消费者,监控 系统和传感器。 EMC的数据计算产品事业部正在开发分析工具以解决大数 据现象。 EMC的大数据解决方案包括40多个产品。 • 2010年7月收购数据库软件供应商Greenplum,花费3亿美 元 • 2009年七月收购数据复制解决方案提供商Data Domain, 花费24亿美元 • 不一定和大数据完全相关,EMC从2009年起收购了Archer Technologies, SourceLabs, FastScale Technology, Configuresoft, and Varonis Systems。
信息安全解决商:卫士通
重点推荐:超图、讯飞、拓尔思、威创、广联达、卫士通
www.gjzq.com.cn www.gjzq.com.cn
谢谢
概念阶段
接收大数据 要求 组建项目开发团 队(PDT) 开发初始的产品 建议及计划 概念决策评 审 扩编PDT,以开 展计划阶段工作
计划阶段
开发最终的产品 建议并制定计划 计划决 策评审 扩编PDT,以开 展开发阶段工作
开发阶段
产品详细设 计与开发 系统设 计验证 构造初 始产品
验证阶段
系统集 成测试 系统验 证测试 BETA测试,确 保符合客户需求
利用好海量的大数据,解决中国软件公司卖人头、卖授权、无粘度的商业模式,转变为以 数据服务为核心的新商业模式。
www.gjzq.com.cn www.gjzq.com.cn
数据智能化 大数据
2000
手工化向自动化转型: 成熟度低 成长阶段 中国建筑信息化投入 占总收入0.03%
政府 互联网企业
从IT系统走向大数据决策分析 未来着眼点在于服务
www.gjzq.com.cn www.gjzq.com.cn
国外什么情况?万马奔腾,抢 占大数据高地
www.gjzq.com.cn www.gjzq.com.cn
衍生于亚马逊、Google等互联网公司
互联网越来越智能
Facebook用户 产生内容,创造 需求。
Google分析用 户搜索信息,满 足用户需求 雅虎提供静态的 导航信息
金融 电信 制造业
建筑 流通
自动化走向初步信息化 快速发展 整体解决方案需求 年600亿投资规模
www.gjzq.com.cn www.gjzq.com.cn
信息化走向移动互联化 基本架构已经建立 相对成熟 500亿以上投资规模
大数据路径
www.gjzq.com.cn www.gjzq.com.cn
前瞻来看,随着互联网对网民的理解,网民对网络的反作用,互联网将变得越来越智能。 它在满足你需求的同时,也在创造新的需求。前者的代表是Google,后者的典型则是 Facebook。 谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时,把个人的 行为、喜好等信息也免费的送给了Google。因此Google的产品线越丰富,他对用户的理 解就越深入,他的广告就越精准。广告的价值就越高。
数据来源:CCW Research, 2012/4
金融行业大数据应用场景
100%
来自百度文库
80.9% 80% 73.1%
60.3% 60%
57.0%
40%
20%
0% 证券/股票投资 险种开发 信用卡欺诈 电子支付业务
数据来源:CCW Research, 2012/4
马云的判断来自于数据分析
“2008年初,阿里巴巴 平台上整个买家询盘 数急剧下滑,欧美对 中国采购在下滑。海 关是卖了货,出去以后 再获得数据;而我们提 前半年时间从询盘上 推断出世界贸易发生 变化了。”
www.gjzq.com.cn www.gjzq.com.cn
大数据在中国的机遇?投资重 点\规模巨大\长期
www.gjzq.com.cn www.gjzq.com.cn
国内各地制定云计算“十二五”规划
中国各地制定或公布了云计算、物联网等产业规划; 云计算、物联网、社交化媒体、GIS为大数据提供了丰富的数据来源。
www.gjzq.com.cn www.gjzq.com.cn
美国IT公司开始意识到大数据技术能够 为公司创造价值;
国外已经开始投资应用
美国国务院采用大数据技术开发新的美 国护照系统。
大数据公司引入汽车行业高管人员扩展营销业务;
IBM宣布投资1亿美元用于大数据研究;
大数据组成?技术\改造\数据 提供商\展现方式
发布阶段
启动 量产 填充分 销渠道 执行客户 过渡计划 各部门支持 发布和发货 发布 产品
管理产品 运行情况
生命终止 决策评估
生命周期阶段
转移到 服务
结果
生命终止 决策评审
32
政府、金融、电信等行业投资建立大数据的处理分析手段,实现综合治理、业务开拓等目 标;应用到制造等更多行业。
www.gjzq.com.cn www.gjzq.com.cn
中国企业大数据现状
中国500强企业日数据生成量 企业非结构化数据越来越多
结构化数据
半结构化数据
中国500强企业数据中心数据年增长率
非结构化数据
中国企业级数据中心数据存储量正在快速增长, 非结构化数据呈指数倍增长,如果能有效的处理 和分析,非结构数据中也富含了对企业非常有价 值的信息。
www.gjzq.com.cn www.gjzq.com.cn
摩尔定律
用户在线的每一次点击,每一次评论,每一个视频点播,就是大数据的典型来源。互联网 企业之所以取得令人瞩目的成绩,其核心的本质就是包括用户网络操作的大数据,进行记 录和分析,形成用户“行为指纹”,从而洞悉用户的潜在的、真实的需求,形成预判。这 是传统企业花费重金都难以企及的梦想。所有传统的产品公司都只能沦为这种新型用户平 台级公司的附庸。
大数据热点分析
存储、分类、统计、建模、预测 的技术手段
能够在不同的数据类型中,进行交叉分析的技术,是大数据的核心技术之一。语义分析技术 、图文转换技术、模式识别技术、地理信息技术等等,都在大数据分析时获得应用。
www.gjzq.com.cn www.gjzq.com.cn
大数据为什么重要?决定企业 是否有未来、业务可延伸范围
数据在整个交付过程中是交付漩涡的中心,需求的提前获取和需求的不可 知的矛盾;大量的急单与供应柔性的冲突;及时交付与库存管理的平衡;定 制开发与定制交付的衔接;外协制造与自制的平衡;物流布局需求响应与物流 成本的合理性……,构成了大数据永恒的话题。
www.gjzq.com.cn www.gjzq.com.cn
IBM
IBM的策略是提供一个全面的方法来解决前所未有的信息爆 炸提出的挑战,因为信息量无论在流量、种类、速度还是活 力上都是爆炸式增长 IBM一直致力于扩大对包括数据仓库中的大数据、信息流和 结构化数据的分析 在过去四年中,IBM已经投入超过120亿美元进行了23项相 关并购,其中包括: • 2010年9月收购数据库分析供应商Netezza公司,花费17 亿美元 • 2010年10月收购网络分析软件供应商Coremetrics • 2009年10月收购数据分析和统计软件提供商SPSS, 花费 12亿美元 • 2009年1月收购业务规则管理软件供应商ILOG, 花费3亿4 千万美元 • 2007年花费20亿美元收购商务智能软件供应商Cognos
甲骨文
甲骨文大数据提供的数据库和数据库软件主要用于配合Sun 的硬件,特别是它的最高端服务 • 2009年7月收购专注于数据复制和实时数据集成解决方案 的私人企业GoldenGate Software
微软
微软提供了高性能计算能力,并在2005年靠Windows Compute Cluster服务器进入相关市场 最近,微软的HPC部门开发了该公司的Dryad 并行处理技术 社区技术预览(CTP),第一步是向Windows HPC Server的用 户提供处理大数据工具
www.gjzq.com.cn www.gjzq.com.cn
改变商业模式
卖license
卖服务
• 易复制、利润率高 • 边际成本为零 • 卖人头 • 盗版
因泛在计算而导致 行业需求变化
• 客户粘度高 • 软硬一体化 • 利润率较卖license低, 需要解决复用问题
从对license的需求到对整体解决方案、服务的需求
未来IT投资重心转移
结构化数据向非结 构化数据演进,使 得未来IT投资重点 不再是建系统为核 心,而是围绕大数 据为核心; 海量数据可以在各 个部门创造重大的 财物价值,未来投 资倾斜。
业绩型+趋势型
大数据技术提供商:超图软件、科大讯飞、拓尔思、新浪
IT系统改造商:汉得信息、太极股份、用友软件、东方国信、久其软件 终端提供商:广联达、大智慧、四维图新、阿里巴巴 新型展现方式:威创股份
4
奥巴马大数据战略
2012年3月29日, 白宫发布美国政府 的大数据计划 通过提高从大型复 杂的数字数据集中 提取知识和观点的 能力,承诺帮助加 快在科学与工程中 的步伐,加强国家 安全,并改变教学 研究
能源行业面临的大数据问题
大数据 挑战
数据激增,IT系统负担加重; 地域分隔,信息孤岛拉低效能; 无法共享,数据同步成为难题; 标准各异,数据规范有待统一。
大数据与数据智能化
云计算的起源
所有研究都表明,未来数年数据量会呈现指数增长。根据麦肯锡全球研究院(MGI)估计, 全球企业2010年在硬盘上存储了超过7EB(1EB等于10亿GB)的新数据,而消费者在PC和 笔记本等设备上存储了超过6EB新数据。1EB数据相当于美国国会图书馆中存储的数据的 4000多倍。事实上,我们如今产生如此多的数据,以至于根本不可能全部存储下来。例如, 医疗卫生提供商会处理掉他们所产生的90%的数据(比如手术过程中产生的几乎所有实时视 频图像)。
大数据比云计算更为可靠
云计算本身是大数据的一种业务模式
摩尔定律
集成电路芯片上所集成的电路的数目, 每隔18个月就翻一番,同时性能也提升 一倍
制造行业大数据应用场景
100%
80%
72.5%
66.3%
60% 50.9%
40% 24.8% 20%
0% 供应链优化 产品研发 仓储监控 企业统一管理
www.gjzq.com.cn www.gjzq.com.cn
Google精确掌握用户行为、获取需求
这是正向的循环,谷歌好用的、免费得软件产品,换 取对用户的理解;通过精准的广告,找到生财之道。 颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨 擘。
大数据比较
EMC
EMC的大数据解决方案专注于使组织更有效地使用他们从 不同来源产生的数据,包括网络上,网页上,消费者,监控 系统和传感器。 EMC的数据计算产品事业部正在开发分析工具以解决大数 据现象。 EMC的大数据解决方案包括40多个产品。 • 2010年7月收购数据库软件供应商Greenplum,花费3亿美 元 • 2009年七月收购数据复制解决方案提供商Data Domain, 花费24亿美元 • 不一定和大数据完全相关,EMC从2009年起收购了Archer Technologies, SourceLabs, FastScale Technology, Configuresoft, and Varonis Systems。
信息安全解决商:卫士通
重点推荐:超图、讯飞、拓尔思、威创、广联达、卫士通
www.gjzq.com.cn www.gjzq.com.cn
谢谢
概念阶段
接收大数据 要求 组建项目开发团 队(PDT) 开发初始的产品 建议及计划 概念决策评 审 扩编PDT,以开 展计划阶段工作
计划阶段
开发最终的产品 建议并制定计划 计划决 策评审 扩编PDT,以开 展开发阶段工作
开发阶段
产品详细设 计与开发 系统设 计验证 构造初 始产品
验证阶段
系统集 成测试 系统验 证测试 BETA测试,确 保符合客户需求
利用好海量的大数据,解决中国软件公司卖人头、卖授权、无粘度的商业模式,转变为以 数据服务为核心的新商业模式。
www.gjzq.com.cn www.gjzq.com.cn
数据智能化 大数据
2000
手工化向自动化转型: 成熟度低 成长阶段 中国建筑信息化投入 占总收入0.03%
政府 互联网企业
从IT系统走向大数据决策分析 未来着眼点在于服务
www.gjzq.com.cn www.gjzq.com.cn
国外什么情况?万马奔腾,抢 占大数据高地
www.gjzq.com.cn www.gjzq.com.cn
衍生于亚马逊、Google等互联网公司
互联网越来越智能
Facebook用户 产生内容,创造 需求。
Google分析用 户搜索信息,满 足用户需求 雅虎提供静态的 导航信息
金融 电信 制造业
建筑 流通
自动化走向初步信息化 快速发展 整体解决方案需求 年600亿投资规模
www.gjzq.com.cn www.gjzq.com.cn
信息化走向移动互联化 基本架构已经建立 相对成熟 500亿以上投资规模
大数据路径
www.gjzq.com.cn www.gjzq.com.cn
前瞻来看,随着互联网对网民的理解,网民对网络的反作用,互联网将变得越来越智能。 它在满足你需求的同时,也在创造新的需求。前者的代表是Google,后者的典型则是 Facebook。 谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时,把个人的 行为、喜好等信息也免费的送给了Google。因此Google的产品线越丰富,他对用户的理 解就越深入,他的广告就越精准。广告的价值就越高。
数据来源:CCW Research, 2012/4
金融行业大数据应用场景
100%
来自百度文库
80.9% 80% 73.1%
60.3% 60%
57.0%
40%
20%
0% 证券/股票投资 险种开发 信用卡欺诈 电子支付业务
数据来源:CCW Research, 2012/4
马云的判断来自于数据分析
“2008年初,阿里巴巴 平台上整个买家询盘 数急剧下滑,欧美对 中国采购在下滑。海 关是卖了货,出去以后 再获得数据;而我们提 前半年时间从询盘上 推断出世界贸易发生 变化了。”
www.gjzq.com.cn www.gjzq.com.cn
大数据在中国的机遇?投资重 点\规模巨大\长期
www.gjzq.com.cn www.gjzq.com.cn
国内各地制定云计算“十二五”规划
中国各地制定或公布了云计算、物联网等产业规划; 云计算、物联网、社交化媒体、GIS为大数据提供了丰富的数据来源。
www.gjzq.com.cn www.gjzq.com.cn
美国IT公司开始意识到大数据技术能够 为公司创造价值;
国外已经开始投资应用
美国国务院采用大数据技术开发新的美 国护照系统。
大数据公司引入汽车行业高管人员扩展营销业务;
IBM宣布投资1亿美元用于大数据研究;
大数据组成?技术\改造\数据 提供商\展现方式