开源大数据技术生态与发展

BI…

/2015/02/processing-frameworks-for-hadoop.html

计算 

Compute 

云服务器·∙BCC  Baidu  C loud  C ompute 

负载均衡·∙BLB  Baidu  L oad  B alance 

存储

Storage

对象存储·∙BOS 

Baidu  O bject  S torage 

云磁盘·∙CDS 

Cloud  D isk  S ervice 

内容分发网络·∙CDN 

数据库

Database

关系型数据库·∙RDS 

Relational  D atabase  S ervice 

简单缓存服务·∙SCS 

Simple  C ache  S ervice 

大数据

Big Data

百度MapReduce·∙BMR 

Baidu  M ap  R educe 

智能

Intelligence

百度机器学习平台 

Baidu  M achine  L earning 

百度OLAP服务 

Baidu  D ata  P alo 

百度开放云  –  大数据+智能 

        B MR（已开放） 

        P ALO（邀请内测中） 

        B ML（邀请内测中）  更多内部大数据产品将对外开放服务 

开放云Hadoop/Spark服务  -  B MR 

依托百度多年Hadoop/Spark研发、实践经验 

全集群10万台，单集群最大超过1.3W，全球最大Hadoop/Spark集群  2014年Sort  B enchmark大赛全球排名第一 

自研Hadoop性能超越开源Hadoop  50% 

日处理Task超过百万，日均CPU利用率80% 

开放云Hadoop/Spark服务  -  B MR  国内首个云端全托管的Hadoop/Spark服务  按需部署（组件、集群规模、服务器配置） 

用户专享（独占集群，安全可靠） 

弹性扩展（按需随时伸缩计算节点） 

超高性能（内置百度高性能计算引擎） 

兼容开源（完全兼容开源Hadoop/Spark生态） 

Summary 

从IT到DT 

大数据典型特征（4V） 

大数据应用模型 

开源大数据协议栈 

以Hadop、Spark为核心的开源大数据生态，选择适合的组件  百度开放云：大数据+智能  助力互联网+