FusionStorage分布式存储解决方案介绍

...
FusionStorage分布式存储资源池
SSD HDD SSD HDD SSD HDD
典型硬件2： 刀片式服务器 典型硬件1：机架式服务器
8
通用X86服务器硬件要求
组件 物理形态 处理器 内存 存储 规格 机架服务器或刀片服务器，X86架构 Intel Xeon E5-2600/4600 系列处理器，Intel Xeon E7-4800/8800 系列处理器 按照每TB硬盘1GB内存，推荐》64G内存 1、存储节点至少部署3个，配置RAID卡，支持RAID0/1，每台存储节点至少预留2块本地硬盘用于安装OS 2、如果管理节点与存储节点器合部，分布式资源池至少15个2.5/3.5 英寸SAS/SATA/SSD硬盘，其中：至少 12个硬盘用于资源池数据盘，至少3个硬盘用于部署ZK盘 如果管理节点与存储节点器分离部署，分布式资源池至少12个2.5/3.5 英寸SAS/SATA/SSD硬盘，其中：至 少12个硬盘用于资源池数据盘，ZK盘采用分区的方式部署，与本地OS盘共用 每存储服务器用于FusionStorage存储平面带宽不低于4Gb，例如4×1Gb或者2×10Gb 至少有一个SSD卡或SSD盘作为写cache
RDS
Map Reduce
SimpleDB
AutoScaling
ELB
SAN
SQS
Cloud watch
S3
Cloud Front
AMAZON S3, Dynamo, EBS
EC2 Instances
EBS
VPC
Snapshots
亚马逊物理基础设施
LAMP
Load Balancer Web Server (PHP)
EMC ScaleIO
http://www.emc.com/storage/scalei o/index.htm
4
HP VSA
http://www8.hp.com/us/en/products/d ata-storage/storevirtual-vsa.html
分布式存储的市场和需求
现在
http://wikibon.org/wiki/v/The_Rise_of_Server_SAN
…
软件定义云数据中心
App Y X86
业务驱动 的云基础 设施
计算
负载
App1
存储 网络 App2 App4
FC
IP
App3 业务驱动的基础设施 基于SLA控制平面 存储池
VMVMVM PMPM
计算池
高端 存储
高端 存储
中低端 中低端 存储 存储
VMVMVM PMPM
X86 / ARM 硬件池 融合IP网络 (物理+虚拟）
FusionStorage分布式存储 解决方案介绍
Content
1 2 3
存储领域的技术现状与发展趋势
Hale Waihona Puke Baidu
FusionStorage分布式存储系统 FusionStorage 核心价值
4
FusionStorage应用案例
1
业界趋势：分布式、软件定义与大规模池化
传统数据中心
App 1 IBM App 2 IBM App X X86
Google Infrastruc ture
Google BigQuery Load Balancing across App Engine Instances Auto Scaling Google Cloud Static content Storage serving and caching MapReduce Dos protection Pipeline Monitoring and Management
FaceBook MySQL, MemeCached
+ Services
MySQL Memcached Service (Slow, persistent) (fast simple) (fast complicated)
Google GFS, Map Reduce, Big Query
3
传统厂商：已经开发出分布式软件定义存储的产品
5
Content
1 2 3
存储领域的技术现状与发展趋势 FusionStorage分布式存储系统 FusionStorage 核心价值
4
FusionStorage应用案例
6
FusionStorage分布式存储解决方案总体架构图
应 用 层
虚 拟 化 层
HANA
支持多种虚拟化平台 (FusionSphere/VMware)
® ®
网络接口 Cache
凡是满足上述硬件要求的X86服务器，都满足了作为FusionStorage存储节点的基本要 求。 但是还是经过FusionStorage认证，经过认证后就可以作为正式商用硬件形态。
9
FusionStorage关键规格和特性
软件特性：
• 块存储功能， SCSI、iSCSI接口； • RAID10， 3份拷贝,…； • 存储快照； • 存储瘦分配； • 存储链接克隆； • 存储SSD Cache和存储自动分级； • 数据备份
大规模扩展、资源大范围共享、业务敏捷、自动化和SLA的保障都不再绑定和依赖于硬件
2
互联网巨擘：均采用分布式存储的大规模池化技术
Payment: FPS/ Devpay
Google Cloud Data store Memcache APP Task Queues APP Scheduted Tasks APP Google Compute Engine API
FusionStorage支持的介质、网络和Cache类型
类别 存储介质 规格说明 SATA：使用在大容量场景 NL-SAS：使用在大容量场景 SAS：使用在性能相对较高的场景 SSD卡：使用在高性能场景 SSD盘：使用在高性能场景
数据库物理部署
FusionStorage分布式存储资源池
7
FusionStorage分布式存储硬件形态
Server1 VM VM Server2 VM VM ServerN VM VM

FusionStorage在通用x86服务器上
部署分布式存储软件，把所有服务器 的本地硬盘组织成一个虚拟存储资源 池，提供块存储接口
部分关键规格：
指标名称 指标值
单个资源池最大存储节点数 单个资源池最大硬盘数 最大单卷容量 每TB数据恢复时间 数据冗余模式 单个资源池最大逻辑卷数量 单卷链接克隆比例
256 12~96块硬盘（2份拷贝） 12~2000块硬盘(3份拷贝) 256TB 30分钟 2副本、3副本 65000个 256
10