华为RAID2.0+技术培训胶片

合集下载

T8000 Training Docs L2-4_RAID1制作部分

T8000 Training Docs L2-4_RAID1制作部分

HUAWEI Confidential
Page 30
删除已有的RAID关系后硬盘数据会不会丢失
如果单板上已经做过RAID1并且安装好了操作系统,然后在LSI控制器配 置界面中选择“Delete Array”删除了RAID,两块硬盘上面的数据均不会 丢失,用任何一个硬盘都可以单独启动操作系统(如果两块硬盘都插在 单板上,则从Slot Num比较小那块硬盘引导)。因为“Delete Array”操 作仅删除两块硬盘的RAID关系,并不破坏硬盘数据。
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 19
创建RAID1
此处如果按“D”,将删除两块硬盘 上所有的数据,创建一个新的RAID1。 如果按“M”,表示保留上一步选定的 主盘上的数据,并将其同步到从盘。
HUAWEI TECHNOLOGIES Co., Ltd.

HUAWEI Confidential
Page 20
创建RAID1
使用“↓”切换到Slot Num为3硬盘 的“RAID Disk”选项,对Slot Num 为3的硬盘进行设定。
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 21
创建RAID1
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 16
创建RAID1
如果需要创建RAID的硬盘是两块新硬盘,或者是两块有数据,但之前没 有创建RAID关系的硬盘,选择“RAID Properties”回车后,将进入如下 界面:
HUAWEI TECHNOLOGIES Co., Ltd.

华为服务器主打胶片_图文

华为服务器主打胶片_图文
华为服务器主打胶片_图文.pptx
1 客户挑战和发展趋势 2 华为服务器解决方案 3 创新增加客户价值 4 市场进展和全球案例
转型呼唤IT重构
完善开放平台
匹配云、大数据等新技术
降低TCO
传统IOE架构TCO高企
简化架构
提升管理和维护效率
应用加速
采用闪存技术、分布式架构
“云计算、大数据、移动、社 交等新技术和应用需要开放、 分布式,可灵活扩展的架构”
ES3500P/ES3600P V3
刀片 服务器
机架 服务器
FusionServer
NVMe SSD卡
E9000
4P
2 x 2P
12U 8/16/32节点
CH242 V3
CH140 V3
CH226 V3
2P
CH222 V3
CH220 V3
CH121 V3
高密度 服务器
X6800
4U 4/8节点
8U 8P
Latency
SATA HDD >100ms
SAS HDD >10ms
SATA SSD >100µs
SATA HDD SAS HDD
SATA SSD
PCIe SSD
PCIe SSD >10µs
DRAM >10ns
Memory
SRAM ns
CPU <50MB <32GB传统小机的 OPEX居高不下,去IOE是企业 IT重构的必经之路”
“计算、存储、网络融合的架 构能实现快速部署和一体化管 理,提高IT维护人员效率”
“I/O成为瓶颈, 闪存技术和分 布式架构是消除I/O瓶颈的有效 手段”
从封闭到开放架构

华为存储RAID2.0技术细节

华为存储RAID2.0技术细节

存储阵列
Pool 0

Pool 1 …..…

Pool N

Pool示意图
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 5
Huawei Enterprise A Better Way
Pool

Pool即存储池,由存储阵列中多 个硬盘组成,硬盘可选择SSD、 SAS、NL-SAS中的一种或者多种 。 存储系统可划分为多个Pool,每 个Pool分别服务于不同的应用, 整个存储系统也可只有一个Pool 不同Pool之间故障和管理相互隔
Page 14
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Huawei Enterprise A Better Way
Copyright© 2012 Huawei Technologies Co., Ltd. All Rights Reserved. The information in this document may contain predictive statements including, without limitation, statements regarding the future financial and operating results, future product portfolio, new technology, etc. There are a number of factors that could cause actual results and developments to differ materially from those expressed or implied in the predictive statements. Therefore, such information is provided for reference purpose only and constitutes neither an offer nor an acceptance. Huawei may change the information at any time without notice.

华为IT产品与解决方案高层主打胶片

华为IT产品与解决方案高层主打胶片
企业数据中心 关键应用 数据库加速
• 高性能数据库平台
业界最快交换网络,56Gbps InfiniBand 全SSD 分布式存储
HPC

FusionCube 9000 FusionCube 6000
高度集成的虚拟化平台
计算、存储、网络、管理、虚拟化超融合 预集成、预安装、整柜交付
10倍
应用加速
11 分钟
SR-IOV保障虚拟机直接读写SSD物理空间
• 带外管理,BMC智能管理,图形界面更简单
#1
读写带宽和IOPS性能
800K IOPS
全随机4KB稳定读
3.2 TB
单卡/盘最大容量
200万小时
平均无故障时间(MTBF)
27
OceanStor融合存储全景图
融合存储解决方案 大数据存储解决方案 闪存加速解决方案
10
快速成长:服务器
全球第四
连续十二个季度全球服务器发货量
HPE Dell Lenovo Huawei Inspur Cisco
Source: Servers_Marketshare_WW_by_Region_2016Q2, Gartner
11
快速成长:服务器
4路服务器全球发货量(2016 H1)
高校合作
美国 • UC Berkeley AMP Lab: Spark, Parallel Computing • Stanford ONRC Lab: SDN SEDCL: NVM • CMU New memory • UCSC Cold Storage 欧洲 • UK Imperial College London: Big data • Swiss EPFL: Big data • German CASED Institute: Cloud Security 亚洲 • Singapore DSI: NVM • HKUST: RAM Computing • Beijing THU: Cloud • Zhejiang University: VDI

华为服务器产品族主打胶片介绍-V2.0

华为服务器产品族主打胶片介绍-V2.0

高密度计算性能,满足IT基础应用的良好 扩展能力 多种可选的本地存储方案,适应对容量、 性能和成本不同需求 关键部件冗余设计,保证设备的高可靠性
(图片待补充)

应用场景及价值 RH1285V2规格
• • • • • • •
2 * Intel® Xeon E5-2400 CPU 12个RDIMM/LRDIMM内存插槽 8*2.5 ’ or 4*3.5 ’ SAS/SATA硬盘,支持RAID0/1/5 支持1024M Cache,电池/电容可选 板载2 个网口, 1个管理接口,2个 PCIe 8x 插槽 支持TPM、内置U盘/USB Flash卡 2个冗余热插拔电源
RH5885(2013)
BH620V1/V2 BH641(2013) BH640V2 X6000
刀片
4 CPU(E7-4800) 4 CPU(E5-4600)
定制化 机柜
4 Nodes/2U
80 Nodes/Cabinet
IDataplex
C6100
X8000
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 11
产品市场定位
RH5485V2 RH2488V2 RH2485V2
高端4插槽产品,华为最高端X86产品,主打最高 性能、扩展性、可靠性要求的市场 中端4插槽产品,满足需求高端处理器,但是价格、 空间要求严苛的市场 低端4插槽产品,适合计算和内存都密集应用,同 时价格、空间要求严苛的市场。 高端2U机架产品,2插槽服务器市场适用性最广泛 产品。 低端2U机架产品,主打IT基础和超大本地存储应 用需求。 低端1U机架产品,主打IT基础和高密应用需求

华为服务器服务工程师培训教材基础产品介绍及硬件拆装培训PPT演示课件

华为服务器服务工程师培训教材基础产品介绍及硬件拆装培训PPT演示课件

HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 10
E6000 V2刀片产品概述
E6000 V2刀片单板概述-单板功能(处理、接口、管理) 单板处理功能 CPU核数、内存通道和channel、PCIE的链路和速率(3.0) 更多详细信息参考白皮书:
NEM2/3和NEM4/5单元连接,实现业务交换与冗余; 5. 每个服务器单元通过管理通道与2个SMM机框管理单元连接,实现机框内单板管理; 7. 业务交换可根据实际应用,采用主备用或负载均衡方式; 8. NIC交换通道采用的电气接口为 BASE-KX自适应; 9. 扣卡交换通道采用的电气接口可根据实际应用,采用SERDES、FC或其他;
Huawei Confidential
PCIE Page 9
E6000 V2刀片产品概述
E6000 V2刀片单板概述-在E6000系统中的位置和作用 单板主要作用
1. E6000通用业务处理平台是基于多平面、双星型交换结构的平台; 2. 单板插在E6000通用业务处理平台的服务器单元槽位,占用1个槽位空间; 3. 每个服务器单元通过1个双端口的GE芯片分别与NEM0/1单元连接,实现业务交换与冗 余; 4. 每个服务器单元通过两个扣卡,扩展1X/2X/4X Serdes(或其它协议类型)各自分别与
E6000 V2刀片产品概述
E6000 V2刀片产品的种类 BH622 V2 BH640 V2 BH620 V2 BH621 V2
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 5
E6000 V2刀片产品概述
E6000 V2刀片产品的种类 BH622 V2 BH640 V2 BH620 V2 BH621 V2

RAID2.0

RAID2.0

1、在RADI2.0+中,把硬盘域内每个硬盘切分为固定64MB的块(CK),硬盘域内同种类型的硬盘被划分为一个个的Disk Group(DG),从同一个DG上随机选择多个硬盘,每个硬盘选取CK按照RAID算法组成Chunk Group(CKG),CKG被划分为固定大小的Extent, Thick LUN以Extent为单位映射到LUN, Grain在Extent的基础上进行更细粒度的划分,Thin LUN以Grain 为单位映射到LUN。

(1)Disk Domain(磁盘域),一个硬盘域上可以创建多个存储池(Storage Pool)一个硬盘域的硬盘可以选择SSD、SAS、NL-SAS中的一种或者多种,不同硬盘域之间是完全隔离的,包括故障域、性能和存储资源等。

(2)Storage Pool(存储池)& Tier,一个存储池基于指定的一个硬盘域创建,可以从该硬盘域上动态的分配Chunk(CK)资源,并按照每个存储层级(Tier)的“RAID策略”组成Chunk Group(CKG)向应用提供具有RAID保护的存储资源(3)Disk Group(DG),由硬盘域内相同类型的多个硬盘组成的集合,硬盘类型包括SSD、SAS和NL-SAS三种。

(4)LD(逻辑磁盘),是被存储系统所管理的硬盘,和物理硬盘一一对应。

(5)Chunk(CK),是存储池内的硬盘空间切分成若干固定大小的物理空间,每块物理空间的大小为64MB,是组成RAID的基本单位。

(6)Chunk Group(CKG),是由来自于同一个DG内不同硬盘的CK按照RAID算法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。

(7)Extent,是在CKG基础上划分的固定大小的逻辑存储空间,大小可调,是热点数据统计和迁移的最小单元(数据迁移粒度),也是存储池中申请空间、释放空间的最小单位。

(8)Grain,在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些块称之为Grain,Thin LUN以Grain为粒度进行空间分配,Grain内的LBA是连续的。

存储产品渠道培训胶片2012.08

存储产品渠道培训胶片2012.08
Data Center Storage
低TCO、低PUE 快速部署、模块化交付
应用存储

VIS6000

HDP3500
存 储
Virtual Intelligent Storage 领先架构
强大虚拟能力
Huawei Symantec Data Protection 集成BE和WSS
主流存储厂商都参加SPC-1和SPEC测试
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
全方位的兼容性测试&解决方案验证中心
在成都成立了存储兼容性测试实验室、存储性能测试实验室及解决方案验证中心。
兼容性实验室目前已经完成了所有主流产品互操作性测试;解决方案验证中心负 责对典型解决方案进行全方位的验证。
实验室:建立了中国首个“容灾备份和云存储实验室”,并
投入1000多万美金成立首个存储兼容性测试实验室、存
储性能测试实验室及解决方案验证中心。
2008
2006
2009
•全面致力于云存储、云 计算、SSD;高端存储 和增值业务及其解决方 案
•推出中高端SAN 、NAS产品
2002
•存储技术预研
2003
HUAWEI TECHNOLOGIES CO., LTD.
https:///member_com/member_directory
Huawei Confidential
华为存储性能领先—SPC-1、SPEC测试
SAN标准性能测试
• 存储性能委员会(SPC:Storage Performance Council)的SPC-1测试 • 存储SPC-1认证,度量SAN阵列在OLTP、Database和Email三种应用的性能表现 • SPC-1 IOPS:衡量系统平均延迟小于30毫秒的系统最大IOPS性能,越高越好 • SPC-1 $/IOPS:衡量系统单位IOPS用户付出的费用,越低越好 • /results/benchmark_results_spc1#a00107 • 华为S6800T/S5600T在IOPS和$/IOPS测试中都取得同档次领先的成绩

(完整版)华为RAID2.0技术细节

(完整版)华为RAID2.0技术细节

RAID 2.0为增强型RAID技术,有效解决了机械硬盘容量越来越大,重构一块机械硬盘所需时间越来越长,传统RAID组重构窗口越来越大而导致重构期间又故障一块硬盘而彻底丢失数据风险的问题。

RAID 2.0+在RAID 2.0的基础上提供了更细粒度的资源颗粒,形成存储资源的标准分配及回收单位,类似计算虚拟化中的虚拟机。

这些容量单位一致的虚拟块构成了一个统一的存储资源池,所有应用、中间件、虚拟机、操作系统所需的资源可以在这个资源池中按需分配及回收。

对于一个存储系统而言,其可靠性的最重要标志就是其RAID重构时间,时间越短,重构完成前再次坏盘的概率越低。

早期存储系统大多使用FC盘且容量仅为几十个G,因此重构时间较短,重构中再次坏盘的概率低。

但随着近年来硬盘容量的快速增长,硬盘读写速度受磁盘转速等多方面影响增长缓慢,已无法满足系统对重构时间的要求。

以一块2TB 7.2K rpm盘为例,重构时平均写入速度为30M/s左右,完成重构时间长达18个小时,因此重构过程中出现新的坏盘概率到大大增加,数据丢失的风险也大大增加。

传统RAID技术已无法满足在系统中使用现代大容量硬盘的要求。

在过去的几年里,许多存储领域的创新型初创公司如HUAWEI、3PAR等公司已经将磁盘阵列从基于磁盘的RAID发展成更为灵活的RAID 2.0及RAID 2.0+技术,不但整合了数据保护和跨磁盘规划数据分布的功能,而且充分满足虚拟机环境下对存储的应用需求。

传统存储的底层硬盘管理在基于外部控制器的硬盘存储系统(External Controller-Based disk storage system)中,RAID(Redundant Array of Independent Disks)是最基础的部分,RAID把多个硬盘组合成为一个逻辑扇区,因此,操作系统只会把它当作一个硬盘,其基本原理是把相同的数据存储在多个硬盘的不同地方。

RAID技术主要包含RAID 0~RAID 60等数个规范,在实际应用中使用较多的是RAID 1,RAID 5,RAID 6,RAID10,RAID 50,RAID 60 …RAID的两大特点:1、提高传输速率:通过在多个硬盘上同时存储和读取数据来大幅提高存储系统的数据吞吐量(Throughput)。

华为OceanStor 18000系列高端存储系统RAID2.0+技术白皮书

华为OceanStor 18000系列高端存储系统RAID2.0+技术白皮书

华为OceanStor 18000系列高端存储系统RAID2.0+技术白皮书文档版本01 发布日期 2013-8-12华为技术有限公司版权所有© 华为技术有限公司2013。

保留一切权利。

非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形式传播。

商标声明和其他华为商标均为华为技术有限公司的商标。

本文档提及的其他所有商标或注册商标,由各自的所有人拥有。

注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。

除非合同另有约定,华为公司对本文档内容不做任何明示或默示的声明或保证。

由于产品版本升级或其他原因,本文档内容会不定期进行更新。

除非另有约定,本文档仅作为使用指导,本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。

华为技术有限公司地址:深圳市龙岗区坂田华为总部办公楼邮编:518129网址:客户服务邮箱:support@客户服务电话:4008302118目录1 RAID2.0+概述 (1)1.1 RAID技术演变 (1)1.2 华为RAID2.0+简介 (2)2 RAID2.0+原理 (3)2.1 RAID2.0+基本原理 (3)2.2 RAID2.0+实现框架 (4)2.3 RAID2.0+逻辑对象 (5)3 RAID2.0+技术亮点 (1)3.1 安全可信 (1)3.1.1 自动负载均衡,降低整体故障率 (1)3.1.2 快速精简重构,改善双盘失效率 (2)3.1.3 故障自检自愈,保证系统可靠性 (3)3.2 弹性高效 (4)3.2.1 虚拟池化设计,降低存储规划管理难度 (4)3.2.2 增加LUN所跨硬盘数,大幅提升单LUN性能 (4)3.2.3 空间动态分布,灵活适应业务变化 (5)4 附录A:RAID2.0+ FAQ (6)5 附录B:RAID2.0+周边资源 (9)6 缩略语表/Acronyms and Abbreviations (10)修订记录/Change History1 RAID2.0+概述1.1 RAID技术演变RAID(Redundant Array of Independent Disk,独立冗余磁盘阵列)技术诞生于1987年,最初由美国加州大学的伯克利分校提出,其基本思想是把多个独立的物理硬盘通过相关的算法组合成一个虚拟的逻辑硬盘,从而提供更大容量、更高性能,或更高的数据容错功能。

华为RAID2.0+技术培训胶片

华为RAID2.0+技术培训胶片
Chunk Group简称CKG,是由来自于同一个DG内不同硬盘的CK按照RAID算 法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。 一个CKG中的CK均来自于同一个DG中的硬盘 CKG具有RAID属性(RAID属性实际配置在Tier上) CK和CKG均属于系统内部对象,由OceanStor高端存储系统自动完成配置, 对外不体现。
一个Extent归属于一个Volume或一个LUN
Extent大小在创建存储池时可以进行设置,创建之后不可更改 不同存储池的Extent大小可以不同,但同一存储池中的Extent大小是统一的
16
Grain
在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些 块称之为Grain。Thin LUN以Grain为粒度进行空间分配,Grain内的LBA,改善双盘失效率
传统RAID重构原理
安全可信 RAID2.0+重构原理
弹性高效
Few-to-One Rebuild hotspots & long rebuild exposure
21
Many-to-Many Rebuild parallel rebuilds in less time
Release Data
2013-8-20
1
目录
1 2 3 4
RAID技术演变 RAID2.0+原理及概念
RAID2.0+技术亮点 块虚拟化技术竞争对比
2
什么是RAID?
RAID (Redundant Array of Independent Disks)即独立磁盘冗余阵列,1987年由美国加州大学
12
LD(逻辑磁盘)
Logical Drive(LD)即逻辑磁盘,是被OceanStor高端存储系统所管理的硬盘, 和物理硬盘一一对应。

华为ppt胶片制作素材库

华为ppt胶片制作素材库

MSR多业务交换机 (ATM/IP/MPLS)
路由器
ATM交换机
MD
MPLS
NAS
VOATM GW
VOIP GW
MSTP
Cach (缓存)
原则上产品 都要用右边 的符号,但 对于无法用 符号表达的 就用此色块 示意,标上 名称即可。
SIPP
OLT
MA 5100
MA 5200
ONU作图元素(衬底)
文字介绍的底板元素,以便突出重要的说明文字 (深底色的放文字时将字反白,非突出的文字不用)
作图元素(云朵) 作图元素(云朵)
用途:突出网络的概念 注意形状、色彩的搭配
作图元素
终端类图标
终端类图标
无法显示图像。计算机可能没有足够的内存以打开该图像,也可能是该图像已 损坏。请重新启动计算机,然后重新打开该文件。如果仍然显示红色 “x”,则可 能需要删除该图像,然后重新将其插入。
Consumer
ATM
供应链
ISV
ASP
NSP
Portal
User
NSP delivers guaranteed, application-level performance
宽带上网
作图元素(衬底) 作图元素(衬底)
文字介绍的底板元素,以便突出重要的说明文字 (深底色的放文字时将字反白,非突出的文字不用)
网络管理平台 SOHO
TELLIN 移动智能网
Internet 示意的 Internet
Service-Server
企业内部网
移动 光纤符号
IP Hotel PSTN
ISP/IC
PORTAL
CSP
ASP
Product Content Application

XVE RAID2 0技术介绍V1 2

XVE RAID2 0技术介绍V1 2

硬盘0
硬盘1
硬盘2
硬盘3
硬盘4
Disk Group
HUAWEI TECHNOLOGIES CO., LTD.
Chunk/CKG
Chunk(CK):Disk Group内的硬
盘空间会被切分成若干小块的物理空 间。每块物理空间的大小为64MB。
CKG0 CKG1
Chunk Group(CKG):来自于不
Security Level:

XVE RAID2.0技术介绍
张宗丽
HUAWEI TECHNOLOGIES CO., LTD.
目录
RAID2.0概述
RAID2.0实现原理
RAID2.0技术优势 友商分析
传统阵列的不足
每个RAID组中有固定的硬盘
有指定的热备盘 重构速度慢 LUN性能受限于盘少
取自RAID组内部 硬盘
24盘以内

创建时分配(除Thin Thin的实现更加简单, 外) 只需控制LUN总容量
LUN
一个LUN会来自 LUN与 上百个 RAID关系 CKG(RAID组)
一个LUN一般来自 一个或几个RAID 组
热点LUN分散在更多硬 盘上,避免热点硬盘的 出现,提高整体性能和 可靠性
出现坏盘后,参与重构的物理硬盘增加,重构速度得到大大提升。由于重 构时间缩短,也降低了重构时的坏第二块盘的几率,提升了系统的可靠性。
HUAWEI TECHNOLOGIES CO., LTD.
Page 24
LUN性能提升
在RAID2.0环境中,LUN基于资源池创建,不再受限于硬盘数量。单个 LUN的性能可得到大大提升。
使得数据均匀地分布到存储池的所有硬盘上,然后以数据块为单元来进

RAID2.0详解

RAID2.0详解

Volume
Storage
LUN
server
client
RAID 2.0+体系结构架构
存储池(SP)
硬盘域(DD) LUN
Grain 卷(Volume)
Extent
Grain Extent
Zone
CKG CK
Zone
CKG CK
LD SSD
LD SAS
Grain
Extent
Zone
CKG CK
LD SATA/NL -SAS
存储层级层级名称磁盘类型性能价格应用tier0高性能层ssd性能和价格较高适合存放访问频率很高的数据tier1性能层sas性能较高价格适中适合存放访问频率中等的数据tier2容量层nlsassata性能较低价格最低且单盘容量大适合存放大容辑对象存储池?存储池
CKG
Ex tent Ex tent Ex tent Ex tent Ex tent
Grain Grain Grain Grain Grain
LUN (Thin)
软件逻辑对象-Extent与Grain的区别
Grain是更细粒度的Extent。以Extent为基本单位构成的LUN称为传统非精简LUN,以Grain为基本单 位构成的LUN称为精简LUN。
THANKS
逻辑块大小是固定为64MB或256MB。
软件逻辑对象-逻辑块组
逻辑块组:Chunk Group,简称CKG,是指在同一个磁盘组内的不同磁盘划分出来的逻辑 块按照RAID算法组成的逻辑存储单元。
逻辑块组可视为以多个CK为成员盘组成的一个RAID组,是存储池从硬盘域上分配资源的 最小单位。
RAID级别 RAID 1 RAID 10 RAID 3 RAID 5 RAID 50 RAID 6

(完整版)RAID2.0

(完整版)RAID2.0

1、在RADI2.0+中,把硬盘域内每个硬盘切分为固定64MB的块(CK),硬盘域内同种类型的硬盘被划分为一个个的Disk Group(DG),从同一个DG上随机选择多个硬盘,每个硬盘选取CK按照RAID算法组成Chunk Group(CKG),CKG被划分为固定大小的Extent, Thick LUN以Extent为单位映射到LUN, Grain在Extent的基础上进行更细粒度的划分,Thin LUN以Grain 为单位映射到LUN。

(1)Disk Domain(磁盘域),一个硬盘域上可以创建多个存储池(Storage Pool)一个硬盘域的硬盘可以选择SSD、SAS、NL-SAS中的一种或者多种,不同硬盘域之间是完全隔离的,包括故障域、性能和存储资源等。

(2)Storage Pool(存储池)& Tier,一个存储池基于指定的一个硬盘域创建,可以从该硬盘域上动态的分配Chunk(CK)资源,并按照每个存储层级(Tier)的“RAID策略”组成Chunk Group(CKG)向应用提供具有RAID保护的存储资源(3)Disk Group(DG),由硬盘域内相同类型的多个硬盘组成的集合,硬盘类型包括SSD、SAS和NL-SAS三种。

(4)LD(逻辑磁盘),是被存储系统所管理的硬盘,和物理硬盘一一对应。

(5)Chunk(CK),是存储池内的硬盘空间切分成若干固定大小的物理空间,每块物理空间的大小为64MB,是组成RAID的基本单位。

(6)Chunk Group(CKG),是由来自于同一个DG内不同硬盘的CK按照RAID算法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。

(7)Extent,是在CKG基础上划分的固定大小的逻辑存储空间,大小可调,是热点数据统计和迁移的最小单元(数据迁移粒度),也是存储池中申请空间、释放空间的最小单位。

(8)Grain,在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些块称之为Grain,Thin LUN以Grain为粒度进行空间分配,Grain内的LBA是连续的。

西瓜哥用一句话说清楚RAID 2.0

西瓜哥用一句话说清楚RAID 2.0

今天,西瓜哥来谈谈高端存储的一股势力,RAID 2.0,最近被华为HVS搞得风生水起,神奇的让人摸不着头脑。

我还是从一个高端存储的江湖说起吧。

据说很久很久以前(别扔臭鸡蛋,讲故事都是这样的…),L国王有个美丽的D公主(代表数据库DB),特别喜欢吃西瓜果盘(代表主机看到的LUN),饭量惊人,一次可以吃2个。

D公主吃水果有一个懒习惯,就如泰国人一样,水果都是切成小块(Extend)后拼成果盘(LUN),用牙签吃。

D公主还有一个小脾气,这个果盘如果有一小块是坏的,就整个果盘扔掉(代表数据丢失)。

L国王特别宠爱D公主,找了EMC/IBM/HDS来做长工,专门负责做果盘。

瓜地和宫殿有一段距离,他们每天都摘3个西瓜,2个用来吃,1个用来备份,万一那个瓜坏了就补上(代表RAID 5)。

就这样,他们每天辛苦在宫殿和瓜地奔波,碰到坏瓜还得回去瓜地拿备瓜(重构),非常辛苦。

D公主一天天长大了,饭量也越来越大,瓜也越来越大。

但问题来了,每次碰到坏瓜,他们去搬备瓜需要10个小时,因为西瓜太沉了,路上走不快。

D公主后来受不来了,让L国王把他们撤了,换成了3PAR和HW,3PAR和HW比较聪明,他们想,为什么我到宫殿再切瓜呢,我可以每个瓜切成20大块(Chunk),找20个人搬到宫殿后再切小块(Extend)后拼成果盘(LUN)不就可以了吗?到宫殿后如果发现瓜坏了,派人回来拿1小块换上不就可以了吗?这样需要搬的瓜只有原来的1/20,瓜轻了,路上可以跑,因此就算瓜坏了,半小时也就换回来了。

D公主很满意,日子相安无事,直到有一天HW加班病倒了,而3PAR正好和HP谈恋爱请假了,无奈找了个年轻人叫XIV做临时监工,这家伙比较浪费,每次都挑4个瓜,在瓜地全部切成小块(Extend),找一群小孩直接送给宫殿。

对于D公主当然好了,但每次也只能吃一半,另外一半就倒掉了,很是可惜。

后来XIV由于长得漂亮,被IBM包养,这是后话。

好来,故事讲完了,大家知道RAID 2.0是怎么回事了吧?还扔臭鸡蛋,别,我来好好给大家讲一讲,刚才是讲故事呢。

RAID2.0详解

RAID2.0详解
SSD盘对应高性能层,SAS盘分配到性能层,SATA盘和NL-SAS盘则分配到容量层。
存储层级 Tier0 Tier1 Tier2
层级名称 高性能层
性能层 容量层
磁盘类型
性能、价格、应用
SSD SAS NL-SAS/SATA
性能和价格较高,适合存放访问频率很高的数据 性能较高,价格适中,适合存放访问频率中等的数据
软件逻辑对象-磁盘组
磁盘组:Disk Group,简称DG,指硬盘域中相同类型磁盘的集合。 一个磁盘组中只包含一种类型的磁盘,主要作用是故障隔离,由存储系统自动完成配置。
SSD
SAS
硬盘 类型
NL-SAS
软件逻辑对象-Chunk
Chunk:简称CK,即逻辑块,是磁盘组中物理磁盘按固定大小切分成的物理空间,它是组 成RAID的基本单位。
传统RAID技术的局限性:
重构时间过长,增加了数据丢失的风险; 无法实现对存储资源统一灵活调配; 一个LUN的读写只能在一个磁盘组进行,如果后面新加入性能较高的介质,其性能也无法得以充分 利用; 以磁盘为单位的数据管理无法有效地保障数据访问性能和存储空间利用率。
RAID 1.5技术(1/2)
RAID 1.5技术,即LUN虚拟化技术,是在传统RAID基础之上将RAID组切分成更细粒度的逻辑 空间,再经过组合构建出主机可访问的逻辑存储单元。
LD SAS
Grain
Extent
Zone
CKG CK
LD SATA/NL -SAS
软件逻辑对象-逻辑磁盘
逻辑磁盘:Logical Drive,简称LD,是被存储系统所管理的磁盘,和物理磁盘相对应。
LD0
LD1
LD2
逻辑磁盘 (LBA寻址)

华为OceanStor-企业统一存储售前培训胶片

华为OceanStor-企业统一存储售前培训胶片

华为OceanStor 企业统一存储技术培训胶片目录应用场景企业统一存储硬件介绍关键技术234企业统一存储产品概述1OceanStor 企业统一存储产品概述高端中高端入门级S2600T S5500T S5600T S5800T S6800T1850018800具备可信、智能、融合的系统架构,满足用户灵活多变的存储使用需求,提供实用多样的功能特性,包含高中低端的系列存储产品。

统一软件平台统一管理平台产品优势融合文件和块的融合高中低端互通异构系统兼容削减采购降低CAPEX 可信全冗余系统架构20倍数据恢复速度全面的容灾解决方案可用性99.999%智能RAID 2.0+技术关键业务保障技术智能设备管理提升效率降低OPEXS2600T S5500T S5600T S5800T S6800T硬件规格最大磁盘数276528115214401440最大控制器数24444缓存(每控制器)8GB8/16GB12/24GB48/96GB96/192GB 主机接口数(每控制器/最大)10/2016/1632/4840/6440/64文件引擎节点数量24688软件特性数据保护系列HyperSnap,HyperCopy,HyperClone,HyperReplication 关键业务保障SmartQoS,SmartPartition资源效率提升SmartTier,SmartMotion,SmartThin,Data Reduction 存储管理软件UltraPath,DeviceManager,ReplicationDirector,eSight虚拟化特性异构虚拟化整合主流厂商设备存储资源,存储资源统一管理灵活分配块级虚拟化数据均衡分布,故障快速恢复计算虚拟化VMware,Citrix,Hyper-V等1850018800硬件规格最大磁盘数15843216最大控制器数816最大缓存768GB3072GB 最大主机接口数96192软件特性数据保护系列HyperSnap,HyperCopy,HyperClone,HyperReplication 关键业务保障SmartQoS,SmartPartition资源效率提升SmartTier,SmartMotion,SmartThin,Data Reduction 存储管理软件UltraPath,DeviceManager,ReplicationDirector,eSight虚拟化特性异构虚拟化整合主流厂商设备存储资源,存储资源统一管理灵活分配块级虚拟化数据均衡分布,故障快速恢复计算虚拟化VMware,Citrix,Hyper-V等T 系列V2与V1版本的主要区别T系列V1T系列V2软件架构传统RAID RAID 2.0+产品型号S2200T/S2600T/S5500T/S5600T/S5800T/S6800T S2600T/S5500T/S5600T/S5800T/S6800T软件特性统一存储√√Hyper系列软件√√SmartCache√X SmartThin√√SmartPartition X √SmartMotion X √SmartTier X √SmartQoS X √SmartVirtualization X √高端远程复制互通X √低端支持2.5寸盘√X 多控扩展X √秒级RPO X √升级的主打亮点高性能高扩展高规格多控架构异构虚拟化智能分级软件特性数据迅移QoS缓存分区快速恢复秒级RPO根据业务重要程度智能调度存储资源,及关键业务专属保证根据业务变化,实现数据在存储介质上的自由流动通过多对多重构,及秒级数据恢复时间,增强对数据的保护目录关键技术应用场景企业统一存储硬件介绍423企业统一存储产品概述12.5“控制框(仅适用S5500T)●支持24×2.5“硬盘●支持主流SAS、NL SAS、SSD盘●前四个盘为保险箱盘,2+2冗余●每个硬盘可独立上下电电源模块●1+1冗余风扇/BBU模块●风扇3+1冗余(1个风扇发生故障,系统仍可以正常工作)●风扇智能精细化调速●内置BBU,支持掉电数据保护盘控一体控制模块●提供管理网口和串口●板载2个4*6Gb SAS接口●支持1个扩展I/O模块●板载4个8Gb FC接口3.5“控制框●支持12×3.5“硬盘●支持主流SAS、NL SAS、SSD盘●前四个盘为保险箱盘,2+2冗余●每个硬盘可独立上下电S2600T/S5500T存储控制器介绍控制模块●双控制器●CPU自动变频,降低能耗●提供系统下电按钮BBU模块●2+2冗余●支持直流/交流电源掉电保护电源模块●双供电平面(2+2冗余)风扇模块●风扇5+1冗余(1个风扇发生故障,系统仍可以正常工作)●风扇智能精细化调速接口模块●IO模块槽位(S5600T10个,S5800T/S6800T 12个)●IO模块支持热插拔●接口类型丰富:8Gb FC、4*6Gb SAS、1/10Gb iSCSI, 10Gb FCOE、4控时配PCIE 接口卡管理模块●1+1冗余●支持热插拔●SSD盘(OS、Cache掉电保护)S5600T/S5800T/S6800T控制框介绍OceanStor 18500/18800硬件结构DKE 8DKE 7DKE 6DKE 5ControllerKVM SVP DKE 4DKE 3DKE 2DKE 1系统柜0正面图系统柜0背面图系统柜1正面图系统柜1背面图ControllerDSW DSWDKE 1DKE 2DKE 3DKE 4DKE 5DKE 6DKE 7DKE 8DKE 9DKE 10DKE 11DKE 12DKE 13DKE 14DKE 15DKE 16系统柜2-7正面图系统柜2-7背面图引擎上各个槽位支持的接口模块如下:●A0~A5由控制器0管理,B0~B5由控制器1管理。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

23
【关于RAID2.0+可靠性】
安全可信
弹性高效
负荷分担:RAID2.0+使得硬盘更加均衡地工作,避免了传统RAID可能出现的硬盘 “过劳死”问题。 稳健重构:RAID2.0+技术使得发生重构时有更多的硬盘来分担重构负荷,减少了每块 硬盘承担的重构工作量,大大降低了重构期间再发生硬盘故障的风险。 快速重构:RAID2.0+大大减少了重构的时间窗,使得系统能在尽可能短的时间内恢复 到容错状态,从而提升系统的可靠性。 精简重构:RAID2.0+能够通过元数据感知已分配空间中哪些是已使用的,因此在重构 时仅重构已使用空间,减少了重构数据量,进一步缩短了重构时间,降低了重构风险。 自检自愈:RAID2.0+采用分布式的热备空间,当系统检测到故障时,只要硬盘中有空 闲的空间(CK),即可自动启动重构,在提升可靠性的同时大大降低了管理成本。 失效数据量:传统RAID失效后,影响的是RAID组上的所有数据;而RAID2.0+发生多 盘失效后,只有和多块失效硬盘都相关联的数据才会失效,大部分的数据仍然可以访 问,失效数据量与传统RAID相比按数量级减少。
26
【RAID2.0+双盘失效分析】
27
【RAID2.0+双盘失效分析】
28
虚拟池化设计,降低存储规划管理难度
安全可信
弹性高效
基于虚拟化的RAID2.0+技术,使得管理员只需要维护少量的存储资源池,所 有的RAID配置在创建存储池时自动配置完成,同时,系统会自动根据制定的 策略来智能管理和调度系统资源,大大降低了规划和管理的难度。
10
Storage Pool(存储池) & Tier
Storage Pool即存储池,是存放存储空间资源的容器,所有应用服务器使用的存储空间 都来自于存储池。一个存储池基于指定的一个硬盘域创建,可以从该硬盘域上动态的分配 Chunk(CK)资源,并按照每个存储层级(Tier)的“RAID策略”组成Chunk Group (CKG)向应用提供具有RAID保护的存储资源。 Tier即存储层级,存储池中性能类似的存储介质集合,用于管理不同性能的存储介质,以 便为不同性能要求的应用提供不同存储空间。存储池根据硬盘类型可划分为多个Tier。 创建存储池可以指定该存储池从硬盘域上划分的存储层级(Tier)类型以及该类型的 “RAID策略”和“容量”。 OceanStor高端存储系统支持RAID5、RAID6和RAID10。 容量层由大容量的NL-SAS盘组成,RAID策略建议使用双重校验方式的RAID6。
20
快速精简重构,改善双盘失效率
传统RAID重构原理
安全可信 RAID2.0+重构原理
弹性高效
Few-to-One Rebuild hotspots & long rebuild exposure
21
Many-to-Many Rebuild parallel rebuilds in less time
T V2的Grain粒度默认为32KB(可通过CLI指定范围为8KB-256KB), OceanStor高端存储系统的Grain粒度固定为64KB。
Thin LUN以Grain为单位映射到LUN,对于Thick LUN,没有该对象
17
Volume & LUN
Volume即卷,是系统内部管理对象,一个Volume对象用于组织同一个LUN的 所有Extent、Grain逻辑存储单元,可动态申请释放Extent来增加或者减少 Volume实际占用的空间。 LUN是可以直接映射给主机读写的存储单元,是Volume对象的对外体现。
Extent
Grain Volume & LUN
9
Disk Domain(磁盘域)
Disk Domain即硬盘域,是一堆硬盘的组合(可以是整个系统所有硬盘),这 些硬盘整合并预留热备容量后统一向存储池提供存储资源。 OceanStor高端存储系统可以一个或多个硬盘域 一个硬盘域上可以创建多个存储池(Storage Pool) 一个硬盘域的硬盘可以选择SSD、SAS、NL-SAS中的一种或者多种 不同硬盘域之间是完全隔离的,包括故障域、性能和存储资源等
Release Data
2013-8-20
1
目录
1 2 3 4
RAID技术演变 RAID2.0+原理及概念
RAID2.0+技术亮点 块虚拟化技术竞争对比
2
什么是RAID?
RAID (Redundant Array of Independent Disks)即独立磁盘冗余阵列,1987年由美国加州大学
12
LD(逻辑磁盘)
Logical Drive(LD)即逻辑磁盘,是被OceanStor高端存储系统所管理的硬盘, 和物理硬盘一一对应。
13
Chunk(CK)
Chunk简称CK,是存储池内的硬盘空间切分成若干固定大小的物理空间,每块 物理空间的大小为64MB,是组成RAID的基本单位。
14
Chunk Group(CKG)
一个Extent归属于一个Volume或一个LUN
Extent大小在创建存储池时可以进行设置,创建之后不可更改 不同存储池的Extent大小可以不同,但同一存储池中的Extent大小是统一的
16
Grain
在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些 块称之为Grain。Thin LUN以Grain为粒度进行空间分配,Grain内的LBA是连 续的。
7
RAID2.0+关键原理
硬盘域 存储池
Extent CKG被划分为固定大小 硬盘域内同种类型的硬盘被划分 的Extent 为一个个的Disk Group(DG), 从同一个DG上随机选择多个硬盘, 每个硬盘选取一个CK按照RAID算 法组成Chunk Group(CKG) LUN以Extent为单 LUN Thick 0 (Thick) 位映射到LUN LUN 1 (Thick)
15
Extent
Extent是在CKG基础上划分的固定大小的逻辑存储空间,大小可调,是热点数 据统计和迁移的最小单元(数据迁移粒度),也是存储池中申请空间、释放空 间的最小单位。
OceanStor高端存储系统 C99和T V2的Extent范围为1MB~64MB, OceanStor高端存储系统 C00的Extent范围为512KB~64MB, 默认为4MB
11
Disk Group(DG)
Disk Group(DG)即硬盘组,由硬盘域内相同类型的多个硬盘组成的集合, 硬盘类型包括SSD、SAS和NL-SAS三种。OceanStor高端存储系统会在每个硬 盘域内根据每种类型的硬盘数量自动划分为一个或多个Disk Group(DG)。 一个Disk Group(DG)只包含一种硬盘类型 任意一个CKG的多个CK来自于同一个Disk Group(DG)的不同硬盘
Chunk Group简称CKG,是由来自于同一个DG内不同硬盘的CK按照RAID算 法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。 一个CKG中的CK均来自于同一个DG中的硬盘 CKG具有RAID属性(RAID属性实际配置在Tier上) CK和CKG均属于系统内部对象,由OceanStor高端存储系统自动完成配置, 对外不体现。
硬盘域内每个硬盘被切分为 固定64MB的块(CK)
切分
映射
LUN 2 (Thin)
存储池
Extent Grain
Thin LUN以Grain 为单 Grain在Extent的基础上 进行更细粒度的划分 位映射到LUN
8
RAID2.0+软件逻辑对象
Disk Domain(磁盘域) Storage Pool(存储池)& Tier Disk Group(DG) LD(逻辑磁盘) Chunk(CK) Chunk Group(CKG)
4
块虚拟化的发展
热 备
传统RAID
LUN虚拟化
块虚拟化
传统RAID厂商
5
EMC、NetApp
华为、HP 3PAR、IBM
目录
1 2 3 4
RAID技术演变 RAID2.0+原理及概念
RAID2.0+技术亮点 块虚拟化技术竞争对比
6
RAID2.0+概述
Virtual for Pool
Virtual for Disk
24
【关于RAID2.0+可靠性】
安全可信
弹性高效
下表是基于Markov模型,综合考虑数据丢失概率和丢失数据量得出的两种技术的数 据丢失风险:
综合数据丢失概率和丢失数据量来看,不管是采用RAID5、RAID6还是RAID10, RAID2.0+丢失数据的风险与传统RAID相比均大幅降低(RAID5、RAID6、RAID10 分别降低约16倍、69倍、39倍) 故障隔离:通过Disk Domain和DG来进行资源和故障隔离。
的伯克利分校提出,其基本思想是把多个独立的物理硬盘通过相关的算法组合成一个虚拟的逻辑硬盘, 从而提供更大 容量 、更高 性能 ,或更高的 数据容错功能 。
3
块虚拟化技术背景
存储市场保持年平均增长10%,为了满足数据增长的需求,磁盘设备制 造商不断地提升技术来增加磁盘单位存储密度 传统RAID的重构:应用系统整体性能下降,漫长重构时间、数据丢失 风险剧增
华为RAID2.0+技术培训胶片
Author / ID Department Group Email Address Co-author / ID Approver / ID
秦烜(204091) 统一存储市场技术
相关文档
最新文档