EMC_DMX存储的物理架构与逻辑架构

EMC DMX存储的物理架构与逻辑架构

一.DMX存储概述

DMX存储硬件的物理与逻辑架构能够实现最大限度的将一个lun 的io 最大限度分摊给硬盘,DAE盘阵的环路; 一个lun 的io 同时也平均分摊给后端的存储cpu . 从后面文档设备连接的介绍可以知晓.

DMX的架构做到了最大限度的打散数据以达到性能最大化;性能最大化的硬件配置是一个控制柜加两个与控制柜存储cpu端口直连的磁盘柜;

存储卷vol 以及4个vol meta(绑定) 条带化以后就避免了热点(hot block) 读写的问题.

将任何一个lun的读写io 操作做到由最多的硬件资源来支撑. 硬件资源主要是硬盘,DAE盘阵环路,存储cpu,存储缓存.

DMX存储安装配置是通过加载预先配置好的bin file 来部署的; bin file 定义了物理架构与逻辑架构的配置定义整个存储当前硬件配置如何被使用规划好,以后修改配置就得重新装载bin file 也就是重新配置整个存储.

Bin file的加载以及整个存储的管理通过console服务器上的软件symmwin来操作,console服务器通过电话线moden 与EMC 支持中心连通. EMC技术人员通过电话线的拨号拨入方式可以做到完全掌控存储设备.

本文档关注存储设备架构方面,管理方面的gk盘,ecc等不做赘述.

二.E MC DMX 存储的物理架构

1.存储外观及各个模块介绍

(1)外观

DMX由一个控制柜加磁盘柜组成, 通常带2个或者5个磁盘柜

我们公司为了性能最大化,配置满配的前端后端卡,只挂2个磁盘柜.再扩展磁盘

机柜只增加空间,性能不增长.

,

BAY

BAY

(2)物理构成模块图示: (打开机柜门前视图)

2.存储后端接线连接以及磁盘环路

DA卡cpu端口与硬盘的连线图示:

这里的图示是端口所管理的硬盘,是指硬盘的主环路(BUS loop),实际情况物理联线只连接到DAE 的LCC A & LCC B 端口.

方环路的硬盘,也就是互为standby 环路.

DA 卡cpu 与 DAE 盘柜 的对应关系

三.E MC DMX 存储的逻辑架构

●存储最小的可用单元是cylinder (每个cylinder 960k) ;

●每个cyln 由15个64k 的块组成.

●每个硬盘以cyln为单位划分成n 个hyper(也叫切片)

●以DA02 D1:05 (DA卡2，D cpu port 1口管理的DAE ID 5硬盘为例)

1.DA02 D1:05 硬盘被切成了14块,前面9块都是16570 cyln 的大小的数据

空间, 后面5块是3 cyln 的管理用的GK盘.

2.然后以16570 cyln为单位的15GB(16570*960k/1024)大小的hyper 来与其

他硬盘里面的同样是16570 cyln 的hyper 来做镜像成为一个卷(vol). 大

多数情况下某个硬盘里面的数据(vol) 与另外一个硬盘的数据一摸一样.

3.看如下图示: 镜像1 是M1, 镜像2 是M2. 互相交叉. 后面的6,7,8 ……都

是同样情况,两块硬盘数据一样,镜像1 镜像2 交叉放.

4.卷volume 分配给主机的时候都是连续地分配出去, 而如下图两个硬盘里

面的vol 都是不顺序的,是打散的,这样就打散了主机对存储读写的io.

DA02 D1:05

DA02 D1:05

如下图示:

每个卷底层都是由8个硬盘来支持,并且由八个cpu通道来支持,因为八个

硬盘都算来自不同的硬盘DAE盘阵,能达到最佳的IOPS.

dmx系统只将MetaPosition 0 的卷名(meta位置0的) 映射给主机,一个卷也

就是作为一个lun来使用. 这里举例的情况是两个hyper先镜像,然后4个Array

6.主机端查看分配的lun的volume 信息

用powerpath工具powermt 看Logical device ID

例如:

Pseudo name=emcpowerbd

Symmetrix ID=000290105785

Logical device ID=05EB

state=alive; policy=SymmOpt; priority=0; queued-IOs=0

========================================================

--- Host -- - Stor - -- I/O Path - -- Stats ---

### HW Path I/O Paths Interf. Mode State Q-IOs Errors ========================================================

2 qla2xxx sdbq FA 14dA active alive 0 0

3 qla2xxx sdev FA 13dA active alive 0 0

3 qla2xxx sdgo FA 14dA active alive 0 0

4 qla2xxx sdjt FA 3dA active alive 0 0

4 qla2xxx sdlm FA 4dA active alive 0 0

5 qla2xxx sdor FA 3dA active alive 0 0

5 qla2xxx sdqk FA 4dA active alive 0 0

2 qla2xxx sdx FA 13dA active alive 0 0

主机能看到05EB 卷的有: 172.23.106.2, 172.24.67.2 ……