OceanStorUltraPathforLinux多路径介绍
浪潮存储平台系统多路径软件用户手册说明书
浪潮存储平台系统多路径软件用户手册文档版本发布日期适用版本系统自带多路径的所有版本尊敬的用户：衷心感谢您选用浪潮存储！浪潮存储秉承“云存智用运筹新数据”的新存储之道，致力于为您提供符合新数据时代需求的存储产品和解决方案。
本手册用于帮助您更详细地了解和便捷地使用本存储，涉及的截图仅为示例，最终界面请以实际设备显示的界面为准。
由于产品版本升级或其他原因，本手册内容会不定期进行更新，如有变动恕不另行通知。
除非另有约定，本手册仅作为使用指导，本手册中的所有陈述、信息和建议不构成任何明示或暗示的担保。
浪潮拥有本手册的版权，保留随时修改本手册的权利。
未经浪潮许可，任何单位和个人不得以任何形式复制本手册的内容。
如果您对本手册有任何疑问或建议，请向浪潮电子信息产业股份有限公司垂询。
技术服务电话：4008600011地址：中国济南市浪潮路1036号浪潮电子信息产业股份有限公司邮编：250101在您正式使用本存储之前，请先阅读以下声明。
只有您阅读并且同意以下声明后，方可正式开始使用本存储。
如果您对以下声明有任何疑问，请和您的供货商联系或直接与我们联系。
如您在开始使用本系统前未就以下声明向我们提出疑问，则默认您已经同意了以下声明。
1.请不要自行拆卸本存储的机箱及机箱内任何硬件设备。
在本存储出现任何硬件故障或您希望对硬件进行任何升级时，请您将机器的详细硬件配置反映给我们的客户服务中心。
2.请不要将本存储的设备与任何其他型号的相应设备混用。
本存储的内存、CPU、CPU散热片、风扇、硬盘托架、硬盘等都是特殊规格的。
3.在使用本存储时遇到任何软件问题，请您首先和相应软件的提供商联系。
由提供商和我们联系，以方便我们共同沟通和解决您遇到的问题。
对于数据库、网络管理软件或其他网络产品的安装、运行问题，我们尤其希望您能够这样处理。
4.上架安装本存储前，请先仔细阅读相关产品手册中的快速安装指南。
我们致力于产品功能和性能的持续提升，部分功能及操作与手册描述可能会有所差异，但不会影响使用。
华为-OceanStor S2200T 配置报价指导
Page 6
产品软件功能
统一图形化管理软件ISM
ISM集成存储管理软件
必须配置（打包到控制框中） HS Integrated Storage Manager-Device Management License for OceanStor Block XXX（阵列） HyperImage（快照） HyperCopy （LUN拷贝） HyperMirror（同步/异步远程复制） 必须配置（打包到控制框中） （含全操作系统支持）
存储单元 阵列控制框
阵列控制框
硬盘框
存储单元
服 务
硬盘单元
存储增值功能
其组件
存储增值功能组件
Page 9
S2200T存储配置步骤
（绿色代表可选配)
进入SCT配置界面
选择阵列控制框
控制器数量（目前只有双控）
选择硬盘和安装材料
双控
选择前端扩展 I/O模块
选择硬盘
选择配套增值软件
选择软件增值功能
注：
S2200T因为非统一存储，所以产品在做配置时无需选择文件引擎。 Nhomakorabea▬
▬
3、配置热备盘
▬
▬
▬
4、 不同类型硬盘混插
▬
▬
5、 硬盘容量计算略（根据Raid级别来计算） 6、 每对后端端口配置硬盘数，最优建议值≤72，不建议>120
Page 12
目录
1
产品介绍
2 配置指导 3 配置实例
Page 13
SCT S2200T 配置项介绍
选择阵列控制框类型（ISM和多路径自动配 置）
Page 10
安装材料配套设备
光模块和光纤： ▬ 打包到FC接口卡中 硬盘框和SAS线： ▬ 根据硬盘数自动配置硬盘框，SAS线缆随硬盘框打包 硬盘单元假面板： ▬ 非报价项 ▬ 空余槽位默认配置
LINUX自带多路径详解
LINUX 自带多路径详解一、多路径解释多路径，顾名思义就是有多种选择的路径。
在SAN 或IPSAN 环境，主机和存储之间外加了光纤交换机，这就导致主机和存储之间交换速度和效率增强，一条路径肯定是不行的，也是不安全不稳定的。
多路径就是要来解决从主机到磁盘之间最快，最高效的问题。
主要实现如下几个功能1. 故障的切换和恢复2. IO 流量的负载均衡3. 磁盘的虚拟化多路径之前一直是存储厂商负责解决，竟来被拆分出来单独卖钱了。
构架基本是这样的：存储，多路径软件，光纤交换机，主机，主机系统。
二、LINUX 下的multipath1、查看是否自带安装？1 2 3 4 5 6 [root@web2 multipath]# rpm -qa|grep devicedevice-mapper-1.02.39-1.el5device-mapper-1.02.39-1.el5device-mapper-multipath-0.4.7-34.el5device-mapper-event-1.02.39-1.el5[root@web2 multipath]#2、安装1 2 3 4 5 6 rpm -ivh device-mapper-1.02.39-1.el5.rpm #安装映射包 rpm -ivh device-mapper-multipath-0.4.7-34.el5.rpm #安装多路径包 外加加入开机启动 chkconfig –level 2345 multipathd on #设置成开机自启动multipathd lsmod |grep dm_multipath #来检查安装是否正常3、配置1 2 # on the default devices.blacklist {3 4 5 6 7 8 9 10 11 12 13 14 devnode '^(ram|raw|loop|fd|md|dm-|sr|sr|scd|st)[0-9]*'devnode '^hd[a-z]'}devices {device {vendor 'HP'path_grouping_policy multibusfeatures '1 queue_if_no_path'path_checker readsector()failback immediate}}完整的配置如下：blacklist {devnode '^sda'}defaults {user_friendly_names no}multipaths {multipath {wwid 14945540000000000a67854c6270b4359c 66c272e2f356321alias iscsi-dm0path_grouping_policy multibuspath_checker turpath_selector 'round-robin 0'}multipath {wwid 14945540000000000dcca2eda91d70b81e dbcfce2357f99eealias iscsi-dm1path_grouping_policy multibuspath_checker turpath_selector 'round-robin 0'}multipath {wwid 1494554000000000020f763489c16556110 1813333957ed96alias iscsi-dm2path_grouping_policy multibuspath_checker turpath_selector 'round-robin 0'}multipath {wwid 14945540000000000919ca813020a19542 2ba3663e1f03cc3alias iscsi-dm3path_grouping_policy multibuspath_checker turpath_selector 'round-robin 0'}}devices {device {vendor 'iSCSI-Enterprise'product 'Virtual disk'path_grouping_policy multibusgetuid_callout '/sbin/scsi_id -g -u -s /block/%n'path_checker readsector0path_selector 'round-robin 0'}}4、命令1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 2[root@web2 ~]# multipath -hmultipath-tools v0.4.7 (03/12, 2006)Usage: multipath [-v level] [-d] [-h|-l|-ll|-f|-F|-r] [-pfailover|multibus|group_by_serial|group_by_prio][device] -v level verbosity level0 no output1 print created devmap names only2 defau lt verbosity3 print debug information-h print this usage text -b file bindings file location-d dry run, do not create or update devmaps-l show multipath topology (sysfs and DM info)-ll show multipath topology (maximum info)-f flush a multipath device map-F flush all multipath device maps-r force devmap reload -p policy force all maps to specified policy :failover 1 path per priority groupmultibus all paths in 1 priority groupgroup_by_serial 1 priority group per serialgroup_by_prio 1 priority group per priority lvl4 25 26 27 28 293group_by_node_name 1 priority group per target nodedevice limit scope to the device's multipath(udev-style $DEVNAME reference, eg /dev/sdbor major:minor or a device map name)[root@web2 ~]#5、启动关闭1 2 3 4 # /etc/init.d/multipathd start #开启mulitipath 服务 service multipath startservice multipath restartservice multipath shutdown6、如何获取wwid1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 1、[root@vxfs01 ~]# cat /var/lib/multipath/bindings# Multipath bindings, Version : 1.0# NOTE: this file is automatically maintained by the multipath program.# You should not need to edit this file in normal circumstances. ## Format:# alias wwid#mpath0 36006016051d50e0035744871c912de11mpath1 36006016051d50e0034744871c912de11mpath2 36006016051d50e0032744871c912de11mpath3 36006016051d50e0039744871c912de11mpath4 36006016051d50e003a744871c912de112、[root@vxfs01 ~]# multipath -v3 |grep 3600sdb: uid = 36006016051d50e003a744871c912de11 (callout)sdc: uid = 36006016051d50e003a744871c912de11 (callout)sdd: uid = 36006016051d50e003a744871c912de11 (callout)sde: uid = 36006016051d50e003a744871c912de11 (callout)36006016051d50e003a744871c912de11 1:0:0:0 sdb 8:16 0 [undef][ready] DGC,RAI36006016051d50e003a744871c912de11 1:0:1:0 sdc25 26 8:32 1 [undef][ready] DGC,RAI36006016051d50e003a744871c912de11 2:0:0:0 sdd 8:48 1 [undef][ready] DGC,RAI36006016051d50e003a744871c912de11 2:0:1:0 sde 8:64 0 [undef][ready] DGC,RAIFound matching wwid [36006016051d50e003a744871c912de11] in bindings file.比较详细的文字：/blog/static/1007689142013416111534352//wuweilong/article/details/14184097 RHEL 官网资料：/wp-content/uploads/downloads/2013/11/Red_Hat_Enterprise_Linux -5-DM_Multipath-en-US.pdf/wp-content/uploads/downloads/2013/11/Red_Hat_Enterprise_Linux -5-DM_Multipath-zh-CN.pdf/wp-content/uploads/downloads/2013/11/Red_Hat_Enterprise_Linux -6-DM_Multipath-en-US.pdf/wp-content/uploads/downloads/2013/11/Red_Hat_Enterprise_Linux -6-DM_Multipath-zh-CN.pdf。
Dorado存储基于数据库场景的重删压缩配置指南
华为 Dorado6000 存储基于数据库场景的重删压缩配置指南数据库作为一种典型的业务场景，在企业应用中占据着重要地位，而数据库中存储的数据也是企业的核心资产之一。
随着业务的不断增长，企业的业务数据也呈现爆炸式的增长，需要存储的数据越来越多。
目录1概述 (3)1.1内容简介 (3)1.2面向读者 (3)1.3用户收益 (3)1.4关键组件 (3)1.5负载模型 (4)2适用场景 (5)2.1适用场景 (5)2.2注意事项 (5)3OLTP 场景配置存储压缩特性 (6)3.1解决方案 (6)3.1.1方案架构 (6)3.1.2硬件配置 (6)3.1.3软件配置 (7)3.1.4存储配置 (7)3.2验证步骤 (8)3.2.1环境部署 (8)3.2.2数据压缩效果测试 (9)4 附录 (14)4.1参考文档 (14)4.2术语表 (14)1 概述1.1内容简介华为OceanStor Dorado6000 V3 全闪存存储系统(以下简称Dorado6000 V3)智能数据重删和智能数据压缩特性（SmartDedupe&SmartCompression）旨在减少冗余数据占用的存储空间，提高存储系统的传输、处理和存储效率。
本文介绍在数据库场景下，如何利用Dorado6000 V3 系列存储的智能数据压缩特性以及利用该特性所达到的数据缩减效果。
1.2面向读者本文档主要面向以下类型读者，使其了解华为OceanStor Dorado V3 全闪存存储产品及其重删压缩特性。
●华为员工●合作伙伴●客户1.3用户收益通过使用Dorado6000 V3 的重删压缩特性，能够有效的减少数据库业务中在存储上产生的数据量，提高空间利用率。
1.4关键组件本文中描述的内容主要基于以下硬件和软件。
硬件：●华为Dorado6000 V3 全闪存存储系统V300R100C00 版本●华为RH2288V2 服务器软件：●UltraPath for Linux：8.01.024 多路径软件●Oracle Database 11.2.0.4 数据库软件●Oracle RAC 11.2.0.4 集群软件●SLOB2.2 测试工具操作系统：●Red Hat Enterprise Linux 6.51.5负载模型本文使用业界通用的SLOB（Silly Little Oracle Benchmark）测试工具模拟了Oracle OLTP（Online Transaction Processing）业务负载模型。
OceanStor-T存储系统 IPSAN组网及配置专题
由于产品版本升级或其他原因，本文档内容会不定期进行更新。除非另有约定，本文档仅作为使用指导，本文 档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司
地址： 网址：
深圳市龙岗区坂田华为总部办公楼 邮编：518129
文档版本 02 (2014-12-15)
IP SAN组网时，应用服务器的网口作为启动器，用于向存储系统传输应用服务器上的 iSCSI程序请求；存储系统iSCSI主机端口作为目标器，用于接收和响应来自应用服务器 上的iSCSI程序请求，如图1-1所示。启动器和目标器具有唯一的IP地址，这两个IP地址 用于建立应用服务器与存储系统之间的通信通道。
OceanStor F面向Oracle数据库OLTP最佳实践
华为 OceanStor F 面向 Oracle 数据库OLTP 场景的最佳实践此文档针对华为 OceanStor F V5 存储配套 Oracle 数据库进行阐述。
聚焦如何高效利用 OceanStor F V5 存储进行 Oracle 数据库业务部署，并针对企业用户场景下的 Oracle 的在线联机事务处理（OLTP）业务，进行了一系列的验证，通过参考该最佳实践，可以获得更好的业务部署效率和业务运营质量，有效保障Oracle 数据库的性能和可用性。
目录1概述 (4)1.1内容简介 (4)1.2写作目的 (4)1.3面向读者 (4)1.4用户收益 (5)1.5关键组件 (5)1.6业务场景 (5)1.7负载模型 (5)2华为技术与产品 (6)2.1OceanStor F V5 产品介绍 (6)2.2OceanStor UltraPath 多路径软件 (7)3Oracle 数据库介绍 (8)3.1.1Oracle RAC and ASM (8)3.1.2Oracle 体系架构 (10)3.1.3OLTP 业务类型 (12)4Oracle 规划配置最佳实践 (13)4.1SAN 组网 (13)4.1.2 划分Zone 或vLAN (14)4.2存储配置 (14)4.2.1硬盘域 (14)4.2.2存储池 (15)4.2.3多租户 (15)4.2.4LUN (16)4.2.5映射视图 (16)4.3主机配置 (17)4.3.1队列深度 (17)4.3.2I/O 对齐 (17)4.3.3块设备调度算法 (18)4.3.4多路径设置 (18)4.3.5绑定盘符 (19)4.3.6配置HugePage (19)4.4数据库配置 (20)4.4.1数据库参数 (20)4.4.2ASM 磁盘组 (21)4.4.3在线日志 (21)4.4.4UNDO 表空间调整 (22)4.4.5临时表空间调整 (22)4.4.6归档和备份 (22)5Oracle 规划配置示例 (23)5.1方案架构 (23)5.1.1组网图 (23)5.1.2方案组件 (24)5.2存储配置 (25)5.3主机配置 (26)5.4数据库配置 (26)6Oracle 性能测试方案 (28)6.1测试策略 (28)6.2测试过程 (29)6.2.1加载测试数据 (29)6.2.2测试步骤 (29)6.3测试结果 (34)7Oracle 场景重删压缩特性 (35)7.1业务场景 (35)7.2特性描述 (35)7.2.1在线重删 (36)7.2.2数据压缩 (36)7.3压缩比测试 (36)7.3.1开启压缩 (36)7.3.2测试过程 (37)7.3.3测试结果 (38)8 总结 (39)9 术语表 (40)1 概述1.1内容简介华为OceanStor F V5 全闪存存储（下文简称F V5 存储）是华为根据存储产品应用现状和存储技术未来发展趋势，推出的新一代一体化融合存储产品，能够满足大中型企业用户对海量数据存储、高速数据存取、高可用性、高利用率、绿色环保和易于使用的要求。
华为 OceanStor T 系列统一存储系统说明书
OceanStor T Series Unified StorageHighlightscationUnified SAN and NAS: Supports SAN and NAS storage protocols, structured and non-structured data within one storage system Unified protocols: Compatible with various storage networks and protocols, including iSCSI, FC, NFS, CIFS, HTTP, and FTPGUI-based central storage management:Provides a graphical user interface for central management of fi les and data blocks. The wizards guide users through every con fi gurationFlexibility and ReliabilityUpgrade: Users can easily upgrade block-level storage to uni fi ed storage Hot swapping modules: Users can hot-swap controllers, fans, power supplies, I/O modules, and hard disks without compromising ongoing user servicesDiversified disk types: Supports SAS, NL SAS, SATA, FC and SSD disks, tting into various scenariosReliable architecture: Full component redundancy prevents single points of failure. Data coffer and fi le system mirror improve system reliability Advanced I/O port scalability and flexibility: Supports up to 12ModelS2600TS5500TS5600TS5800TBlock Storage Component Storage processor Multi-core processors Cache size8GB/16GB 8GB/16GB/32GB 24GB/48GB 96GB/192GB Extended cache1.2TB 1.2TB2.4TB3.6TBNumber of controllers 2Front-end port types 8Gbps FC, 1Gbps iSCSI, 10Gbps Iscsi(TOE)8Gbps FC, 1Gbps iSCSI, 10Gbps iSCSI (TOE), 10Gbps FCoE Back-end port types 6Gbps SAS 2.0 wide port 6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port Number of onboard I/O ports Front end: 12 x 1 Gbps iSCSI ports;Back end: 4 x SAS 2.0 wide ports Front end: 8 x 8 Gbps Fibre Channel ports;Back end: 4 x SAS 2.0 wide ports 00Maximum. number of I/O modules221012Maximum number of disk slots 27652811521440Supported disk types SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD,FC SAS, NL SAS, SATA, SSD,FC RAID levels0,1, 3, 5, 6, 10, 50Maximum number of snapshots 256102420482048Maximum number of LUNs 2048409640968192Mobile Management Supported.N/A N/A N/A TurboModule Supported.Functional software HyperImage (snapshot),HyperCopy (LUN copy), HyperClone (split mirror), HyperMirror (synchronous/asynchronous remote replication), HyperThin (thin provisioning), UltraPath (multipathing), DiskGuard (host-side data protection), SmartCache (dynamic data caching in TurboBoost)File Storage Component Number of file engine nodes 22, 42, 4, 62, 4, 6, 8Cache size per node 16GB 16GB 24GB 24GB File softwareDST (dynamic storage tiering), Snapshot (file system snapshot), Mirror (file system mirror),Replication (file system remote replication), Symantec NetBackup Client (embedded Symantec network backup client)ProtocolFC, iSCSI, NFS, CIFS, FTP , HTTPCompatible operating system Including AIX, HP-UX, Solaris, Linux, WindowsVirtual Environment Virtual machine VMware, Citrix, Hyper-VValue-added feature VMware VAAI support for VSphere and VCenter integrationPhysical Specifications Power supplyAC: 100 V to 127 V, or 200 V to 240 V DC: –60 V to –48 VArray power consumption 2 U controller enclosure: ≤380W4 U controller enclosure: ≤527W2 U controller enclosure: ≤ 539W2 U disk enclosure: ≤307W4 U disk enclosure: ≤ 527W4 U controller enclosure: ≤598W 2 U disk enclosure: ≤307W 4 U disk enclosure: ≤527W File engine power consumption 4 U file engine: ≤ 800WArray dimensions (H x W x D)2 U controller enclosure: 86.1mm x 446mm x 582mm 4 U controller enclosure: 175mm x 446mm x 502mm 4 U disk enclosure: 175mm%446mm%412mm 2 U disk enclosure: 86.1mm x 446mm x 412mm 4 U disk enclosure: 175mm x 446mm x 412mm File engine dimensions (H x W x D) 4 U, 175mm x 446mm x 502mmWeight2U Controller enclosure≤ 22.98kg4U Disk enclosure ≤ 25.2kgController enclosure ≤ 23.9kg 2 U SAS disk enclosure ≤ 14.9kg 4 U SAS disk enclosure≤ 25.2kg Controller enclosure ≤ 43.6kg2 U SAS disk enclosure ≤ 14.9kg4 U SAS disk enclosure ≤ 25.2kg4 U FC disk enclosure ≤ 24.9kgTechnical Speci ficationsHUAWEI TECHNOLOGIES CO., LTD.Huawei Industrial BaseBantian LonggangShenzhen 518129, P .R. ChinaTel: +86-755-28780808Copyright © Huawei Technologies Co., Ltd. 2013. All rights reserved.THIS DOCUMENT IS FOR INFORMATION PURPOSE ONLY, AND DOES NOT CONSTITUTE ANY KIND OF WARRANTIES.。
服务器OS安装指南_20140610
网院服务器OS安装指南红旗AS3 系列：一、OS安装安装系统盘（包括LVM分区）；安装工具盘（包括输入“服务号”）；二、启动sshd服务；将sshd服务注册为开机启动chkconfig –level 35 sshd on；修改/etc/ssh/sshd_conf，将PermitRootLogin no 改为yes；三、启动X11服务进入目录：/usr/share/config/kdm（1）修改文件:Xaccess* #any host can get a login window（去掉#）（2）修改文件:kdmrc[Xdmcp]Enable=trueport=177（3）运行命令：init 5四、网络配置配置互联网段IP地址eth0；（如10.10.200.31）配置存储段IP地址eht1；（如192.168.100.45）通过bondtool绑定eth2、eth3，并在/etc/rc.local中增加service network restart；配置心跳段IP地址；（如10.10.201.31）五、浪潮存储多路径配置上传rdac*.tar.gz；解压tar zxvf rdac*.tar.gz；进入Linux*目录；执行make；执行make install；修改/etc/grub.conf，将其中的init-2.6.18-194.1.AXS3.img改为mpp-2.6.18-194.1.AXS3.img；重启OS；六、华为存储多路径配置1、uname-a查看linux版本（Redflag AS3 SP3/SP4 均支持），需找版本相对应的多路径软件。
2、OceanStor_UltraPath_V100R006C00SPC201_LinuxOther.zip文件上传到linux任意目录。
3、Unzip OceanStor_UltraPath_V100R006C00SPC201_LinuxOther.zip 里面会有一个install.sh的文件4、更改权限chmod +x install.sh5、执行安装sh install.sh 或者./执行也可以(1)---选择FC（根据实际情况选择）(2)--选择1 local6、Reboot重启;7、重启完毕后，执行hot_add命令即可。
linux配置存储与多路径
Found volume group "VolGroup00" using metadata type lvm2
vgcreate 命令第一个参数是指定该卷组的逻辑名：eccdbvg。后面参数是指定希望添加到该卷组的所有 分区和磁盘。vgcreate 在创建卷组 eccdbvg 以外，还设置使用大小为 4 MB 的 PE（默认为 4MB），这表 示卷组上创建的所有逻辑卷都以 4 MB 为增量单位来进行扩充或缩减。由于内核原因，PE 大小决定了逻 辑卷的最大大小，4 MB 的 PE 决定了单个逻辑卷最大容量为 256 GB，若希望使用大于 256G 的逻辑卷则 创建卷组时指定更大的 PE。PE 大小范围为 8 KB 到 512 MB，并且必须总是 2 的倍数（使用-s 指定，具体 请参考 man vgcreate）。
3) 激活卷组
为了立即使用卷组而不是重新启动系统，可以使用 vgchange 来激活卷组： [root@localhost ~] # vgchange -a y eccdbvg
4) 添加新的物理卷到卷组中
当系统安装了新的磁盘并创建了新的物理卷，而要将其添加到已有卷组时，就需要使用 vgextend 命令： [root@localhost ~]# vgextend eccdbvg /dev/sdb5
扫描当前系统中建立的物理卷，并显示信息。
[root@localhost ~]# pvscan
PV /dev/sda2 VG VolGroup00
lvm2 [19.88 GB / 0 free]
PV /dev/sdb1
lvm2 [4.67 GB]
PV /dev/sdb2
lvm2 [4.67 GB]
Total: 3 [29.21 GB] / in use: 1 [19.88 GB] / in no VG: 2 [9.33 GB]
LINUX下多路径(详细)说课讲解
L I N U X下多路径(详细)LINUX下多路径（multi-path）介绍及使用2013-05-16 11:15:34| 分类：openfiler系统+fr|举报|字号订阅一、什么是多路径普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。
而到了有光纤组成的SAN环境，或者由iSCSI组成的IPSAN环境，由于主机和存储通过了光纤交换机或者多块网卡及IP来连接，这样的话，就构成了多对多的关系。
也就是说，主机到存储可以有多条路径可以选择。
主机到存储之间的IO由多条路径可以选择。
每个主机到所对应的存储可以经过几条不同的路径，如果是同时使用的话，I/O流量如何分配？其中一条路径坏掉了，如何处理？还有在操作系统的角度来看，每条路径，操作系统会认为是一个实际存在的物理盘，但实际上只是通向同一个物理盘的不同路径而已，这样是在使用的时候，就给用户带来了困惑。
多路径软件就是为了解决上面的问题应运而生的。
多路径的主要功能就是和存储设备一起配合实现如下功能：1.故障的切换和恢复2.IO流量的负载均衡3.磁盘的虚拟化由于多路径软件是需要和存储在一起配合使用的，不同的厂商基于不同的操作系统，都提供了不同的版本。
并且有的厂商，软件和硬件也不是一起卖的，如果要使用多路径软件的话，可能还需要向厂商购买license才行。
比如EMC公司基于linux下的多路径软件，就需要单独的购买license。
好在， RedHat和Suse的2.6的内核中都自带了免费的多路径软件包，并且可以免费使用，同时也是一个比较通用的包，可以支持大多数存储厂商的设备，即使是一些不是出名的厂商，通过对配置文件进行稍作修改，也是可以支持并运行的很好的。
二、Linux下multipath介绍，需要以下工具包：在CentOS 5中，最小安装系统时multipath已经被安装，查看multipath是否安装如下：1、device-mapper-multipath：即multipath-tools。
OceanStor S2200T&S2600T 存储系统 V100R005 快速安装指南
维维护护终终端端
应用服务器
外部电源
控制框
硬盘框
3b 连接接地线
外部电源 接地线
8
3c 级联硬盘框
说明 控制框和硬盘框上的EXP级联端口必须与硬盘框上的PRI级联端口连接。 控制器A（控制器B）上的级联端口必须与级联模块A（级联模块B）上的PRI级联端口连接。
控制框
控制器模块A
控制器模块B
硬盘框2 级联模块A
直流电源线连接好的状态 直流配电盒
控制框 硬盘框
13
4 检查硬件安装
4a 检查设备安装
检查项 控制框 硬盘框
正常 平稳地安装在滑道上，无位移。 螺钉已拧紧。
4b 检查线缆连接
检查项
接地线 光纤 mini SAS线 网线 串口线
正常 线缆正确固定并且完全插入。
交流电源线
交流电源线冗余连接至不同的独立电源。 交流电源线卡扣扣好。
场景2 4U设备的安装位置定位
滑道底边位置
固定2U设备螺丝孔的位置 固定可调节滑道螺丝孔的位置
安装浮动螺母位置
滑道底边位置 固定4U设备螺丝孔的位置 固定可调节滑道螺丝孔的位置
5
2d 安装可调节滑道
说明 可调节滑道的可调节长度范围为600mm~900mm，可以安装在深度为800mm~1100mm的机柜中。 发货时可调节滑道已经装配了方孔定位销。如果机柜上的安装螺丝孔为圆孔，请选择圆孔定位销。 安装可调节滑道时务必确保左右两侧的可调节滑道的上顶面在同一水平面上。
开始之前
a 快速系列文档简介
本文档帮助您快速安装存储设备，更详细的操作指导请查阅《OceanStor S2200T&S2600T 存储系统 V100R005 安装指南》。您可以通过随设备发货的资料光盘，或者访问 获得该文档。
Linux上挂载LUN的多路径问题
手动挂载iSCSI磁盘步骤
在/etc/iscsi/initiatorname.iscsi 里可以查看IQN iscsiadm -m discovery -t st -p target_ip_address 查找目标 iscsiadm -m node -l 登录 fdisk –l查看磁盘、fdisk /dev/sde 进行磁盘分区 mkfs.ext3 /dev/sde1 创建文件系统 mount /dev/sde1 /mnt/iscsi 挂载磁盘分区
THANKS
网卡2 192.168.200.30.1/24 B控P0：192.168.200.1/24
A控P0
B控P0
A控管理IP：192.168.1.101/24 B控管理IP：192.168.1.102/24
多路径问题解决
前提：open-iscsi软件已经正常工作 解决方案：安装多路径软件，华为要求不能使用Linux系统自带的多路径功能 把OceanStor UltraPath V100R008C50SPC500_SLES.zip拷贝到 /home 目录 unzip OceanStor UltraPath V100R008C50SPC500_SLES.zip chmod 777 install.sh 执行 ./install.sh 、重启系统
Linux上挂载LUN的多路径问题
内容提要
在OceanStor上为Linux主机提供IP-SAN存储 Linux主机上安装多路径软件、挂载iSCSI磁盘
拓扑
Windows服务器
Linux服务器
网卡1 192.168.100.2 /24
网卡2
网卡1
192.168.200.2 /24 192.168.100.3 /24
华为 OceanStor UltraPath 技术白皮书
OceanStor UltraPath V100R008技术白皮书华为科技有限公司版权所有侵权必究目录Revision record 修订记录............................................................. 错误！未定义书签。
1多路径软件概述. (4)1.1单点故障与多路径技术 (4)1.2主流多路径软件一览 (5)2UltraPath概述 (7)2.1典型组网 (7)2.1.1直连组网 (7)2.1.2双交换组网 (8)2.2UltraPath原理 (8)2.2.1UltraPath与OS集成方式 (8)2.2.2如何识别并管理路径 (10)2.2.3如何识别并管理路径组 (12)2.3UltraPath基本特性 (13)2.3.1故障转移（failover）和恢复（failback） (13)2.3.2路径例测 (14)2.3.3负载均衡 (14)2.4UltraPath高级特性 (16)2.4.1全路径闪断保护 (16)2.4.2间歇性故障路径隔离 (16)2.4.3误码链路隔离 (17)2.4.4路径异常告警 (18)2.4.5主机自动注册到阵列 (19)2.4.6手工禁用路径 (19)关键词Key words：UltraPath摘要Abstract：本文档主要描述华为公司UltraPath的概述、主要的功能特性等。
1 缩略语清单List of abbreviations2 多路径软件技术简介2.1 单点故障与多路径技术单点故障是指网络中的某一处发生故障，可能导致整个网络瘫痪。
按照这个标准，图1中的可能的单点故障包括：① 外网与应用服务器间的路径。
② 应用服务器本身。
③ 服务器与存储控制器间的路径。
④ 存储控制器本身。
⑤ 存储控制器与磁盘间的路径。
⑥存储磁盘本身。
图1 单条路径组网为了避免单点故障，高可靠系统对可能的单点故障设备都做了冗余备份，并将这种冗余尽可能的以交叉组网的方式来组织以达到最高的可靠性，同时利用冗余的路径还可以达到更高的性能，如下图所示：利用多路径技术可以实现冗余路径的可靠利用。
存储多路径
对逻辑硬盘
进行分区
在逻辑硬盘上创建文件系统
# mkfs.ext3 /dev/sdb1 mke2fs 1.38 (30-Jun-2005) /dev/sdb is entire device, not just one partition! Proceed anyway? (y,n) y Filesystem label= OS type: Linux Block size=4096 (log=2) Fragment size=4096 (log=2) 131072 inodes, 262144 blocks 13107 blocks (5.00%) reserved for the super user First data block=0 8 block groups 32768 blocks per group, 32768 fragments per group 16384 inodes per group Superblock backups stored on blocks: 32768, 98304, 163840, 229376 Writing inode tables: done Creating journal (8192 blocks): done Writing superblocks and filesystem accounting information: done This filesystem will be automatically checked every 39 mounts or 180 days, whichever comes first. Use tune2fs -c or -i to override.
的主要功能就是和存储设备一起配合实现如下功能：
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
高可靠系统（多路径）解决方案分析
高可靠系统对可能的单点故障设备都 做了冗余备份，并将这种冗余尽可能的 以交叉组合的方式来组织以达到最高的 可靠性。
如左图所示，图中的冗余设备包括： ① 外网与应用服务器间的路径 ② 应用服务器本身 ④ 服务器与存储控制器间的路径 ⑤ 存储控制器本身 ⑧ 存储磁盘
Huawei Symantec Technologies Co., Ltd.
Huawei Symantec Technologies Co., Ltd.
查看多路径管理的指定存储系统信息
4、upTools -g [array_id | array_id,lun_id]
# upTools -g 0,1 Information of LUN1 - WWN: 210000e0fc80008900411c7300000001 -------------------LunObject: present CurrentOwningPath: B DevState: OPTIMAL BootOwningPath: B ReportedPresent: Y PreferredPath: B ReportedMissing: N FailoverInProgress: N Controller 'A' Path -------------------NumLunObjects: 0 RoundRobinIndex: 0 Controller 'B' Path -------------------NumLunObjects: 1 RoundRobinIndex: 1 Path #1: LunPathDevice: present IoCount: 15 DevState: OPTIMAL
文档密级 :
UltraPath介绍
多路径组提供
Huawei Symantec Technologies Co., Ltd.
Huawei Symantec Confidential
2020/4/6
目录
❖ 为什么需要多路径 ❖ 为什么需要多路径软件 ❖ 多路径软件相关命令
Huawei Symantec Technologies Co., Ltd.
Huawei Symantec Technologies Co., Ltd.
多路径软件对问题的解决
❖ 物理设备屏蔽（可选） ❖ 虚拟设备生成（必须） ❖ 最优路径选择（必须） ❖ 错误路径 Failover（必须） ❖ 路径恢复 Failback（必须） ❖ 路径I/O负载均衡（可选） ❖ 配合上层软件完成功能，如集群（可选）
系统中单路径连接导致的问题（单点故障）
所谓的单点故障是指网络中的某一处发 生故障，可能导致整个网络瘫痪。
按照这个标准，左图中的可能的单点故 障包括：
① 外网与应用服务器间的路径 ② 应用服务器本身 ③ 服务器与存储控制器间的路径 ④ 存储控制器本身 ⑤ 存储控制器与磁盘间的路径 ⑥ 存储磁盘本身
Huawei Symantec Technologies Co., Ltd.
Huawei Symantec Technologies Co., Ltd.
多路径带来的问题（续）
❖ 混淆 – 操作系统看到两份真实的相同数量的磁盘。 ❖ 危险 – 多路径导致操作系统认为两份磁盘是独立的，这将导致数据毁坏或I/O错
误。 ❖ 没有冗余 – 没有多路径软件，操作系统将不知道何时及如何使用冗余的路径。 ❖ 资源浪费 – 没有多路径软件，操作系统将不能利用冗余路径进行负荷分担。
Huawei Symantec Technologies Co., Ltd.
查看LUN 路径信息
5、upTools -S
# upTools -S ------------------------------------------Array : 0 Module Name : HUAWEI_S5000 ControllerA State : normal Path State : H2C0T1L000 Up
❖ 为什么需要多路径 ❖ 为什么需要多路径软件 ❖ 多路径软件相关命令
Huawei Symantec Technologies Co., Ltd.
多路径软件相关命令
常用命令 1、upTools –V
Version: V100R001 UltraPath for Linux: 1.30.001
2、upTools –a
Huawei Symantec Technologies Co., Ltd.
多路径软件功能1：物理设备屏蔽和虚拟设备的生成
Huawei Symantec Technologies Co., Ltd.
多路径软件功能2：failover与failback
Huawei Symantec Technologies Co., Ltd.
动态识别LUN
6、hot_add
Huawei Symantec Technologies Co., Ltd.
Linux多路径安装的注意事项
• 一般操作方法： 1、安装多路径前，HBA驱动版本的正确，配置的正确 2、安装多路径前，完成端口，LUN的映射，在主机端可正常
读写。 3、安装多路径后，查看相关配置是否正确，重启主机。 • 定位问题需要的信息 1、操作步骤和时间，现象的描述。 2、日志、menu.lst。 3、upTools –S、upTools –g0、lsscsi的截图。
Huawei Symantec Technologies Co., Ltd.
查看连接到服务器上存储系统信息
3、upTools –c
Array connected by this Host. --------------------------------------------------------------Info of Array Module's seen by this Host. --------------------------------------------------------------Array ID WWN Module Name 0 210000e0fc123456 HUAWEI_S5100 ----------------------------------------------------------------------------------------------------------------------------iSCSI Array: --------------------------------------------------------------Index WWN iSCSI IP ---------------------------------------------------------------
H2C0T1L001 Up ControllerB State : normal Path State : H1C0T1L000 Up
H1C0T1L001 Up -------------------------------------------
Huawei Symantec Technologies Co., Ltd.
❖ 为什么需要多路径 ❖ 为什么需要多路径软件 ❖ 多路径软件相关命令
Huawei Symantec Technologies Co., Ltd.
多路径组网带来的问题
❖ 同一个LUN在操作系统中被多次表现，并表现为 不同的设备。
其中，后四个盘为SAN存储上的两个LUN分别通过两组光纤， 在操作系统中形成的四个盘。
Huawei Symantec Technologies Co., Ltd.
Windows多路径相关配置
见演示说明。
Huawei Symantec Technologies Co., Ltd.