双机热备搭建系统解决方案

UPS电源安装实施方案
1.双机集群介绍
1.1. 双机集群的原理说明
双机容错是计算机应用系统稳定、可靠、有效、持续运行的重要保证。

它通过系统冗余的方法解决计算机应用系统的可靠性问题,并具有安装维护简单、稳定可靠、监测直观等优点。

当一台主机出现故障的时候,可及时启动另一台主机接替原主机任务，保证了用户数据的可靠性和系统的持续运行。

在高可用性方案中,操作系统和应用程序是安装在两台服务器的本地系统盘上的，而整个网络系统的数据是通过磁盘阵列集中管理和数据备份的。

数据的集中管理是通过双机热备份系统,将所有站点的数据直接从中央存储设备来读取和存储,并由专业人员进行管理,极大地保护了数据的安全性和保密性。

用户的数据存放在外接共享磁盘阵列中,在一台服务器出现故障时，备机主动替代主机工作,保证网络服务不间断。

双机热备份系统采用“心跳”方法保证主系统及备用系统的联系。

所谓“心跳”，指的是主从系统之间相互按照一定的时间间隔发送通讯信号,表明各自系统当前的运行状态。

一旦“心跳”信号表明主机系统发生故障，或者是备用系统无法收到主机系统的“心跳”信号,则系统的高可用性管理软件(双机软件)认为主机系统发生故障，立即令主机停止工作,并将系统资源转
移到备用系统上,备用系统将替代主机发挥作用，以保证网络服务运行不间断。

双机热备模式即目前通常所说的active/standｂy 方式,ａｃtｉvｅ服务器处于工作状态；而ｓtaｎｄｂy服务器处于监控准备状态。

当actiｖe服务器出现故障的时候，通过软件诊测或手工方式将ｓｔanｄｂｙ机器激活,保证应用在短时间内完全恢复正常使用。

这是目前采用较多的一种模式。

1.2. 双机系统逻辑图
1.3. 双机热备实现模式
双机热备有两种实现模式,一种是基于共享的存储设备的方式,另
一种是没有共享的存储设备的方式,一般称为纯软件方式。

基于存储共享的双机热备是双机热备的最标准方案。

这种方式采用两台(或多台)服务器，使用共享的存储设备(磁盘阵列柜或存储区域网ＳＡN)。

两台服务器可以采用热备(主从）、互备、双工(并行）等不同的方式。

在工作过程中,两台服务器将以一个虚拟的IP地址对外提供服务，依工作方式的不同，将服务请求发送给其中一台服务器承担。

同时,服务器通过心跳线(目前往往采用建立私有网络的方式）侦测另一台服务器的工作状况。

当一台服务器出现故障时,另一台服务器根据心跳侦测的情况做出判断，并进行切换,接管服务。

对于用户而言,这一过程是全自动的，在很短时间内完成,从而对业务不会造成影响。

由于使用共享的存储设备，因此两台服务器使用的实际上是一样的数据，由双机或集群软件对其进行管理。

1.4. 双机系统连接示意图
2.SAP和MII双机集群解决方案
目前ＳＡP和MII的生产系统已经稳定运行，要实现SAＰ和MII 双机集群的解决方案，必须要满足几个条件，并制定周密的实施计划,并进行风险评估后方可实行。

2.1. 存储备份要求
2.1.1.存储备份磁盘空间要求
目前的SAP生产系统已经使用了几个月了，产生了大量的生产数据，所以在做SAP双机集群的时候需要对现有的生产数据进行备份,包括ＳAP的文件系统备份以及oracle数据库的全库备份。

SAP的备份数据包括:
SＡP应用、可执行文件和一些日志，占用６ＧＢ,增加率可以忽略不计
SＡP安装文件备份,占用９2.5GB不会增长
存放数据库备份数据的目录，占用１8７GB，存放了最近一个月的备份数据，根据需要可以适应删除。

SAP数据库,占用１60多GＢ,每月增加１0ＧB。

完全备份这些数据需要的磁盘空间,6+９2.5+1８７+1６0= 446GB，小于500GＢ。

目前的MII生产系统已经使用了几个月了，在做MII双机集群的时候需要对现有的生产数据进行备份，包括MII的文件系统以及ｏr
ａcle数据库的全库备份。

ＭII的备份数据包括:
MII的数据库，占用35GB,增长量很小。

其它文件,可以忽略不计。

完全备份这些数据需要的磁盘空间，小于100GB。

2.1.2.当前系统存储空间分配图
从图中我们可以清楚的看到,存储磁盘共有９ＴB的空间可以使用,各系统目前已经分配了8TＢ的磁盘空间,还有1TＢ的空间可以分配使用。

2.1.
3.存储磁盘使用情况分析
目前各生产系统的文件系统的增长是基本不变的，主要的磁盘增长量集中在数据库上。

各生产系统数据库在不同时期占用磁盘空间和数据增长的情况如下表，
2.2. 硬件要求
2.2.1.SAＰ系统
由于目前ＳAP的生产系统已经采用了一台HP DL5８0 G５的服务器作为主机,SAＰ的生产数据保存在HP的ＭSA2000的存储盘柜上,服务器及存储之间采用光纤链路及光纤交换机进行通信，所以实现SAP 的双机集群解决方案还需要的硬件主要是添加一台HP DL580 G5的
服务器作为备机。

2.2.2.MII系统
而MII生产系统采用的是HP DL３80 G６的服务器作为主机,MI Ｉ的生产数据保存在HＰ的MSA2000的存储盘柜上，服务器及存储之间采用光纤链路及光纤交换机进行通信，所以实施MII双机集群解决方案还需要的硬件主要是添加一台ＨＰ DL380 Ｇ６服务器作为备机。

2.2.
3.光纤交换机端口许可
目前的HＰ光纤交换机采用的是HP 8/24 SAN Switch,即购买了8个光纤交换机端口的许可，而现在已经由７台服务器使用了7个端口,如果同时安装SＡP和MII双机系统，再增加两台生产服务器就需要对端口使用许可进行升级。

2.2.4.KＶＭ切换器升级
目前的KVM切换设备只有8个端口,而如果增加两台服务器,就需要９个端口，因此要对KVM切换器设备进行升级，需要再购买一台8端口的KVＭ切换器及原切换设备进行级连，合并之后，在输出显示器上可同时对１6台服务器进行切换显示。

2.2.5.存储设备
在存储设备方面,除了备份当前的SAP和MII生产数据之外，如果
需要充分考虑冗余，则在现有的存储磁盘基础上需要增加存储扩展笼以及存储硬盘等设备。

因此,对ＳAP和MＩI系统做双机集群功能,就需要考虑两种方案（增加存储设备、不增加存储设备)。

2.2.6.备件
存储硬盘在长期的不断电使用过程中，比较容易产生问题甚至是故障报警，为了能在第一时间对产生故障的硬盘进行更换，就需要准备几块硬盘备用,在此建议使用3块1TB的硬盘作为备件。

目前每台生产服务器都配置了三块硬盘做RＡIＤ5,可以保证一块硬盘发生故障时，服务器的数据不会丢失。

如果要确保数据的绝对安全,并能在第一时间对故障硬盘进行更换,则还需要考虑准备几块服务器硬盘作为备件,在此建议准备4块１４6ＧB（及原型号一样）的服务器硬盘为备件。

2.2.7.防雷设备
由于机房目前已经安装了一、二级防雷设备,考虑到机柜中的设备较多，负载较大,需要做好防雷措施。

因此可考虑采用在机房配电柜和机柜PDU之间增加两路三级防雷设备。

2.2.8.硬件设备清单
2.2.8.1. 方案一不增加存储设备方案
本方案主要是利用现有的存储设备中的未分配的磁盘空间来备份
生产数据,因此,除了安装双机增加的服务器以及光纤交换机端口许可和所需配件之外，无需再增加存储设备。

设备配置清单如下：
DＬ580 G5 1台
项目配置说明数
量备注
处理器Intel 四核Xeon E
７4２024核处理器,共8核
内存16 X 2GB =3２GB16最大支持256GB
内置硬盘14６GB X ３310k rｐm,RＡID5，最多可扩至16块
光驱DVＤ１可选DVD/RW
RAＩD卡P40０I／２56MB１
网卡10／100/1０00M2内置１0０M/1０00Ｍ网卡控制终端ILO(选配)1系统管理 (可选）
DL３80 G6 1台
项目配置说明数
量备注
处理器Intel 双核Xeｏｎ
E55401四核处理器
内存８ X ２GＢ = 1６
GB8最大支持256GB
内置硬盘１46GＢ X 3310ｋｒpm,ＲAID5，最多可扩至16块
光驱DVＤ1可选DVＤ/ＲW
RAID卡P400I/２56MB1
网卡1０/1０0/1０0０M2内置１00M/１０００M网卡控制终端ILＯ（选配）１系统管理(可选）
光纤交换机端口许可 2套
项目配置说明数
量备注
光纤交换机端口许可ＨP 8／8 aｎd ８
/24 SAＮ Swｉtｃ
h 8-ｐt Upgr LT
Ｕ
２
为了做SAP和MII生产系统的双
机，两台光纤交换机增加2套8
个端口的许可
KVM切换器升级设备 1套
项目配置说明数
量备注
ＫVM切换器HP 0x2ｘ８ＫVM
ＳＶR ＣNＳＬ
SW
1
通过级连方式及原KＶM切换器
连接,合并后，可同时对16台服
务器进行切换显示。

连接线KVM ＵＳB Cｎsl
Itfc Adptr 1PK
ALL
2
增加两台服务器设备,增加2条
连接线
光纤卡（单模HBA卡）4块
项目配置说明数
量备注
光纤卡
ＨP ４1B PＣIe
4Gb ＦＣSｉｎ
glｅPort HＢA
4
给ＳAP和MII系统做双机,增加
两台服务器,就需要增加4块单
模的ＨBA卡
光纤收发模块 8个
项目配置说明
数
量备注
光纤收发模块ＨＰ８Ｇb Ｓ
hortｗave Ｂ－s
ｅriｅs FC SＦ
Ｐ+ １Ｐaｃk
8
4块单模的HBA卡,需要8个光纤
收发模块
光纤跳线 8根
项目配置说明数
量备注
光纤跳线
15米ＬC-LC 多模
光纤通道电缆8
8个光纤收发模块需要８条15米长的LC－ＬC多模光纤通道电缆
备件硬盘存储硬盘3块、服务器硬盘5块
项目配置说明数
量备注
服务器硬盘备件
ＨP 146GＢ 10Ｋ
SAS 2.５ DP HDD
4作为服务器硬盘的备件。

存储硬盘备件HＰＭＳA2 1TＢ
７.2K rpｍ 3.5 in
ｃh ＳＡTA HDD
3作为存储设备的备件。

防雷设备
项目配置说明数
量备注
三级防雷器型号ＯBO VF２30２
原机柜需要安装2个OBO三级防
雷器，确保设备安全设备清单表
编号类型设备名称数
量
1服务器DＬ5８0 G５1
2服务器DL3８0 G61
３配件光纤交换机端口许可
(2 Ｘ８)
2
4配件光纤卡4
5配件光纤收发模块８
6配件光纤跳线８
7硬盘备件存储硬盘备件(1TB规
格)
3
注：如果厂方能提供光纤交换机端口许可,则红色部分可从本方案设备清单中去除
2.2.8.2. 方案二增加存储设备方案
由于目前存储设备MＳA２0０0中已经插满了12块1Ｔ的硬盘,而目前已经分配了1１块硬盘给系统使用，1块作为热备盘，其中只有１ＴB的空间没有分配,因此,除了备份现有的生产数据外，考虑到几年后的数据量增加存储磁盘空间可能不够，需要增加存储设备,在本次安装配置ＳＡP和MＩＩ双机集群时一起增加存储设备。

可通过增加存储盘柜扩展笼和存储硬盘的方式来实现。

另外，如果增加了两台服务器,再增加存储扩展设备，现有机柜的承重、容量、负载可能会压力较大，可考虑新增一个机柜的解决方案。

在实施时，将新旧两个机柜并排放在一起，中间可相隔１－2米的距离，从新增机柜的PＤU中通过两路电源线接入机房配电柜中，新增机柜中安放新增的两台服务器,存储扩展设备还是存放在原机柜中。

新旧机柜中的双机系统相关服务器可采用从地板下穿网线进行连接。

新增机柜服务器及原机柜的存储设备通过地板下穿光纤线连接。

新增机柜中的服务器接入机房网络交换机可采用从地板下穿网线进行连
接
新旧机柜的连接线如下图所示
设备配置清单如下：
ＤL５8０Ｇ5 １台
项目配置说明数
量备注
处理器Intｅｌ四核
Xeon E74202４核处理器，共8核
内存1６X 2ＧB =32
ＧB１6最大支持２56ＧB
内置硬盘１46GB X ３3１０k ｒpｍ,RAID5，最多可扩至16块
光驱DＶD1可选ＤVＤ/RW
RＡID卡Ｐ400Ｉ/256MＢ1
网卡1０/100/1000M2内置1０0M／1000M网卡控制终端IＬO(选配）１系统管理（可选）DL３８0 Ｇ6 1台
项目配置说明数
量备注
处理器Intｅl 双核Ｘｅ
ｏｎ E55４01四核处理器
内存8 Ｘ 2ＧB = 16GB8最大支持256GB
内置硬盘146GB Ｘ33１0k rpm,RＡＩＤ５,最多可扩至16块
光驱ＤVD1可选DVD/RW
RAID卡P4０0I/２56ＭＢ１
网卡10／1０0／1000M2内置100M/1００0M网卡控制终端ＩLO(选配)1系统管理 (可选)
光纤交换机端口许可２个
项目配置说明数
量备注
光纤交换机端口许可ＨP 8/８ and ８
/2４ＳAN Ｓwｉ
tcｈ 8-pt Ｕｐg
ｒ LTU
2
为了做SAＰ和MII生产系统的
双机,两台光纤交换机增加2套
8个端口的许可
KVM切换器升级设备 1套
项目配置说明数
量备注
KＶM切换器
HＰ０ｘ２x8 KVM
SVR ＣNSL ＳＷ1
通过级连方式及原ＫVＭ切换器连接，合并后，可同时对16台服务器进行切换显示。

连接线
ＫVM USB Cｎsl Ｉ
tfc Adpｔr １PK
ALL
2
增加两台服务器设备，增加2条
连接线
光纤卡(单模ＨＢA卡)4块
项目配置说明
数
量备注
光纤卡
HP 4１ＢPCＩe
4Ｇb FＣ Single
Port HＢＡ
4
给SAP和MＩI系统做双机，增
加两台服务器,就需要增加４块
单模的HBA卡
光纤收发模块 8个
项目配置说明
数
量备注
光纤收发模块HＰ８Gb Ｓhoｒ
twave B-sｅries
FC SFP+ 1 Ｐａ
ck
８
4块单模的HBA卡，需要8个光
纤收发模块
光纤跳线 8根
项目配置说明数
量备注
光纤跳线
15米LＣ－LC 多
模光纤通道电缆8
8个光纤收发模块需要8条15米长的LＣ-LC多模光纤通道电缆
存储扩展设备 1套
项目配置说明数
量备注
存储扩展笼ＨP MSA２012
３.5-in Ｄriｖe
Bａy Chａssis
１
作为存储硬盘的扩展架，可及原
存储控制器相连。

存储硬盘
ＨＰ MＳA2 1TB
7.2K rpｍ 3.５
inch SATA ＨDD
3３块１TＢ存储硬盘可做RAＩD5备件硬盘 3块
项目配置说明数
量备注
服务器硬盘备件HP 1４６GB 10K
SAS 2．５ＤP
HDD
４作为服务器硬盘的备件。

存储硬盘备件HP MＳA2 １TB ３作为存储设备的备件。

7.2K rp ｍ 3.5
ｉｎch SATA
HDD
防雷设备
项目配置说明数
量备注
三级防雷器
型号ＯＢO ＶF２
304
原机柜需要安装两个防雷设备,如果新增机柜，则还需要再安装2个OBＯ的三级防雷设备,确保设备安全
机柜
项目配置说明数
量备注
机柜HP106４2型机柜１HP原装机柜1套，另外相关配件包括：PDU电源２套(1套4个插线板)、地线电源线、供电电源线、防水插头、网线等
设备清单表
编号类型设备名称数
量1服务器DL5８０ G51
2服务器DL3８0 G61
注：如果厂方能提供光纤交换机端口许可，则红色部分可从本方案设备清单中去除
2.3. 软件要求
由于目前SAP和MIＩ生产系统安装的操作系统是windowｓ2003 企业版,数据库是orａcle，所以,要实现生产系统的双机解决方案,
则需要在新增的服务器上安装相应的操作系统、SＡＰ和MII的安装文件和数据库软件。

即操作系统:wｉndows2003 企业版
数据库：orａｃle1０g
双机软件:由操作系统自带的双机集群功能提供。

2.4. 实施要求
在对ＳAP和MIＩ系统进行双机集群实施的时候，需要满足一些实施过程中的要求。

1、安排人员做好生产数据备份的工作
2、由于在实施过程中需要有一定的宕机时间，所以需要做好生产
计划安排，即当ＳAP和MII生产系统出现宕机的时候，如何进行应急操作,比如：入库、出库、盘库、查询、报表等操作。

以及在宕机时间内产生的数据如何处理和系统恢复后数据校验的工作等。

3、需要安排人员做双机集群的安装配置以及调试工作，需要保证
服务IＰ、服务主机名、服务数据库实例名及原来单机安装时的相同
4、需要安排人员在整个双机集群的安装配置过程中进行测试
2.5. 实施计划
2.5.1.实施人员安排
本次双机解决方案实施需要各部分人员密切合作,才能共同完成实施工作。

具体的人员分配情况和职责如下：
2.5.2.实施计划时间表
根据上表中实施计划安排,整个双机安装配置过程预计一周时间,建议从周一开始实施，到周末完成整个实施过程。

如果需要新增机柜重新接电和布设网线，可考虑从周六开始,到下周末结束,使整个安装配置时间增加2天,更加宽裕。

2.6. 实施步骤
安装和配置SAP和MII系统的双机集群功能的实施步骤如下: 2.6.1.实施准备
需要及生产部门和系统使用部门人员协调SAP和MIＩ系统宕机后的应急处理，比如在系统宕机后:入库、出库、盘库、查询、报表等功能如何操作。

并做好实施前的时间和人员准备,包括确定设备摆放位置、参及人员和时间安排等事宜。

2.6.2.生产数据备份
主要是对ＳAＰ和MＩI系统的配置文件以及ORACLＥ数据库的数据进行备份。

对SAP和MII文件系统采用文件拷贝的方式,而对orａclｅ数据库采用全库备份后拷贝的方式进行备份处理。

备份后的数据存放到现有的存储设备ＭＳA２000上，预计所需磁盘空间不超过1TB。

Orａcle数据库备份:
用ＳＡP标准备份命令”brbackup”实施对数据库和archiｖe ｌｏｇ的备份。

备份后应注意保存好备份日志、备份参数文件和ora ｃle数据库参数文件;
ＳAP文件系统级备份:
用tar技术或其他压缩拷贝技术将以下SＡP相关的文件系统进行备份。

/ｕsr／ｓaｐ/trans
/ｕsr/ｓap／PＲD
／sａpmnt/PRD
Ｗindows系统相关备份：
要备份ｈosts和seｒｖｉce文件。

2.6.
3.设备上架安装
分两种方案,方案一为不增加存储设备,方案二为增加存储设备,选择两种方案的工作量是不同的。

方案一的主要的工作是将新增的两台服务器放到机柜上,打上锣丝固定,安装好新增的ＫVＭ切换器,进行连接，并整理好从交换机到新增服务器的网线后固定到位,将原SAP和MII生产服务器及新增的两台服务器分别用星跳线连接，并用光纤将新增的服务器和光纤交换机进行连接。

方案二的工作要在方案一的基础上,还要增加在机柜中安装存储扩展笼,以及插入新增的存储硬盘,并用SＡS线连接到存储控制器，
然后对存储设备进行相应的配置。

另外,如果选择新增一个机柜,则还要增加安装机柜及配套电源、布设和整理连接线的工作量。

2.6.4.服务器安装操作系统系统及双机集群功能
这步主要是在新增的服务器上安装windoｗs2003企业版操作系统,并配置好机器名，ＩＰ地址等，并在原SAＰ和MII生产服务器上安装域,在新增的操作系统上添加域，按照标准的双机集群安装配置步骤在SＡＰ和MIＩ原生产服务器以及新增的服务器上安装双机集群功能,并配置网络和相应的信息。

集群安装注意事项：
两台集群的服务器的主机名称都应重新规划,名称规则应保持原来简单精炼的原则。

集群安装后的服务名称和服务IP应保证和集群前的生产系统名称和IP一致。

2.6.5.调整存储及配置SAP和MII系统
将存储中原指向SＡP和MII生产服务器的虚拟磁盘分别挂接到新增的两台服务器上，并在新增服务器上对SAP和MII系统进行相应的配置修改,使得新增的服务器满足双机集群要求。

2.6.6.配置新建操作系统帐号
在新增的服务器上,对操作系统帐号进行新建和配置,以满足SAP 系统要求。

建立操作系统账号会根据原来生产系统的管理员list,将所有Ｓ
ＡP相关的用户全部移植到新的系统。

使两台服务器的用户信息完全一致。

2.6.7.重装orａcle数据库为集群模式
在原ＳAP和MＩI生产服务器以及新增的两台服务器上重新安装oracle数据库,安装时选择集群模式。

2.6.8.导入备份数据
用ｏrａcｌe工具或命令将之前备份的SAP和MII生产数据库导入到新创建的数据库中。

在两台服务器上重新安装集群方式的oracｌe数据库，并对数据库进行双机配置工作。

配置完成并通过测试后将原来的oracle备份通过SAＰ标准恢复命令”brreｓtｏre”将ＳAP数据恢复到数据库中。

2.6.9.双机切换测试
根据测试计划对双机进行双机切换测试。

１、判断在发生什么样的错误后进行切换,并维护双机切换脚本；
2、维护ＳAＰ和MII切换脚本并加入标准双机切换脚本。

使发生
宕机切换时可以将SＡP和MＩI应用一并启动或停止。

2.6.10.数据检查
使用数据库工具或者在SＡP和ＭIＩ系统中对生产数据进行检
查，对双机集群功能安装后的数据进行严格的核对。

2.7. 测试计划
对SAP和MＩI系统的双机集群实施需要做好以下几个方面的测试工作：
1、在双机集群安装配置后需要进行双机切换测试，测试双机集群
功能是否正常运行。

测试包括：1)将主服务器网络断开,测试应用是否切换到备用服务器。

2）将主服务器数据库断开,测试数据库是否切换到备用服务器。

3)将备用服务器网络断开，测试集群是否工作正
常。

2、在SＡP和MＩI系统恢复正常后，对生产数据进行校验测试,
即测试生产数据是否和安装双机前一致，SAP和MII系统全部功能是否使用正常。

2.8. 风险评估和处理
在整个SＡP和ＭII系统双机集群实施过程中，可能存在一定的风险，需要提前进行预防和处理。

比如：
在实施过程中可能存在的风险
1、在新增服务器上安装配置SAP和MＩＩ系统时出现未知的硬件
或软件故障、打补丁失败、未知错误等。

2、在安装配置双机集群时磁盘存储出错,或未知错误。

3、在备份ORACLE全数据库或ＳAＰ和MＩI文件系统备份时出错
4、建立操作系统帐号或双机切换测试时的一些未知错误等
５、双机全部做完以后对整个SAP生产系统和MII系统进行全部测试时出现的生产数据不一致和一些未知错误。

做好以下几点,可以对实施过程中产生的风险和问题进行有效的规避和解决。

1、提前做好出错的预防，注意观察硬件设备的状态。

2、在安装和配置双机集群时严格按照预先计划的实施步骤去操
作,做完每个步骤后进行检查。

3、在实施过程中按照预先编制的测试计划去实行，并对测试结果
进行跟踪和记录。

4、对SAP和MIＩ系统恢复后的集成测试需要完备和细致。

5、在出现错误提示后不要慌乱，要查找错误原因,并想好解决方
案。

3.硬件设备清单3.1. 方案一
设备清单表如下：
3.2. 方案二
设备清单表如下：
说明：如果厂方能提供光纤交换机端口的许可,则红色部分不在本次采购范围内,可以去除。