Windows_Server_2008_R2_X64环境下Oracle_11g_R2_RAC+ASM环境搭建及COSS6.0单点故障自动切换配置指南

Windows_Server_2008_R2_X64环境下Oracle_11g_R2_RAC+ASM环境搭建及COSS6.0单点故障自动切换配置指南V1.02013.2北京广通信达科技有限公司目录目录 (3)第1章引言 (6)1.1什么是RAC (6)1.2RAC关键特性 (6)1.2.1高可用性 (6)1.2.2高性能 (6)1.3Oracle 11gR2 RAC简介 (6)1.4部署背景 (7)第2章总体规划 (8)2.1服务器规划 (8)2.2网络规划 (8)2.3存储规划 (8)2.4数据库规划 (9)2.4.1软件规划 (9)2.4.2数据库配置 (9)2.5网络拓扑规划 (10)第3章环境配置 (10)3.1操作系统配置 (10)3.1.1修改主机名、统一用户名密码 (10)3.1.2关闭防火墙、配置DEP和UAC (11)3.1.3修改虚拟内存 (13)3.1.4修改注册表 (13)3.2网络配置 (14)3.2.1添加IP地址、修改网卡名 (14)3.2.2修改网卡优先级 (16)3.2.3修改hosts文件 (17)3.2.4测试网络连通性 (18)3.3存储配置 (20)3.3.1磁盘规划 (20)3.3.2磁盘初始化 (21)3.3.3装载空白NTFS文件夹 (28)3.3.4共享磁盘 (30)第4章RAC安装 (31)4.1安装前配置检查 (31)4.1.1时间同步 (31)4.1.2共享互访测试 (32)4.1.3数据库软件检查 (32)4.2安装grid集群软件 (33)4.3clusterware安装校验 (42)4.4安装database数据库软件 (43)4.5创建ASM磁盘组 (47)4.6使用DBCA创建数据库 (53)4.7RAC服务 (62)4.7.1RAC1节点服务 (62)4.7.2RAC2节点服务 (62)第5章COSS单点故障自动切换配置 (62)5.1在RAC1上部署COSS6.0 (62)5.1.1安装COSS6.0标准版软件 (62)5.1.2创建相关表空间 (63)5.1.3创建用户并赋权 (69)5.1.4初始化Portal数据库 (69)5.1.5更改数据库参数 (69)5.1.6初始化数据库并导入license (70)5.1.7升级COSS6.0到最新补丁 (70)5.1.8升级COSS6.0的Oracle RAC支持补丁 (70)5.2在RAC2上部署COSS6.0 (72)5.3故障模拟测试 (72)第1章引言1.1什么是RACRAC就是real application clusters的缩写，跟rack的读音同Oracle Real Application Clusters (RAC)可以支持24 x 7 有效的数据库应用系统，您可以在由低成本的服务器构成的高可用性系统上自由部署您的应用，而无需修改您的应用程序，使用RAC无需再为成本而牺牲性能和可靠性1.2RAC关键特性1.2.1高可用性Oracle Real Application Clusters 提供一个高性能低成本的应用平台，支持所有类型的应用系统，无论是事务处理型应用还是分析型应用。

所有应用共享同样的服务器和存储资源。

出现任何的服务器或磁盘故障，系统会自动重新接管发生故障的功能。

这些对前端用户的完全透明的。

同样，如果您需要增加服务器或改变其他组件的配置也不会影响到应用系统1.2.2高性能Oracle Real Application Clusters保持着TPC-C的记录，达到每分钟118万个事务的处理能力，在3,000 GB的TPC-H数据仓库Benchmark测试中，Oracle RAC 同样保持性价比的领先地位，保证我们的用户能够达到更好更快的ROI1.3Oracle 11gR2 RAC简介Oracle 11gR2引入了很多新特性，Oracle 11g R2将自动存储管理(ASM) 和Oracle Clusterware 集成在Oracle Grid Infrastructure 中。

Oracle ASM 和OracleDatabase 11gR2 提供了较以前版本更为增强的存储解决方案，该解决方案能够在ASM 上存储Oracle Clusterware 文件，即Oracle 集群注册表(OCR) 和表决文件（VF，又称为表决磁盘）。

这一特性使ASM 能够提供一个统一的存储解决方案，无需使用第三方卷管理器或集群文件系统即可存储集群件和数据库的所有数据Oracle 11gR2 中引入了SCAN（single client access name），即简单客户端连接名，一个方便客户端连接的接口；在Oracle 11gR2之前，client链接数据库的时候要用vip，假如cluster有4个节点，那么客户端的tnsnames.ora中就对应有四个主机vip的一个连接串，如果cluster增加了一个节点，那么对于每个连接数据库的客户端都需要修改这个tnsnames.ora。

SCAN简化了客户端连接，客户端连接的时候只需要知道这个名称，并连接即可，每个SCAN VIP对应一个scan listener，cluster内部的service在每个scan listener上都有注册，scan listener接受客户端的请求，并转发到不同的Local listener中去，由local 的listener提供服务给客户端此外，安装GRID的过程也简化了很多，内核参数的设置可保证安装的最低设置，直接使用ASM存储1.4部署背景1.目的：实现运行服务管理系统（COSS6.0）无单点故障，即做到同时部署两套一模一样的运维管理系统，并连接到同一个数据库集群中，当任意一个节点出现故障时，能及时切换到运转正常的节点上，从而保障运维系统的高可用性2.此文档是在某03项目实施现场边部署边撰写的，具有很高的实用性第2章总体规划2.1服务器规划1.建议使用两台硬件配置一模一样的服务器来作为RAC环境的两个物理节点2.服务器至少需要配置两块物理网卡3.服务器规划表：2.2网络规划1.网络规划表：2.其中虚拟IP地址和SCAN IP地址必须为能够使用但未被其他设备配占用的地址，并且需要与公共IP地址在同一个网段3.公共IP地址和心跳IP地址需要设置在物理网卡上，并且需要将两台服务器上配置心跳地址的网卡通过一根网线直接连接起来2.3存储规划1.本次安装环境默认存储已经部署完成，并且操作系统已经能够识别出来2.存储共分配了2000G的空间，分成了5个磁盘，每个磁盘大小为400G3.存储规划表2.4数据库规划2.4.1软件规划2.4.2数据库配置1.各节点安装数据库配置表：2.grid及database软件的安装操作全部都在RAC1服务器上进行，RAC2服务器上的软件都是通过RAC1通过局域网共享来完成安装2.5网络拓扑规划第3章环境配置3.1操作系统配置3.1.1修改主机名、统一用户名密码1.分别更改两台服务器的主机名为RAC1和RAC2，需要重启后生效2.两台服务器统一使用administrator用户，并且保持密码一致3.1.2关闭防火墙、配置DEP和UAC1.分别关闭服务器RAC1和RAC2的防火墙2.分别配置两台服务器上的数据执行保护（DEP），选择‘仅为基本windows程序和服务启用’，需要重启后才能生效（可配置完下一步后一起重启）3.分别配置两台服务器上的UAC，需要重启后生效3.1.3修改虚拟内存1.由于服务器的内存为16G，按照Oracle的官方文档，虚拟内存至少为实际内存的2倍，此处选择在本地磁盘一个较大的空白分区（E盘）中划分了虚拟内存，取值范围：32G~64G，即初始值：32768MB，最大值：65536MB2.设置方法如下图所示，需要重启后生效3.1.4修改注册表1.因为在网络调试时，Windows的“媒体感知”功能会检测出本机和局域网设备没有正常连通，接着可能就会禁用捆绑在网卡上的某些网络协议，其中就包括TCP/IP协议。

由于TCP/IP协议被禁用了，这样该TCP/IP应用程序就无法进行调试了，因此需要禁用媒体感知功能2.设置方法：开始→运行→regedit →HKEY_LOCAL_MACHINE →SYSTEM →CurrentControlSet →Services →Tcpip →Parameters →新建一个DWORD值，命名为DisableDHCPMediaSense 值为1，如下图所示，需要重启后生效3.2网络配置3.2.1添加IP地址、修改网卡名1.按照网络规划中的表格设置服务器网卡的IP地址，下面以RAC1服务器为例，设置后截图如下：公共IP地址私有IP地址（心跳地址）2.更改两台服务器的两个网卡名称分别为pub和pri，以区分公共IP地址和私有IP地址（心跳地址），更改后截图如下：3.2.2修改网卡优先级1.修改两台服务器网卡的优先级，将pub网卡的优先级设置高于pri网卡，以便查找网络时优先查找公共IP地址，修改方法详见下面几步2.开启菜单栏3.打开高级设置4.将pub位置调整到pri前面，并且将IPV6协议去掉（注意pri同样需要修改），将IPV4协议调整到IPV6之前，更改后的截图如下：3.2.3修改hosts文件1.修改两台服务器的hosts文件，将需要设置的IP地址及相应的主机名添加进去，两台服务器的hosts文件必须一致，2.hosts文件的路径为：C:\WINDOWS\System32\drivers\etc\hosts，修改后的截图如下：注意：IP地址与主机名之间不是空格，而是按tab键3.2.4测试网络连通性1.hosts文件修改完成后可使用ping命令来验证设置是否正确2.其中虚拟IP地址和SCAN IP地址此时是ping不通的，主要查看的是对应的IP是否正确3.3存储配置3.3.1磁盘规划1.磁盘规划如下表所示：2.需要检查一下上表中的磁盘编号与LUN编号是否对应，如下图所示：注意：1)这里不是说一定要磁盘1对LUN1，LUN编号也可能是从0开始算起，那样的话就是LUN0对磁盘12)一定要确保在RAC1和RAC2服务器上看到的编号对应都一致3.3.2磁盘初始化1.分别在RAC1和RAC2服务器上将所有磁盘设置成联机状态，如下图所示：2.磁盘初始化操作在RAC1服务器上进行3.将5个磁盘全部新建简单卷，注意不要分配盘符和格式化磁盘1)选择磁盘1，单击右键选择新建简单卷，打开向导，点击下一步2)按照默认设置，点击下一步3)选择‘不分配驱动器号或驱动器路径’，点击下一步4)选择‘不要格式化这个卷’，点击下一步5)点击‘完成’即可结束向导6)其他4个磁盘均按上述操作完成简单卷的建立，全部建完后的截图如下：7)此时登录到RAC2服务器，打开磁盘管理，选择‘重新扫描磁盘’8)扫描完成后，磁盘格式已经自动变成RAW，但是系统默认为每个磁盘增加了驱动器号，如下图所示：9)此时需要删除磁盘1到磁盘5的驱动器号，选择磁盘1，单击右键打开‘更改驱动器号和路径’10)选中驱动器号H，单击删除11)确认删除12)其他4个磁盘按照上述操作删除各自的驱动器号，删除完成后，RAC2服务器的截图如下：4.分别在RAC1和RAC2服务器上开启‘自动装载所有新卷’功能，下图以RAC1服务器为例，RAC2操作类似3.3.3装载空白NTFS文件夹1.分别在RAC1和RAC2服务器上的C盘新建一个空文件夹，命名为asm，然后在asm文件夹中再新建5个空文件夹，名称分为ocr、data1、data2,、data3、fra2.分别将已经初始化的5个磁盘按顺序挂载到上述空文件夹内，两台服务器均要做此操作，操作步骤如下图：1)选择磁盘1，右键打开‘更改驱动器号和路径’选项2)选择装载ocr文件夹3)选择完成后截图如下，点击确认即可完成4)按照上述步骤装载剩余的文件夹，注意对应顺序，装载完成后asm文件夹内容显示如下：5)在RAC2服务器上重复上述4歩操作，同样需要注意装载文件夹的顺序3.3.4共享磁盘1.分别在RAC1和RAC2服务器上开启C盘和D盘共享，并且将everyone权限设置为完全控制，步骤如下：1)单击右键选择‘高级共享’2)将everyone用户的权限选择成完全控制3)将D盘也按照上述操作开启共享，设置完成后截图如下：4)在RAC2服务器上重复上述3歩操作2.重启两台服务器，在两个节点重新扫描磁盘，确保磁盘1~5在RAC1和RAC2服务器上均可见，并确保任何一个分区均未分配驱动器号，如果出现驱动器号必须删除第4章RAC安装4.1安装前配置检查4.1.1时间同步1.查看两台服务器的Server、Workstation服务是否启动，将其设为自动启动2.在RAC1服务器上运行命令：net time \\rac1 (查看RAC1的当前时间)3.在RAC2服务器上运行命令：net time \\rac1 /set (设置RAC2时间与RAC1同步)4.1.2共享互访测试1.在RAC1服务器上运行命令：net use \\rac2\C$ 和net use \\rac2\D$2.在RAC2服务器上运行命令：net use \\rac1\C$ 和net use \\rac1\D$4.1.3数据库软件检查1.拷贝需要安装的软件到RAC1服务器的D盘的oraclesoft文件夹中并解压到当前目录2.注意win64_11gR2_database由两个压缩文件组成，必须将两个压缩文件解压到同一个目录下，否则在安装数据库时会报错4.2安装grid集群软件1.进入grid软件目录，双击setup开始执行安装程序，此处选择‘安装和配置集群的网络基础结构’2.选择‘高级安装’3.选择安装语言4.填写集群名称和SCAN名称，必须填写hosts文件中SCAN IP对应的主机名5.添加rac2节点6.rac2节点添加完成后截图7.更改网络接口类型，默认选项如果不对，需要手动更改8.此处选择‘自动存储管理（ASM）’9.点击‘标记磁盘’按钮，来添加ASM磁盘10.在此界面可以看到之前已经初始化好的5块磁盘，因为此处设置的是OCR磁盘组，根据存储规划，需要选择第一块磁盘，并且标记为OCR11.查看磁盘情况12.完场添加13.选中刚添加的磁盘14.添加ASM口令15.由于设置的密码不符合标准，需要确认来强制使用16.此处选择‘不使用IPMI’17.选择软件相关目录，根据规划要求，此处选择D盘18.先决条件检查19.如果检查通过，则出现概要，如果提示失败，会有相应的提示，请根据提示检查上一章节中的设置是否存在问题20.开始安装后，会在下图中红框标注的位置（网格基础结构配置）停顿约20分钟，此处也是grid安装成功与否的关键所在，如果此处出现问题，则需要卸载grid，并检查之前所有的设置，然后再次尝试安装，直到显示成功为止21.安装完成截图4.3clusterware安装校验grid安装完成后，如果安装成功，可在dos环境下通过crs_stat –t –v命令查看集群启动了哪些服务：4.4安装database数据库软件1.进入database目录，双击setup开始安装database数据库软件，此处去掉‘接收安全更新’选项2.确认跳过‘指定电子邮件地址’3.选择‘仅安装数据库软件’4.查看节点名称5.选择安装语言6.选择安装企业版，并且勾选所有组建7.选择安装路径为D盘8.先决条件检查9.安装概要10.安装到此处时，执行远程安装RAC2节点的数据库，此时等待时间会很长，请耐心等待11.安装结束时会提示到RAC2节点上执行selecthome.bat脚本，用于在RAC2节点上激活Oracle相关的产品12.RAC2节点上selecthome.bat脚本的位置如下图所示，双击执行后会弹出一个dos窗口，执行时间很短4.5创建ASM磁盘组1.运行中输入asmca命令，打开ASM配置界面，执行命令后需要等待10秒钟才能弹出配置界面2.在磁盘组选项卡中点击新建3.单击‘在磁盘上加载标记’4.选择添加磁盘5.根据存储规划，选择磁盘2到磁盘4为数据文件磁盘，并标记成DATA6.查看选择的磁盘，并完场添加7.勾选添加的磁盘，命名磁盘组名称为DATA。