广电信息系统扩容实施方案.doc

广电信息系统扩容实施方案广电信息系统扩容实施方案 目 录I.项目背景说明3II.项目实施目标3III.项目总体实施规划3A.系统拓扑图3B.HP MSA2312存储实施4C.双机集群配置过程11I. 项目背景说明在现代IT技术当中，一个成功系统数据的重要性已远超过硬件设备本身，一套完善系统中的数据安全及保障有着极高的要求。随着某广电业务的快速增长，为了解决数据的高可用性和安全性问题，在原先只有一台安装一套数据库的HP DL580 G5服务器基础上，准备另外增加三台HP DL580 G5服务器，在总共四台服务器中每两台做成oracle RAC来保障数据应用的可用性与可靠性。II. 项目实施目标在此项目中，Windows2003 Enterprise Server操作系统和应用程序安装在各自两台服务器的本地系统盘上，应用系统的数据是通过磁盘阵列集中管理和数据备份，能够极大地保护了数据的安全性和保密性。用户的数据存放在外部HP MSA2312SAS共享磁盘阵列中，如果一台服务器出现故障时，备机主动替代主机工作，保证服务不中断。双机热备份系统采用网络“心跳线”方法保证主系统与备用系统的联系，一旦“心跳线”信号表明主机系统发生故障，或者备用系统无法收到主机系统的“心跳线” 信号，则系统的高可用性管理软件认为主机系统发生故障，主机停止工作，并将系统资源转移到备用系统上，备用系统将替代主机发挥作用，以保证网络服务运行的稳定性。III. 项目总体实施规划A. 系统拓扑图该方案是由四台HP DL580 G5服务器和一个HP MSA2312 SAS共享磁盘阵列柜组成，系统拓扑图如（图A.1）所示：（图A.1）B. HP MSA2312存储实施一、HP MSA2312存储支持四台服务器的连接，如下（图B.1）所示，在双路径配置下将P2000 G3 SAS MSA双控制器阵列机箱连接到四台服务器需要八根SAS电缆。（图B.1）二、配置HP MSA2312存储过程如下：1、登录到控制台。控制A和B默认的IP地址是：10.0.0.2和10.0.0.3，子网是255.255.255.0，网关是10.0.0.1。登录：用户名：manage 密码：!manage2、建立虚拟磁盘、配置磁盘阵列l 选择要配置在一个Vdisk 的物理硬盘；l 选择在此Vdisk上建立卷的数量；l 输入卷的大小和卷名后选择添加卷；l Vdisk 建立后可通过“视图”“概况”查看现有Vdisk 的建立状态。 （初始化完成后操作系统才可以识别到存储空间，但初始化程度不会影响分配Vdisk，初始化时Vdisk的状态是Critical。）3、 分配卷给服务器l 给光纤卡和所对应的控制器端口起一个别名，然后将卷分配给相应的服务器；l 主机映射。光纤卡的WWN可通过Home及光纤卡背部看到，记下光纤卡WWN与控制器端口的对应关系后给相应端口起一个别名（Nickname）；4、 完成上述操作后，服务器即可识别存储空间，一台服务器安装了两块HBA，需要下载/安装双HBA绑定程序将两块HBA卡绑带为一条链路以实现链路冗余。（注意：未加入“虚拟磁盘”的物理磁盘默认为全局备用磁盘；当“虚拟磁盘”有磁盘故障时如果没有专用的备用磁盘，系统会自动将全局备用磁盘加入阵列并重建；如果加入有数据的硬盘，必须先执行“清除磁盘元数据”才可加入阵列或做SPARE。）三、配置HP MSA2312过程图如下（图B.2）（图B.14）所示：（图B.2）（图B.3）（图B.4）（图B.5）（图B.6）（图B.7）（图B.8）（图B.9）（图B.10）（图B.11）（图B.12）（图B.13）（图B.14）C. 双机集群配置过程一、安装要求1操作系统需要Windows2003 SP1以上。2Windows 2003能够自动mount 裸磁盘。3机器名字在8字符以内，不能有大写，比如server1，server2。4两个节点的administrator用户的密码一样。5每个节点至少有两块网卡，系统认到的第一块网卡用于数据库的公共访问，系统认到的第二块用于数据库服务器间的私有通信。所有节点的私有网卡名称为private，所有节点的公有网卡名称为public。私有网卡、公有网卡各通过不同的千兆交换机连接。6总共规划6个IP地址，其中四个为一个网段，例如：10.10.10.1/2/3/4，用于公有网卡通信。另外两个为另一网段，例如192.168.0.1/2，用于私有网卡通信。7共享磁盘在两个节点都要认到。二、安装前准备1存储配置1)使磁盘能够自动MOUNT。a) 在节点1执行：C: diskpartDISKPARTautomount enableAutomatic mounting of new volumes enabled.C:exit.b)在节点2重复上面步骤。c）重起两个节点。2)划分磁盘存储采取NTFS+RAW+OCFS的方式。 NTFS：ORACLE软件安装在本地磁盘。 RAW：OCS和VOTING安装在共享盘的裸磁盘上。 OCFS：数据库建立在共享磁盘的集群文件系统上面。本地磁盘预留至少10G磁盘安装ORACLE软件。共享磁盘划分两个256M逻辑盘安装CRS，一个200G逻辑盘作为归档盘，剩余的磁盘划为一个逻辑盘来建立数据库。划分的逻辑盘都不要加盘符，不要格式化。2网络配置1)第一块网卡作为public网卡，第二块网卡作为private网卡。2)在C:WINDOWSsystem32driversetchosts文件中加入IP地址与对应的主机名。如：10.168.3.170 server110.168.3.171 server210.168.3.172 server1-vip10.168.3.173 server2-vip192.168.0.1 server1-priv192.168.0.2 server2-priv3)检查连通性在两个节点做：net use node1nameC$net use node2nameC$三安装cluster软件1运行crs光盘的setup.exe这一步指定OCR、VOTING的安装位置，并且格式化用来建立数据库的共享盘和放归档的共享盘为OCFS。l 选择第一块256M磁盘，点edit：l 选择“place OCR(Primary) on this partion”。l 选择第二块256M磁盘，点edit:l 选择“place voting disk on this partion”。l 分别选择用来做数据的磁盘和归档的磁盘,点edit:l 选择“format partition with CFS”，并给分配盘符,（在点OK是,先在二节点给磁盘分配相应的盘符。）2安装crs后会启动一些配置工具，crs会根据配置的私有共有网卡来配置用于外部连接和内部连接的网络。（Vipca时很慢，有时会报错，关掉当前界面，手工配置$CRS_HOMEbinvipca.bat）3.安装CRS后会产生四个服务,evmlogger,evmd ,crsd,ocssd四安装数据库软件1运行数据库光盘的setup.exe五升级数据库升级CRS)关闭所有的后台服务；)运行升级包软件，选择CRS_HOME，一步一步安装完成；)查看后台服务是否启动。升级数据库软件)关闭所有的后台服务；)运行升级包软件，选择ORACLE_HOME，一步一步安装完成；)查看后台服务是否启