多种虚拟机环境下安装Oracle11gRAC

1、多种虚拟机环境境下安装Orracle111g RAAC2016年8月月17日目 录TOC o 1-3 h z u HYPERLINK l _Toc459889400 1、安全环境与网络规划 PAGEREF _Toc459889400 h 5 HYPERLINK l _Toc459889401 1.1、安装环境 PAGEREF _Toc459889401 h 5 HYPERLINK l _Toc459889402 1.2、网络规划 PAGEREF _Toc459889402 h 5 HYPERLINK l _Toc459889403 1.3、Oracle软件组 PAGEREF _Toc45988

2、9403 h 5 HYPERLINK l _Toc459889404 1.4、RAC节点 PAGEREF _Toc459889404 h 5 HYPERLINK l _Toc459889405 1.5、存储组件 PAGEREF _Toc459889405 h 6 HYPERLINK l _Toc459889406 2、创建虚拟机 PAGEREF _Toc459889406 h 6 HYPERLINK l _Toc459889407 2.1、VMware vSphere PAGEREF _Toc459889407 h 6 HYPERLINK l _Toc459889408 2.2、VMware

3、Workstation PAGEREF _Toc459889408 h 16 HYPERLINK l _Toc459889409 2.3、Virtual BOX PAGEREF _Toc459889409 h 22 HYPERLINK l _Toc459889410 3、安装系统 PAGEREF _Toc459889410 h 26 HYPERLINK l _Toc459889411 3.1、安装系统(两节点) PAGEREF _Toc459889411 h 26 HYPERLINK l _Toc459889412 3.2、配置网络(两节点) PAGEREF _Toc459889412 h 3

4、1 HYPERLINK l _Toc459889413 3.3、删除自动生成的虚拟网卡(两节点) PAGEREF _Toc459889413 h 33 HYPERLINK l _Toc459889414 3.4、测试网络(两节点) PAGEREF _Toc459889414 h 34 HYPERLINK l _Toc459889415 4、添加共享存储 PAGEREF _Toc459889415 h 34 HYPERLINK l _Toc459889416 4.1、VMware vSphere PAGEREF _Toc459889416 h 34 HYPERLINK l _Toc4598894

5、17 4.1.1、配置rac1节点 PAGEREF _Toc459889417 h 34 HYPERLINK l _Toc459889418 4.2.2、配置rac2节点 PAGEREF _Toc459889418 h 38 HYPERLINK l _Toc459889419 4.2、VMware Workstation PAGEREF _Toc459889419 h 41 HYPERLINK l _Toc459889420 4.2.1、物理机中添加共享磁盘 PAGEREF _Toc459889420 h 41 HYPERLINK l _Toc459889421 4.2.2、关闭节点，用记事本

6、编辑vmx文件，例如：rac1.vmx(两节点) PAGEREF _Toc459889421 h 41 HYPERLINK l _Toc459889422 4.3、Virtual BOX PAGEREF _Toc459889422 h 42 HYPERLINK l _Toc459889423 4.3.1、配置rac1节点 PAGEREF _Toc459889423 h 42 HYPERLINK l _Toc459889424 4.3.2、配置rac2节点 PAGEREF _Toc459889424 h 47 HYPERLINK l _Toc459889425 5、实现共享存储 PAGEREF

7、_Toc459889425 h 47 HYPERLINK l _Toc459889426 5.1、划分共享磁盘(单节点) PAGEREF _Toc459889426 h 47 HYPERLINK l _Toc459889427 5.2、配置ASM磁盘(两节点) PAGEREF _Toc459889427 h 49 HYPERLINK l _Toc459889428 6、配置Linux系统 PAGEREF _Toc459889428 h 50 HYPERLINK l _Toc459889429 6.1、用户组及用户设置(两节点，root用户) PAGEREF _Toc459889429 h 50

8、 HYPERLINK l _Toc459889430 6.1.1、创建Oracle软件组 PAGEREF _Toc459889430 h 50 HYPERLINK l _Toc459889431 6.1.2、创建grid、oracle用户 PAGEREF _Toc459889431 h 50 HYPERLINK l _Toc459889432 6.1.3、为grid、oracle用户设置密码 PAGEREF _Toc459889432 h 50 HYPERLINK l _Toc459889433 6.2、主机名IP映射文件设置(两节点) PAGEREF _Toc459889433 h 51 H

9、YPERLINK l _Toc459889434 6.3、配置Linux内核参数(两节点) PAGEREF _Toc459889434 h 51 HYPERLINK l _Toc459889435 6.4、设置grid、oracle用户设置shell limits(两节点) PAGEREF _Toc459889435 h 52 HYPERLINK l _Toc459889436 6.5、创建Oracle Inventory Directory(两节点) PAGEREF _Toc459889436 h 53 HYPERLINK l _Toc459889437 6.6、创建Oracle Grid

10、Infrastructure Home目录(两节点) PAGEREF _Toc459889437 h 53 HYPERLINK l _Toc459889438 6.7、创建Oracle RDBMS Home目录(两节点) PAGEREF _Toc459889438 h 53 HYPERLINK l _Toc459889439 6.8、安装相应系统支持包(两节点64&32bit) PAGEREF _Toc459889439 h 53 HYPERLINK l _Toc459889440 6.9、修改grid、oracle用户环境变量(两节点) PAGEREF _Toc459889440 h 54

11、HYPERLINK l _Toc459889441 7、关闭防火墙 PAGEREF _Toc459889441 h 55 HYPERLINK l _Toc459889442 7.1、设置SELinux(两节点) PAGEREF _Toc459889442 h 55 HYPERLINK l _Toc459889443 7.2、关闭防火墙iptables(两节点) PAGEREF _Toc459889443 h 55 HYPERLINK l _Toc459889444 8、设置grid、oracle用户ssh等效性 PAGEREF _Toc459889444 h 56 HYPERLINK l _T

12、oc459889445 9、时钟同步 PAGEREF _Toc459889445 h 57 HYPERLINK l _Toc459889446 9.1、使用Linux系统的NTP服务同步时钟(两节点) PAGEREF _Toc459889446 h 57 HYPERLINK l _Toc459889447 9.2、使用oracle集群软件ctss服务同步时钟(两节点) PAGEREF _Toc459889447 h 58 HYPERLINK l _Toc459889448 10、安装前准备 PAGEREF _Toc459889448 h 58 HYPERLINK l _Toc459889449

13、 11、安装Oracle Grid Infrastructure PAGEREF _Toc459889449 h 59 HYPERLINK l _Toc459889450 11.1、安装流程 PAGEREF _Toc459889450 h 59 HYPERLINK l _Toc459889451 11.2、安装后检查 PAGEREF _Toc459889451 h 73 HYPERLINK l _Toc459889452 11.3、配置ASM磁盘组 PAGEREF _Toc459889452 h 74 HYPERLINK l _Toc459889453 12、安装Oracle DataBase

14、 PAGEREF _Toc459889453 h 77 HYPERLINK l _Toc459889454 12.1、安装流程 PAGEREF _Toc459889454 h 77 HYPERLINK l _Toc459889455 12.2、安装数据库 PAGEREF _Toc459889455 h 86 HYPERLINK l _Toc459889456 13、Oracle RAC维护 PAGEREF _Toc459889456 h 96 HYPERLINK l _Toc459889457 13.1、节点层 PAGEREF _Toc459889457 h 96 HYPERLINK l _T

15、oc459889458 13.2、网络层 PAGEREF _Toc459889458 h 96 HYPERLINK l _Toc459889459 13.2.1、列出CRS网卡 PAGEREF _Toc459889459 h 96 HYPERLINK l _Toc459889460 13.2.2、获取CRS网卡信息 PAGEREF _Toc459889460 h 96 HYPERLINK l _Toc459889461 13.3、集群层 PAGEREF _Toc459889461 h 97 HYPERLINK l _Toc459889462 13.3.1、检查CRS状态 PAGEREF _To

16、c459889462 h 97 HYPERLINK l _Toc459889463 13.3.2、检查CRS 单个服务 PAGEREF _Toc459889463 h 97 HYPERLINK l _Toc459889464 13.3.3、检查CRS是否自动启动（root用户） PAGEREF _Toc459889464 h 97 HYPERLINK l _Toc459889465 13.3.4、启动、停止、查看CRS（root用户） PAGEREF _Toc459889465 h 97 HYPERLINK l _Toc459889466 13.3.5、查看Votedisk磁盘位置 PAGER

17、EF _Toc459889466 h 97 HYPERLINK l _Toc459889467 13.3.6、维护Votedisk PAGEREF _Toc459889467 h 97 HYPERLINK l _Toc459889468 13.3.7、查看OCR状态 PAGEREF _Toc459889468 h 98 HYPERLINK l _Toc459889469 13.3.8、维护OCR PAGEREF _Toc459889469 h 98 HYPERLINK l _Toc459889470 13.4、应用层 PAGEREF _Toc459889470 h 100 HYPERLINK

18、l _Toc459889471 13.4.1、查看CRS状态 PAGEREF _Toc459889471 h 100 HYPERLINK l _Toc459889472 13.4.2、onsctl命令 PAGEREF _Toc459889472 h 100 HYPERLINK l _Toc459889473 13.4.3、srvctl命令 PAGEREF _Toc459889473 h 101 HYPERLINK l _Toc459889474 14、附录： PAGEREF _Toc459889474 h 102 HYPERLINK l _Toc459889475 14.1、CRS名词解释：

19、PAGEREF _Toc459889475 h 102 HYPERLINK l _Toc459889476 14.1.1、CRS一些服务作用 PAGEREF _Toc459889476 h 102 HYPERLINK l _Toc459889477 14.1.2、Oracle Cluster Registry(OCR) PAGEREF _Toc459889477 h 102 HYPERLINK l _Toc459889478 14.1.3、Votedisk PAGEREF _Toc459889478 h 102 HYPERLINK l _Toc459889479 14.1.4、Admin Ma

20、naged和Policy Managed PAGEREF _Toc459889479 h 102 HYPERLINK l _Toc459889480 14.1.5、Grid Name Service(GNS) PAGEREF _Toc459889480 h 103 HYPERLINK l _Toc459889481 14.1.6、Intelligent Management Platform Interface(IPMI) PAGEREF _Toc459889481 h 103 HYPERLINK l _Toc459889482 14.2、安装问题 PAGEREF _Toc459889482

21、h 103 HYPERLINK l _Toc459889483 14.2.1、安装界面乱码 PAGEREF _Toc459889483 h 103 HYPERLINK l _Toc459889484 14.2.2、xhost +报错 PAGEREF _Toc459889484 h 103 HYPERLINK l _Toc459889485 14.2.3、网卡名称与MAC地址不能对应 PAGEREF _Toc459889485 h 104 HYPERLINK l _Toc459889486 14.2.4、Linux6.*yum安装报错 PAGEREF _Toc459889486 h 104 HY

22、PERLINK l _Toc459889487 14.2.5、11g支持Linux系统列表 PAGEREF _Toc459889487 h 104 HYPERLINK l _Toc459889488 14.2.6、udev配置RAC ASM的几种方式 PAGEREF _Toc459889488 h 104 HYPERLINK l _Toc459889489 14.2.7、Oracle问题 PAGEREF _Toc459889489 h 1051、安全环境与与网络规划1.1、安装环环境RAC节点操作作系统：Liinux 66.4 x886_64Clusterr softtware：Oraclle

23、 Griid Inffrastrructurre 11ggr2(111.2.0.4)Oracle Databbase ssoftwaare：Oraclle11grr2(11.2.0.44)共享存储：ASSM1.2、网络规规划节点名称Public IPPrivatee IPVirtuall IPSCAN 名称称SCAN IPPrac1192.1688.2.233231192.1688.2.2333rac-scaan192.1688.2.2335rac2192.1688.2.233232192.1688.2.2334注意：Oraccle11gg新增SCANN-IP，为VIP的一个个池概念1.3、O

24、raacle软件件组软件组件用户辅助组用户主目录ORACLE_BASEORACLE_HOMEGrid Innfrasttructuuregridasmadmiinasmdbaasmoperr/home/ggrid/u01/appp/griid/crss/u01/appp/11.2.0/ggridOracle RACoracledbadbaoperrasmdba/home/ooraclee/u01/appp/oraacle/u01/appp/oraacle/111.2.00/db_111.4、RACC节点节点名称实例名称数据库名称内存操作系统rac1rac1rac8GLinux 66.4 x88

25、6_64rac2rac28GLinux 66.4 x886_641.5、存储组组件存储组件文件系统卷大小ASM卷组名ASM冗余磁盘名OCR、VOTTING DDiskASM5GCRSExternaalOCR_VOTTE数据库20GDATAExternaalASMDATAA快速恢复区5GFRAExternaalBACKUP2、创建虚拟机机2.1、VMwware vvSpherre以adminiistrattor用户登登录虚拟化主主机：对主机右键点击击“新建虚拟拟机”选择自定义配置置，下一步给虚拟机命名 rac1，下一步选择虚拟机存放放位置，下一步选择虚拟机文件件存放位置(尽量放于共共享存储上，空

26、空间大且防止止数据丢失)，下一步选择高版本，下下一步选择操作系统为为Linux，版本为Redd Hat Enterrprisee Linuux 6(664位)，下一步配置CPU、内内存，下一步步选择网卡，配置置两块网卡，一一块作为Puublic，另另一块作为PPrivatte，下一步步选择SCSI驱驱动器类型：LSI Loogic并行行，下一步选择创建新磁盘盘，下一步配置磁盘大小，下下一步上述三个选项的的解释：选择虚拟设备节节点，默认为为SCSI(0:0)，选择模式为为非独立，下一一步选择在虚拟机创创建之前编辑辑选项，继续续编辑光驱设备，选选择ISO文件，完完成查看新建虚拟机机配置以相同方式创

27、建建另一个节点点rac2。2.2、VMwware WWorksttationn新建虚拟机raac1，选择自定义义，下一步选择安装操作系系统ISO，下一一步命名虚拟机，选选择存放位置置，下一步配置内存大小，下一步选择网络类型为为桥接网络，下下一步选择I/O控制制器类型为LLSI Loogic，下一步选择磁盘类型为为SCSI，下一步配置磁盘大小，并并选择将虚拟拟磁盘拆分多多个文件，下下一步指定磁盘文件，下一步以相同方式创建建另一个节点点rac2。2.3、Virrtual BOX新建虚拟机raac1，命名虚拟机机，选择系统类类型为Linnux，版本为Redd Hat （64bitt），下一步步配置内

28、存大小，下一步创建虚拟硬盘，创创建选择虚拟磁盘文文件类型，下下一步选择动态分配，下一步选择文件位置和和大小，下一步创建完成设置虚拟机参数数选择存储，在右右侧属性，点点击分配光驱驱右边的，选选择安装操作作系统ISOO文件以相同方式创建建另一个节点点rac2。3、安装系统3.1、安装系系统(两节点)系统安装过程都都是一致，因因此不予详述述。本文只针针对安装过程程中部分容易易出错的地方方简述选择基本存储设设备提示是否丢弃所所有的数据，yes,diiscardd any data选择自定义分区区，Creaate Cuustom Layouut进入分区界面选择标准分区模模式，Staandardd Par

29、ttitionn分别创建虚拟内内存(swap)、boot分区区、/分区分区结果选择确定格式化化选择写入磁盘选择默认即可选择系统模式，Softwware DDeveloopmentt Workkstatiion，Custoomize Laterr，其他默认开始安装系统安装后，提示重重启系统，并有一系列列配置，其中中启动Kduump根据提示，再次次重启系统，系统安装完完毕！3.2、配置网网络(两节点)此步骤，需要虚虚拟机有两块块网卡，分别为Publiic和Privaate网卡。双机IP配置：节点名称Public IPPrivatee IPrac1192.1688.2.233231rac2192.1

30、688.2.233232使用root用用户登录虚拟拟机，右键，选选择Editt Conneectionn按以下步骤操作作，分别配置置两块网卡IIP为上表对对应项3.3、删除自自动生成的虚虚拟网卡(两节点)所谓虚拟网卡，即即执行 iffconfiig命令列出出的virbbr0，如图执行以下命令来来删除该虚拟拟网卡virsh nnet-liistvirsh nnet-deestroyy defaaultvirsh nnet-unndefinne deffaultservicee libvvirtd restaart再次使用ifcconfigg命令查看，该虚拟网卡卡已不存在3.4、测试网网络(两节点

31、)1、物理机piing两台虚虚拟机racc1、rac2的Publiic IP2、rac1节节点 pinng raac2节点的的Publiic IP和和Privaate IPP3、rac2节节点 pinng raac1节点的的Publiic IP和和Privaate IPP以上三步完全可可以pingg通即可。4、添加共享存存储4.1、VMwware vvSpherre4.1.1、配配置rac1节点关闭rac1节节点，右键rac11节点选择编编辑设置，进入配置界界面，点击添添加选择硬盘，下一一步创建新的虚拟磁磁盘配置磁盘大小，选择厚置备备置零（集群群专用），指指定磁盘的存存放位置，下下一步驱动器设

32、备选择择SCSI 1:0，模式选选择独立（集集群必须选择择此项），下下一步在虚拟机属性中中，选择刚添添加的SCSSI conntrolller 1 驱动器，配置其为物物理模式（用用于支持共享享），以保证证rac1、rac2节点点的共享访问问重复执行上述步步骤，添加另外两两块磁盘，将其驱动器器设备选择为为SCSI 1:1；SCSI 11:2。添加3块共享磁磁盘的racc1节点配置置信息如下：4.2.2、配配置rac2节点关闭rac2节节点，右键rac22节点选择编编辑设置，进入配置界界面，点击添添加选择硬盘，下一一步选择已有虚拟磁磁盘，下一步选择指定的存储储设备，此处需要注注意：选择在racc1

33、节点中创创建的第一块块磁盘驱动器设备选择择SCSI 1:0，模式选择独独立，下一步同rac1节点点一样，在rac2节点点属性中，选择刚添加加的SCSII conttrolleer 1驱动动器，配置其其为物理模式式用于共享重复执行以上步步骤，添加剩余的的2块磁盘。注注意，驱动器器编号要依次次选择SCSSI 1:11、SCSI 1:2。添加3块共享磁磁盘的racc2节点配置置信息如下：4.2、VMwware WWorksttationn4.2.1、物物理机中添加加共享磁盘vmware-vdiskkmanagger.exxe -cc -s 55G -a lsiloogic -t 2 d:Viirtu

34、all MachhinesRACsshareddasmm1.vmddkvmware-vdiskkmanagger.exxe -cc -s 55G -a lsiloogic -t 2 d:Viirtuall MachhinesRACsshareddasmm2.vmddkvmware-vdiskkmanagger.exxe -cc -s 220G -aa lsillogic -t 2 d:VVirtuaal MacchinessRACshareedassm3.vmmdk注意：-a 指指定磁盘类型型 t 2表示直直接划分一个个预分配空间间的文件。4.2.2、关关闭节点，用记事本编编辑vmx文件，例例

35、如：racc1.vmx(两节点)添加如下内容：#sharedd diskks connfigurredisk.EnnableUUUID = TRUUEdisk.loockingg = FFALSEdiskLibb.dataaCacheeMaxSiize = 0diskLibb.dataaCacheeMaxReeadAheeadSizze = 0 diskLibb.dataaCacheeMinReeadAheeadSizze = 0diskLibb.maxUUnsynccedWriites = 0scsi1.ppresennt = TRUEscsi1.vvirtuaalDev = lssilog

36、iicscsil.sshareddBus = VIRRTUALscsi1:00.pressent = TRUUEscsi1:00.modee = iindepeendentt-perssistenntscsi1:00.fileeName = D:Virttual MMachinnesRAACshaaredaasm1.vvmdkscsi1:00.deviiceTyppe = diskscsi1:00.redoo = scsi1:11.pressent = TRUUEscsi1:11.modee = iindepeendentt-perssistenntscsi1:11.fileeName = D

37、:Virttual MMachinnesRAACshaaredaasm2.vvmdkscsi1:11.deviiceTyppe = diskscsi1:11.redoo = scsi1:22.pressent = TRUUEscsi1:22.modee = iindepeendentt-perssistenntscsi1:22.fileeName = D:Virttual MMachinnesRAACshaaredaasm3.vvmdkscsi1:22.deviiceTyppe = diskscsi1:22.redoo = 注意：此处添加了3块块共享盘，因因此添加3段内容scssi1:0，sc

38、si11:1，scsi11:2，也即即要增加几块块盘，就要增增加相应段数数的内容scsi 1:*.filleNamee=后面的内内容要与你在在物理主机使使用vmwaare-vddiskmaanagerr.exe创创建的磁盘存存储位置一致致重启两节点，查查看虚拟机配配置，确认共共享磁盘文件件加载成功（不不重启系统可可能不能识别别出磁盘）4.3、Virrtual BOX4.3.1、配配置rac1节点方法1：rac1节点的的配置也中，选择存储，选择SATTA 控制器器，然单击添加硬盘图标创建新的磁盘，creatte neww diskk选择默认VDII磁盘模式选择固定大小（共共享磁盘必须须选择此选项

39、项），下一步步配置共享磁盘存存储路径及大大小新建的磁盘，已已经连接到rrac1虚拟拟机选择此新磁盘。单击修改（mmodifyy）图标并选择择Sharreablee重复以上步骤，创建另外2块磁盘。最后，增加磁盘盘后的配置信信息方法2：1、在物理主机机命令行中执执行以下语句句，创建磁盘VBoxMannage.eexecrreatehhd-fiilenammeasmm1.vdii-siize51120-fformattVDI-variiantFFixedVBoxMannage.eexecrreatehhd-fiilenammeasmm2.vdii-siize51120-fformattVDI-var

40、iiantFFixedVBoxMannage.eexecrreatehhd-fiilenammeasmm3.vdii-siize2004800-formmatVDDI-vaarianttFixeed2、连接racc1虚拟机VBoxMannage.eexesttorageeattacchracc1-sstoraggectlSATAA控制器portt1devicce0typeehdd-meddiumaasm1.vvdimtypeesharreableeVBoxMannage.eexesttorageeattacchracc1-sstoraggectlSATAA控制器portt2devicce0ty

41、peehdd-meddiumaasm2.vvdimtypeesharreableeVBoxMannage.eexesttorageeattacchracc1-sstoraggectlSATAA控制器portt3devicce0typeehdd-meddiumaasm3.vvdimtypeesharreablee3、设置磁盘共共享VBoxMannage.eexemoodifyhhdasmm1.vdii-tyypeshhareabbleVBoxMannage.eexemoodifyhhdasmm2.vdii-tyypeshhareabbleVBoxMannage.eexemoodifyhhdasm

42、m3.vdii-tyypeshhareabble4、查看racc1配置信息息4.3.2、配配置rac2节点rac2节点只只需配置磁盘盘驱动器与虚虚拟机的连接接即可，如下：VBoxMannage.eexesttorageeattacchracc2-sstoraggectlSATAA控制器portt1devicce0typeehdd-meddiumaasm1.vvdimtypeesharreableeVBoxMannage.eexesttorageeattacchracc2-sstoraggectlSATAA控制器portt2devicce0typeehdd-meddiumaasm2.vvdimt

43、ypeesharreableeVBoxMannage.eexesttorageeattacchracc2-sstoraggectlSATAA控制器portt3devicce0typeehdd-meddiumaasm3.vvdimtypeesharreablee5、实现共享存存储5.1、划分共共享磁盘(单节点)fdisk l三个分区作用解解释：fdisk /dev/ssdb-作为ocr和votinng dissk存放文件件fdisk /dev/ssdc-存放快速速恢复区文件件fdisk /dev/ssdd-存放数据据库文件fdisk /dev/ssdbc|d依次n pp 1 Entter Ent

44、err w，实现分区fdisk l-再次查看看并在rac22节点查看，确保与racc1完全一致致分区完毕，不要要对新加磁盘盘进行格式化化，保持裸设设备。5.2、配置AASM磁盘(两节点)使用udev管管理配置磁盘盘方式rpm -qaa|grepp udevv-查看是否否安装udeev执行以下命令，获获取scsii id信息scsi_idd -g -u -d /dev/sdb c|d36000c2292f999f23499911c33766f33cc53dd736000c2293f4cc9f2c11fdd388a63e55861add336000c22994d55eda8ffbefc55922b

45、114ab6551编辑udev配配置文件，添加rulees文件（/etc/uudev/rrules.d/）并授授权添加以下下参数。方法1：vi /etcc/udevv/rulees.d/999-x-aasmdissk.rullesKERNEL=sdbb1, BBUS=scsi, PROOGRAM=scsii_id -g -u -d /dev/$parennt,REESULT=360000c2992f99ff23499911c37766f3ccc53d77, NAAME=aasmdisskOCR, OWNNER:=grid, GROOUP:=dba,MODE=06600KERNEL=sdcc1,

46、 BBUS=scsi, PROOGRAM=scsii_id -g -u -d /dev/$parennt,REESULT=360000c2993f4c99f2c1ffdd38aa63e58861ad33, NNAME=asmdiiskDATTA, OOWNER:=griid, GGROUP:=dbaa,MODDE=06660KERNEL=sddd1, BBUS=scsi, PROOGRAM=scsii_id -g -u -d /dev/$parennt,REESULT=360000c29994d5eeda8fbbefc59922b144ab6511, NNAME=asmdiiskFRAA, O

47、WWNER:=gridd, GRROUP:=dba,MODEE=06660注意：一行为一条规则则, 与下一个关关键词要有空空格GROUP:=后面不确定定值，dba与asmaddmin都可可以启动udevstart_uudevls /devv/asmddisk*方法2：vi /etcc/udevv/rulees.d/999-oraacle-aasmdevvices.ruless直接在命令行下下输入并执行行以下循环for i iin b cc d;doecho KKERNELL=ssd*, BUS=sccsi, PROGGRAM=/sbbin/sccsi_idd -whhiteliisted -r

48、epplace-whiteespacee -deevice=/dev/$namme, RESULLT=/sbiin/scssi_id -whiitelissted repllace-wwhitesspace -devvice=/dev/ssd$i, NAAME=asm-ddisk$ii, OOWNER=griid, GROUPP=assmadmiin, MODE=06660 /eetc/uddev/ruules.dd/99-ooraclee-asmddevivees.rullesdone注意：此处的bb、c、d是sdb、sdc、sdd去掉sd启动udevstart_uudevls /devv/

49、asm*6、配置Linnux系统6.1、用户组组及用户设置置(两节点，root用户户)6.1.1、创创建Oraccle软件组组groupaddd -g 601 ooinstaallgroupaddd -g 602 ddbagroupaddd -g 603 oopergroupaddd -g 604 aasmadmmingroupaddd -g 605 aasmdbaagroupaddd -g 606 aasmopeer6.1.2、创创建gridd、oraclle用户useraddd -u 6601 -gg oinsstall -G assmadmiin,asmmdba,aasmopeer gr

50、iiduseraddd -u 6602 -gg oinsstall -G dbba,opeer,asmmdba ooraclee6.1.3、为为grid、oraclle用户设置置密码passwd gridpasswd oraclle6.2、主机名名IP映射文件件设置(两节点)vi /etcc/hostts-加入以下内容容#publicc:192.1688.2.2331 raac1192.1688.2.2332 raac2#vip:192.1688.2.2333 racc1-vipp192.1688.2.2334 racc2-vipp#priv231 rrac1-ppriv232 rrac2-p

51、priv#SCAN192.1688.2.2335 racc-scann6.3、配置LLinux内内核参数(两节点)vi /etcc/syscctl.coonf-加入以下内容fs.aio-max-nnr = 110485776fs.filee-max = 68115744kernel.shmmnni = 44096kernel.sem = 250 320000 100 128net.ipvv4.ip_locall_portt_rangge = 99000 665500net.corre.rmeem_deffault = 2622144net.corre.rmeem_maxx = 41194304

52、4net.corre.wmeem_deffault = 2622144net.corre.wmeem_maxx = 100485766sysctl p-使以上设设置生效6.4、设置ggrid、oraclle用户设置置shelll limiits(两节点)vi /etcc/secuurity/limitts.connf-加入以下下内容grid softt nnproc 20447grid hardd nnproc 163384grid softt nnofilee 10224grid hardd nnofilee 655536grid softt sstack 102240grid hardd

53、sstack 327768oracle sooft nprooc 22047oracle haard nprooc 116384oracle sooft nofiile 11024oracle haard nofiile 665536oracle sooft stacck 110240oracle haard stacck 332768vi /etcc/pam.d/loggin-加入以下下内容sesssion reequireed pam_llimitss.so6.5、创建OOraclee Inveentoryy Direectoryy(两节点)mkdir -p /u001/appp/oraI

54、Inventtorychown -R griid.oinnstalll /u011/app/oraInnventoorychmod -R 7755 /u011/app/oraInnventoory6.6、创建OOraclee Gridd Infrrastruucturee Homee目录(两节点)mkdir -p /u001/appp/griddmkdir -p /u001/appp/gridd/crsmkdir -p /u001/appp/gridd/11.22.0chown -R griid.oinnstalll /u011/app/gridchmod -R 7755 /u011/app/

55、grid6.7、创建OOraclee RDBMMS Homme目录(两节点)mkdir -p /u001/appp/oracclechown -R oraacle.ooinstaall /uu01/appp/oraaclechmod -R 7755 /u011/app/oracllemkdir -p /u001/appp/oraccle/prroductt/11.22.0/dbb_1chown -R oraacle.ooinstaall /uu01/appp/oraacle/pproducct/11.2.0/ddb_1chmod -R 7755 /u011/app/oraclle/proodu

56、ct/11.2.0/db_16.8、安装相相应系统支持持包(两节点64&32bitt)binutillscompat-libsttdc+-33 elfutills-libbelf elfutills-libbelf-ddevel gcc gccc-c+ glibc glibc-ccommonn glibc-ddevel glibc-hheaderrs ksh libaio libaio-devell libgcc libstdcc+ libstdcc+-deevel make numactll-deveel sysstattunixODBBCunixODBBC-devvel方法1：拷贝系统光盘

57、内内容到本地目目录mkdir /yum/cp /meddia/* /yum/删除/etc/yum.rrepos.d/下内容容并创建yuum.reppovi /etcc/yum.reposs.d/yuum.reppoyumname=yuumbaseurll=filee:/yyum/enabledd=1方法2：rpm ivvh noodeps forcce *rppm6.9、修改ggrid、oraclle用户环境境变量(两节点)Su grrid-切换到griid用户，修改环境变变量Vi .bassh_proofile-删除重复复内容，加入以下内内容export ORACLLE_HOSSTNAMEE

58、=rac11(rac22)export ORACLLE_UNQQNAME=racexport ORACLLE_BASSE=/u001/appp/gridd/crsexport ORACLLE_HOMME=/u001/appp/gridd/11.22.0export ORACLLE_SIDD=+ASMM1(+ASSM2)export ORACLLE_TERRM=xteermexport PATH=$ORACCLE_HOOME/biin:/ussr/sbiin:$PAATHexport LD_LIIBRARYY_PATHH=$ORAACLE_HHOME/llib:/llib:/uusr/liibe

59、xport CLASSSPATH=$ORACCLE_HOOME/JRRE:$ORRACLE_HOME/jlib:$ORACCLE_HOOME/rddbms/jjlibexport TMP=/tmpexport TMPDIIR=$TMMPSu orracle-切换到oraacle用户户，修改环境变变量Vi .bassh_proofile-删除重复复内容，加入以下内内容export ORACLLE_HOSSTNAMEE=rac11(rac22)export ORACLLE_UNQQNAME=racexport ORACLLE_BASSE=/u001/appp/oraccleexport ORACL

60、LE_HOMME=$ORRACLE_BASE/produuct/111.2.0/db_1export ORACLLE_SIDD=rac11(rac22)export ORACLLE_TERRM=xteermexport PATH=$ORACCLE_HOOME/biin:/ussr/sbiin:$PAATHexport LD_LIIBRARYY_PATHH=$ORAACLE_HHOME/llib:/llib:/uusr/liibexport CLASSSPATH=$ORACCLE_HOOME/JRRE:$ORRACLE_HOME/jlib:$ORACCLE_HOOME/rddbms/jjlibe