Redhat-Linux6.4-+-ASM-+-Oracle11gR2-RAC安装配置和管理.doc

本资料仅供学习交流使用Redhat Linux6.4 + ASM + Oracle11gR2 RAC安装配置和管理 XXX公司技术部2015-05-19目录一.前言4二.安装环境41.1.硬件列表41.2.需要安装的软件41.3.RAC拓朴结构5三.安装步骤：62.1.任务列表62.2.规划阶段62.2.1.集群详细信息规划62.2.2.磁盘、存储空间规划72.2.3.数据库基本信息规划82.3.实施阶段82.3.1.操作系统安装92.3.2.主机配置92.3.3.磁盘分区212.3.4.安装和配置ASM（此项可不做）212.3.5.安装Oracle Grid222.3.6.创建ASM磁盘组312.3.7.安装Oracle Database332.3.8.创建数据库40四.测试Failover553.1.简单测试55五.测试负载均衡LoadBalance56六.RAC运行维护565.1.Oracle Cluster正常启停565.1.1.Oracle 11g Cluste启停565.1.2.Oracle 10g RAC启停顺序575.2.Oracle Cluster开机自启动585.3.检查、注册与移除CRS服务595.4.导出CRS资源配置模板595.5.检查 Voting Disk595.6.检查 CRS资源组状态595.7.检查 ASM状态及配置605.8.检查 nodeapp状态及配置605.9.检查 TNS的状态及配置605.10.检查 VIP的状态及配置605.11.检查 SCAN 的状态及配置605.12.检查 RAC运行状况615.13.检查 Oracle 数据库实例状态及配置615.14.检查 Cluster集群节点615.15.检查 Oracle 集群注册表 (OCR)615.16.手动切换 SCAN ip至其他节点615.17.启动或停止EM管理器615.18.登录EM管理数据库61七.卸载Oracle11g RAC CRS的方法62八.问题及解决办法637.1.问题1、Grid安装_缺少pdksh包637.2.问题2、Grid安装_缺少cvuqdisk包647.3.问题3、Grid安装_PRVF-5436:NTP Time Protocol64一. 前言分享此文档仅为学习交流使用，如果您的软硬件环境与本文档不完全一致，请酌情参考使用。因本人水平有限，为避免给大家带来不必要的困惑。如遇到文档中有不严谨的地方，请大家反馈给本人，谢谢！二. 安装环境1.1. 硬件列表服务器设备型号CPU型号CPU主频CPU数量单CPU核数硬盘容量硬盘数量内存数据库1浪潮TS860Intel E7-8850v22.3GHz812300G4512G数据库2浪潮TS860Intel E7-8850v22.3GHz812300G4512G存储EMC-600G80-1.2. 需要安装的软件序号软件名称软件列表1操作系统Red Hat Enterprise Linux 6.4 for x86_642集群软件-Oracle Clusterwarep13390677_112040_Linux-x86-64_3of7.zip3数据库-Oracle Database11.2.0.4.0p13390677_112040_Linux-x86-64_1of7.zip p13390677_112040_Linux-x86-64_2of7.zip 4集群文件系统ASM(3个包)oracleasmlib-2.0.4-1.el6.x86_64.rpm（oracle官网支持）oracleasm-support-2.1.8-1.el6.x86_64.rpm（oracle官网支持）kmod-oracleasm-2.0.6.rh1-2.el6.x86_64.rpm（需在网上下载。Linux 6以及以上操作系统本身没有对应版本的oracleasm安装包，更换为kmod-oracleasm安装包）5Linux Rpm包binutils-2.20.51.0.2-5.11.el6 (x86_64)compat-libcap1-1.10-1 (x86_64)compat-libstdc+-33-3.2.3-69.el6 (x86_64)compat-libstdc+-33-3.2.3-69.el6.i686gcc-4.4.4-13.el6 (x86_64)gcc-c+-4.4.4-13.el6 (x86_64)glibc-2.12-1.7.el6 (i686)glibc-2.12-1.7.el6 (x86_64)glibc-devel-2.12-1.7.el6 (x86_64)glibc-devel-2.12-1.7.el6.i686kshlibgcc-4.4.4-13.el6 (i686)libgcc-4.4.4-13.el6 (x86_64)libstdc+-4.4.4-13.el6 (x86_64)libstdc+-4.4.4-13.el6.i686libstdc+-devel-4.4.4-13.el6 (x86_64)libstdc+-devel-4.4.4-13.el6.i686libaio-0.3.107-10.el6 (x86_64)libaio-0.3.107-10.el6.i686libaio-devel-0.3.107-10.el6 (x86_64)libaio-devel-0.3.107-10.el6.i686make-3.81-19.el6sysstat-9.0.4-11.el6 (x86_64)不同的OS需要的RPM可能不一样。使用ASMLib创建ASM,需要下载ASMLib的3个包，其中oracleasm这个包要选择和OS内核版本匹配。1.3. RAC拓朴结构三. 安装步骤：1.2.2.1. 任务列表任务大项序号任务小项名称任务完成情况前期规划1确认集群节点数量，每个节点的主机名；已完成 2确认每个主机的3个IP地址(区分Public、Private、VIP)和1个SCAN IP；已完成 3数据库存储技术选型(ASM/OCFS/RAW/Other)；已完成 4存储空间规划，包括软件安装位置、数据库文件位置规划已完成 配置节点主机1配置主机名和3个IP地址；已完成 2RPM包检查；已完成 3配置磁盘分区；已完成 4配置ASM设备；已完成 5系统需求(OS Kernel参数、空间需求)；已完成 6创建Oracle用户,要求每个节点UID、GID相同；已完成 7定义Oracle用户的环境变量，包括$ORACLE_HOME；$OCR_HOME、资源数量限制；已完成 8配置用户等价；已完成 9配置节点时间同步；已完成 10配置Hangcheck-timer模块已完成 安装部署1安装Oracle Clusterware，已完成 2安装后进行检查；已完成 3安装Oracle Database；已完成 4创建ASM磁盘；已完成 5配置Listener；已完成 6创建ASM；已完成 7创建RAC数据库；已完成 8安装后测试，Failover和Loadbalance已完成 2.2. 规划阶段2.2.1. 集群详细信息规划Oracle Cluster 详细信息规划节点1节点2主机名rcahadb1rcahadb2Public 双网卡绑定虚拟网卡名称bond0bond0Private双网卡绑定虚拟网卡名称bond1bond1网络名/Public IPrcahadb1/10.230.26.211rcahadb1/10.230.26.212网络名/Private IPrcahadb1-priv/192.168.1.11rcahadb1-priv/192.168.1.12网络名/VIPrcahadb1-vip/10.230.26.213rcahadb1-vip/10.230.26.214网络名/SCAN IPrcahadb-scan/10.230.26.215说明：Private IP、VIP子网掩码：255.255.255.0、网关：10.230.26.2542.2.2. 磁盘、存储空间规划数据库存储选用Oracle ASM技术。本地磁盘文件系统规划文件系统挂接点生产库1生产库2备注/100G100Gvg00-lv_root/boot512M512M/home10G10Gvg00-lv_home/opt10G10Gvg00-lv_opt/usr15G15Gvg00-lv_usr/var10G10Gvg00-lv_var/swap32G32G1G-2G 则交换区=RAM * 1.5 ;2G-16G = RAM;16G = RAM* 0.75/tmp10G10Gvg00-lv_tmp/oracle40G40Gvg00-lv_oracle/arch01300G两台主机分别建立自己的/arc档目录，通过NFS访问对方/arch目录。/arch02300G软件安装位置、数据库文件位置规划文件类别本地文件系统RAWASM共享存储文件系统Oracle ClusterwareORACLE_BASE/oracle/app/grid-ORACLE_HOME/oracle/app/11.2.0/grid-OCR、VoteDisk-/dev/emcpowera1-/dev/emcpowera2-/dev/emcpowera3-Oracle DatabaseORACLE_BASE/oracle/app/oracle-ORACLE_HOME/oracle/app/oracle/11.2.0/db_1-Spfile-+DATA01-Pfile、password file$ORACLE_HOME/dbs-Controlfile-+DATA01-Datafile-+DATA01-Logfile-+DATA01-Archived Log-/arch01、/arch02Backup-/backup2.2.3. 数据库基本信息规划 数据库类型：Oracle 数据库版本：11.2.0.4, 64位 数据库SID：rcadb1，rcadb2 数据库名：rcadb 语言：AMERICAN_AMERICA 数据库字符集(NLS_CHARACTERSET)：AL32UTF8 国家区域字符集(NLS_NCHAR_CHARACTERSET)：AL16UTF162.3. 实施阶段整个过程可分为9个步骤：1：操作系统安装2：主机配置3：磁盘分区4：安装和配置ASM5：安装Oracle Grid6：创建ASM磁盘组7：安装Oracle Database8：创建数据库。2.3.1. 操作系统安装略。2.3.2. 主机配置5.1.2.1. 网络配置两个网卡配置成2.2.1节即可。然后分别在两个节点配置hosts文件。通过编辑每个节点的/etc/hosts文件#vi /etc/hosts添加如下信息：#bond0 -public10.230.26.211 rcahadb110.230.26.212 rcahadb2#bond1 -private192.168.1.11 rcahadb1-priv192.168.1.12 rcahadb2-priv#vip10.230.26.213 rcahadb1-vip10.230.26.214 rcahadb2-vip# scan ip10.230.26.215 rcahadb-scan5.1.2.2. 修改主机名分别在2个节点修改主机名# vi /etc/sysconfig/networkHOSTNAME=rcahadb1重启网络服务使其生效# service network restart5.1.2.3. 关闭selinux和防火墙分别在2个节点执行rootrcahadb1# vi /etc/selinux/config #把enabled改为disabledrootrcahadb1# chkconfig iptables offrootrcahadb1# service iptables stop关闭selinux需要重启主机，如果立即生效需要执行rootrcahadb1# setenforce 05.1.2.4. 安装软件包需要安装rpm包清单binutils-2.20.51.0.2-5.11.el6 (x86_64)compat-libcap1-1.10-1 (x86_64)compat-libstdc+-33-3.2.3-69.el6 (x86_64)compat-libstdc+-33-3.2.3-69.el6.i686gcc-4.4.4-13.el6 (x86_64)gcc-c+-4.4.4-13.el6 (x86_64)glibc-2.12-1.7.el6 (i686)glibc-2.12-1.7.el6 (x86_64)glibc-devel-2.12-1.7.el6 (x86_64)glibc-devel-2.12-1.7.el6.i686kshlibgcc-4.4.4-13.el6 (i686)libgcc-4.4.4-13.el6 (x86_64)libstdc+-4.4.4-13.el6 (x86_64)libstdc+-4.4.4-13.el6.i686libstdc+-devel-4.4.4-13.el6 (x86_64)libstdc+-devel-4.4.4-13.el6.i686libaio-0.3.107-10.el6 (x86_64)libaio-0.3.107-10.el6.i686libaio-devel-0.3.107-10.el6 (x86_64)libaio-devel-0.3.107-10.el6.i686make-3.81-19.el6sysstat-9.0.4-11.el6 (x86_64)rpm包检查方法# rpm -q package_namerpm -q -qf %name-%VERSION-%RELEASE (%ARCH)n binutils compat-libcap1 compat-libstdc+ gcc gcc-c+ glibc glibc-devel ksh libgcc libstdc+ libstdc+-devel libaio libaio-devel make sysstat5.1.2.5. 配制时间同步在集群中的两个 Oracle RAC 节点上执行以下集群时间同步服务配置。 Oracle Clusterware 11g 第 2 版及更高版本要求在部署了 Oracle RAC 的集群的所有节点上实现时间同步。Oracle 提供了两种方法来实现时间同步：一种方法是配置了网络时间协议 (NTP) 的操作系统；另一种方法是新的 Oracle 集群时间同步服务 (CTSS)。Oracle 集群时间同步服务 (ctssd) 旨在为那些 Oracle RAC 数据库无法访问 NTP 服务的组织提供服务。一、NTP配置步骤配置时间服务器同步,(本案例，采用配置的IP为时钟同步服务器地址，请结合实际情况修改为实际IP) 。1节点（时钟同步客户端）rootrcahadb1 # vi /etc/ntp.conf /加入如下内容server 10.101.100.11 preferserver 10.101.100.12driftfile /etc/ntp.drifttracefile /etc/ntp.trace2节点（时钟同步客户端）rootrcahadb2 # vi /etc/ntp.conf /加入如下内容server 10.101.100.11 preferserver 10.101.100.12driftfile /etc/ntp.drifttracefile /etc/ntp.tracerootrcahadb1 # vi /etc/crontab 增加以下一行0 6 * * * ntpdate -u 10.101.100.11 /2分钟同步一次-验证结果-客户端2个节点分别启动NTP服务1节点执行：rootrcahadb1 # /etc/init.d/ntpd start2节点执行：rootrcahadb2 # /etc/init.d/ntpd start两个服务器同步需要几分钟的时间，查看ntp服务是否在运行rootrcahadb1# ps aux |grep ntpdrootrcahadb1 # watch ntpq -pEvery 2.0s: ntpq -p Wed Feb 19 19:00:42 2014 remote refid st t when poll reach delay offset jitter=*LOCAL(0) .LOCL. 11 l 17 64 17 0.000 0.000 0.001当“reach”为17时，表示NTP服务已经启动完成，可以使用以下命令进行测试：rootrcahadb1 # ntpdate -d 10.101.100.11最后一行出现以下内容为时钟同步正确配置9 Feb 19:04:30 ntpdate1966: adjust time server 10.230.26.211 offset 0.000023 sec-#查看是否开机自启动rootrcahadb2 # chkconfig -list |grep ntprootrcahadb2 # chkconfig -level 35 ntpd onLinux下服务开机自启动配置方法rootrcahadb2 # setup-系统服务-选择服务名称-确定二、配置集群时间同步服务 (CTSS)使用集群时间同步服务在集群中提供同步服务，需要卸载网络时间协议 (NTP) 及其配置。要停用 NTP 服务，必须停止当前的 ntpd 服务，从初始化序列中禁用该服务，并删除 ntp.conf 文件。要在 Oracle Enterprise Linux 上完成这些步骤，以 root 用户身份在两个 Oracle RAC 节点上运行以下命令：rootrcahadb1 # /sbin/service ntpd stoprootrcahadb1 # chkconfig ntpd offrootrcahadb1 # mv /etc/ntp.conf /etc/ntp.conf.original还要删除以下文件：rootracrcahadb1 # rm /var/run/ntpd.pid此文件保存了 NTP 后台程序的 pid。当安装程序发现 NTP 协议处于非活动状态时，安装集群时间同步服务将以活动模式自动进行安装并通过所有节点的时间。如果发现配置了 NTP，则以观察者模式启动集群时间同步服务，Oracle Clusterware 不会在集群中进行活动的时间同步。在安装后，要确认 ctssd 处于活动状态，请作为网格安装所有者 (grid) 输入以下命令：gridrcahadb1 $ crsctl check ctssCRS-4701: 集群时间同步服务处于活动模式。CRS-4702: 偏移量 (毫秒): 0gridrcahadb2 $ crsctl check ctssCRS-4701: 集群时间同步服务处于活动模式。CRS-4702: 偏移量 (毫秒): 0说明：Oracle 集群时间同步服务 (CTSS)配置，作者未做经过测试，仅供参考。5.1.2.6. 创建Oracle用户和DBA组必须保证每个节点上Oracle用户的uid和DBA用户组的GID相同,下面的命令在每个节点都要执行。groupadd -g 501 dbagroupadd -g 502 oinstallgroupadd -g 503 opergroupadd -g 504 asmadmingroupadd -g 505 asmopergroupadd -g 506 asmdbauseradd -g oinstall -G dba,asmdba,oper oracleuseradd -g oinstall -G asmadmin,asmdba,asmoper,dba grid修改用户密码：(oracle)passwd oraclepasswd grid5.1.2.7. 创建Oracle基目录创建Oracle RAC所使用的目录，并修改相应的权限，在所有节点root用户执行mkdir -p /oracle/appmkdir -p /oracle/app/oraclemkdir -p /oracle/app/oracle/11.2.0/db_1mkdir -p /oracle/app/gridmkdir -p /oracle/app/11.2.0/gridmkdir -p /oracle/app/oraInventorychown -R oracle:oinstall /oraclechmod -R 775 /oraclechown -R oracle:oinstall /oracle/appchmod -R 775 /oracle/appchown oracle:oinstall /oracle/app/oraclechmod -R 775 /oracle/app/oraclechown oracle:oinstall /oracle/app/oracle/11.2.0/db_1chmod -R 775 /oracle/app/oracle/11.2.0/db_1chown -R grid:oinstall /oracle/app/gridchmod -R 775 /oracle/app/gridchown -R grid:oinstall /oracle/app/11.2.0/gridchmod -R 775 /oracle/app/11.2.0/gridchown grid:oinstall /oracle/app/oraInventorychmod -R 775 /oracle/app/oraInventory5.1.2.8. 配置Oracle用户的环境根据用户的shell种类，编辑对应的profile文件。 节点1以grid用户登录，rootrcahadb1 $ su - gridgridrcahadb1 $ vi /.bash_profile把以下 内容追加到.bash_profile文件umask 022export TMP=/tmpexport TMPDIR=/tmpexport PATH=/bin:/usr/bin:/usr/local/bin:/usr/X11R/bin:/usr/sbinexport ORACLE_SID=+ASM1export ORACLE_BASE=/oracle/app/grid export ORACLE_HOME=/oracle/app/11.2.0/gridexport ORACLE_HOSTNAME=rcahadb1export ORACLE_TERM=xtermexport NLS_DATE_FORMAT=YYYY-MM-DD HH24:MI:SSexport TNS_ADMIN=$ORACLE_HOME/network/adminexport PATH=$ORACLE_HOME/bin:$PATHexport NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport LD_LIBRARY_PATH=$ORACLE_HOME/lib:/usr/libexport CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlibexport LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME/oracm/libexport CVUQDISK_GRP=oinstall 节点1以oracle用户登录，rootrcahadb1 $ su - oracleoraclercahadb1 $ vi /.bash_profile把以下 内容追加到.bash_profile文件umask 022export TMP=/tmpexport TMPDIR=$TMPexport ORACLE_HOSTNAME=rcahadb1export ORACLE_TERM=xtermexport NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport ORACLE_SID=rcadb1export ORACLE_UNQNAME=rcadbexport ORACLE_BASE=/oracle/app/oracleexport ORACLE_HOME=/oracle/app/oracle/11.2.0/db_1export PATH=$PATH:$CRS_HOME/bin:$ORACLE_HOME/binexport PATH=$PATH:/usr/bin:/bin:/usr/bin/X11:/usr/local/binexport PATH=$PATH:$ORACLE_BASE/common/oracle/binexport TNS_ADMIN=$ORACLE_HOME/network/admin#export ORA_NLS10=$GRID_HOME/nls/dataexport LD_LIBRARY_PATH=$ORACLE_HOME/lib:$ORACLE_HOME/oracm/libexport LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/lib:/usr/lib:/usr/local/libexport CLASSPATH=$ORACLE_HOME/JREexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/jlibexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/network/jlibexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/jlibexport NLS_DATE_FORMAT=YYYY-MM-DD HH24:MI:SSexport THREADS_FLAG=native 节点2以grid用户登录，rootrcahadb2 $ su - gridgridrcahadb2 $ vi /.bash_profile把以下 内容追加到.bash_profile文件umask 022export TMP=/tmpexport TMPDIR=/tmpexport PATH=/bin:/usr/bin:/usr/local/bin:/usr/X11R/bin:/usr/sbinexport ORACLE_SID=+ASM2export ORACLE_BASE=/oracle/app/grid export ORACLE_HOME=/oracle/app/11.2.0/gridexport ORACLE_HOSTNAME=rcahadb2export ORACLE_TERM=xtermexport NLS_DATE_FORMAT=YYYY-MM-DD HH24:MI:SSexport TNS_ADMIN=$ORACLE_HOME/network/adminexport PATH=$ORACLE_HOME/bin:$PATHexport NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport LD_LIBRARY_PATH=$ORACLE_HOME/lib:/usr/libexport CLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlibexport LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME/oracm/libexport CVUQDISK_GRP=oinstall 节点2以oracle用户登录rootrcahadb2 $ su - oracleoraclercahadb2 $ vi /.bash_profile把以下 内容追加到.bash_profile文件umask 022export TMP=/tmpexport TMPDIR=$TMPexport ORACLE_HOSTNAME=rcahadb2export ORACLE_TERM=xtermexport NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport ORACLE_SID=rcadb2export ORACLE_UNQNAME=rcadbexport ORACLE_BASE=/oracle/app/oracleexport ORACLE_HOME=/oracle/app/oracle/11.2.0/db_1export PATH=$PATH:$CRS_HOME/bin:$ORACLE_HOME/binexport PATH=$PATH:/usr/bin:/bin:/usr/bin/X11:/usr/local/binexport PATH=$PATH:$ORACLE_BASE/common/oracle/binexport TNS_ADMIN=$ORACLE_HOME/network/admin#export ORA_NLS10=$GRID_HOME/nls/dataexport LD_LIBRARY_PATH=$ORACLE_HOME/lib:$ORACLE_HOME/oracm/libexport LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/lib:/usr/lib:/usr/local/libexport CLASSPATH=$ORACLE_HOME/JREexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/jlibexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/network/jlibexport CLASSPATH=$CLASSPATH:$ORACLE_HOME/jlibexport NLS_DATE_FORMAT=YYYY-MM-DD HH24:MI:SSexport THREADS_FLAG=native5.1.2.9. 设置用户资源限制因为所有进程都是以Oracle身份运行的，需定义Oracle用户能够使用的系统资源数量。首先编辑配置文件：vi /etc/security/limits.conf增加内容：grid soft nproc 16384grid hard nproc 16394grid soft nofile 65536grid hard nofile 65536oracle soft nofile 65536oracle hard nofile 65536oracle soft nproc 16384oracle hard nproc 16384 5.1.2.10. 配置SSH用户等价(此项可不做)在安装grid软件和oracle数据库软件时，系统会自动做SSH用户等价操作。自动做SSH用户等价操作此处不做说明。手动配置SSH用户等价具体实施的话命令如下： 在主节点rcahadb1上以grid,oracle用户身份生成用户的公匙和私匙rootrcahadb1 $ ping rcahadb2rootrcahadb1 $ ping rcahadb2-privrootrcahadb1 $ su - gridgridrcahadb1 $ mkdir /.sshgridrcahadb1 $ ssh-keygen -t rsagridrcahadb1 $ ssh-keygen -t dsarootrcahadb1 $ su - oracleoraclercahadb1 $ mkdir /.sshoraclercahadb1 ssh-keygen -t rsaoraclercahadb1 ssh-keygen -t dsa 在副节点rcahadb2上以grid,oracle执行相同的操作，确保通信无阻rootrcahadb2 $ ping rcahadb1rootrcahadb2 $ ping rcahadb1-privrootrcahadb2 $ su - gridgridrcahadb2 $ mkdir /.sshgridrcahadb2 $ ssh-keygen -t rsagridrcahadb2 $ ssh-keygen -t dsarootrcahadb2 $ su - oracleoraclercahadb2 $ mkdir /.sshoraclercahadb2 $ ssh-keygen -t rsaoraclercahadb2 $ ssh-keygen -t dsa 在主节点rcahadb1上grid,oracle用户执行以下操作gridrcahadb1 $ cat /.ssh/id_rsa.pub /.ssh/authorized_keysgridrcahadb1 $ cat /.ssh/id_dsa.pub /.ssh/authorized_keysgridrcahadb1 $ ssh rcahadb2 cat /.ssh/id_rsa.pub /.ssh/authorized_keysgridrcahadb1 $ ssh rcahadb2 cat /.ssh/id_dsa.pub /.ssh/authorized_keysgridrcahadb1 $ scp /.ssh/authorized_keys rcahadb2:/.ssh/authorized_keysoraclercahadb1 $ cat /.ssh/id_rsa.pub /.ssh/authorized_keysoraclercahadb1 $ cat /.ssh/id_dsa.pub /.ssh/authorized_keysoraclercahadb1 $ ssh rcahadb2 cat /.ssh/id_rsa.pub /.ssh/authorized_keysoraclercahadb1 $ ssh rcahadb2 cat /.ssh/id_dsa.pub /.ssh/authorized_keysoraclercahadb1 $ scp /.ssh/authorized_keys rcahadb2:/.ssh/authorized_keys 主节点rcahadb1上分别grid,oracle用户执行检验操作gridrcahadb1 $ exec /usr/bin/ssh-agent $SHELLgridrcahadb1 $/usr/bin/ssh-addgridrcahadb1 $ ssh rcahadb1 dategridrcahadb1 $ ssh rcahadb2 dategridrcahadb1 $ ssh rcahadb1-priv dategridrcahadb1 $ ssh rcahadb2-priv dateoraclercahadb1 $ exec /usr/bin/ssh-agent $SHELLoraclercahadb1 $/usr/bin/ssh-addoraclercahadb1 $ ssh rcahadb1 dateoraclercahadb1 $ ssh rcahadb2 dateoraclercahadb1 $ ssh rcahadb1-priv dateoraclercahadb1 $ ssh rcahadb2-priv date 在副节点rcahadb2上分别grid,oracle用户执行检验操作gridrcahadb1 $ exec /usr/bin/ssh-agent $SHELLgridrcahadb1 $ /usr/bin/ssh-addgridrcahadb1 $ ssh rcahadb1 dategridrcahadb1 $ ssh rcahadb2 dategridrcahadb1 $ ssh rcahadb1-pri dategridrcahadb1 $ ssh rcahadb2-pri dateoraclercahadb1 $ exec /usr/bin/ssh-agent $SHELLoraclercahadb1 $ /usr/bin/ssh-addoraclercahadb1 $ ssh rcahadb1 dateoraclercahadb1 $ ssh rcahadb2 dateoraclercahadb1 $ ssh rcahadb1-pri dateoraclercahadb1 $ ssh rcahadb2-pri date5.1.2.11. OS Kernel配置修改操作系统相关参数，在所有节点执行；#vi /etc/sysctl.conf增加内容：kernel.shmmni = 4096kernel.sem = 250 32000 100 128fs.file-max = 6815744n