Red Hat HPC 5.4 安装指南.doc

Red Hat HPC 5.4 安装指南一、安装准备Red Hat HPC需要一台主机来做为安装节点（install node）。集群中的其他节点将会通过安装节点来安装。在安装Red Hat HPC之前，需要先安装Red Hat Enterprise Linux 5.4，其他要求如下： 根分区至少40G以上空余空间 关闭SELinux 一块或以上的网卡，使用静态IP，并和其他需要安装的节点在同一网络中 Red Hat Enterprise Linux Version 5.4 的安装介质. 通过yum安装来安装HPC，因此需要先配置yum安装源（OS安装源、HPC安装源）二、安装过程通过yum安装来安装HPC，因此需要先配置yum安装源（OS安装源、HPC安装源） 2.1配置yum源 这里设定将RedHat的操作系统安装盘放在/var/rhel目录下，hpc的安装文件放在/var/hpc目录下#mkdir /var/rhel /var/hpc 将Redhat的安装光盘拷贝到/var/rhel目录中# mount /dev/cdrom /mnt# cp -ap /mnt/* /var/rhel# eject 将HPC的光盘拷贝到/var/hpc目录下# mount /dev/cdrom /mnt# cp -ap /mnt/* /var/hpc# eject 在/etc/yum.repo.d目录下新建2个文件，名字分别为server.repo、hpc.repo，内容如下：server.repoServername=rhel5.4baseurl=file:/var/rhel/Serverhpc.repohpcname=HPCbaseurl=file:/var/hpc5.4 导入redhat的rpm软件包的gpg签名# rpm -import /etc/pki/rpm-gpg/RPM-GPG-KEY-redhat-release2.2 HPC基本安装以root用户登入系统并安装Red Hat HPC软件包：# yum install pcm mod_sslpcm RPM安装完成之后，将pcm的环境变量导入到当前环境中：# source /etc/profile.d/kusuenv.sh 运行安装配置脚本# /opt/kusu/sbin/pcm-setup 以下是安装的输出内容，省略了部分内容。红色部分为用户输入的内容Short Hostname = masterTimezone = Asia/ShanghaiUTC time = 1Detected network interfaces: eth0 = IP = 0 Enabled = True Network = Subnet = MAC = 54:52:00:5C:98:4E Gateway = DHCP = False Boot = 1Do you wish to continue N/y?yPCM creates a DNS domain for all nodes it installs. This node will function as a primary DNS server for this domain.Enter the private DNS domain to create default: pcm: cae.dpcaPCM requires a depot directory to store kits, images and other filesA minimum of 10Gbytes is needed.Would you like to use the default /depot directory N/y? yStarting postgresql service: OK Setting permissionsThe OS media is needed at this time. Do you have OS media onDisks, ISO, or Filesystem? (Disk|Iso|File) Disk FileEnter the fully qualified path to the ISO file, or the directory containing the files:/var/rhelCopying the media. Please wait this will take some time!Any more disks for this OS kit? y/n nPlease insert next disk if installing from phys. media NOW(URI for next ISO | blank if phys. media | N to finish): NSetting up repository. Please waitKit: rhel5.4, version 5, architecture x86_64, has been added to repo: rhel5_x86_64. Remember to refresh with -uKit: base, version 5.4, architecture noarch, has been added to repo: rhel5_x86_64. Remember to refresh with -uRefreshing repo: rhel5_x86_64. This may take a while.- All existing repos in /etc/yum.repos.d have been disabled. Please re-enable any required repos manually. - Run yum search pcm-kit to see a listing of available kits to installCongratulations! The base kit is installed and configured to provision on: Network on interface eth0 运行完成后，HPC的base-kit就安装完成了，接下来可以进行计算节点的分发部署。 Red Hat HPC在安装过程中会提示设置安装目录的位置，默认情况下该目录为/depot，如果使用其他目录，那么会自动为这个目录建立一个名为/depot的软链接。pcm安装程序使用系统安装盘来建立一个本地软件安装源，当其他节点通过安装节点来安装的时候，将会使用这个软件安装源来安装操作系统。警告pcm会新建一个DNS区域用于集群内部解析，不要和外部网络使用相同的DNS区域2.3 设置计算节点的起始IP在HPC中，计算节点的eth0的IP地址都是有管理节点自动分配的，因此需要预先定义IP地址分配的规则。运行如下命令# netedit按照如下图示编辑网络设置。2.4 编辑计算节点的配置在HPC中计算节点配置是按照组别来进行划分的，管理节点安装完成后会自动建立几个组。一般计算解点都属于compute-rhel组。使用如下命令来修改计算节点的具体配置：# ngedit设置计算节点的名称格式设置计算节点的软件安装源设置计算节点的内核以及启动参数选择计算节点的安装组件，保持默认即可选择计算节点通过哪个网卡分发选择计算节点的额外软件包，保持默认即可设置计算节点安装完成后自动运行的脚本，保持默认即可设置计算节点的分区大小保存之前的设置2.5 计算节点的安装在安装计算节点之前还需要作一些额外的设置。将一些必要的文件拷贝到web服务的目录中# cp /opt/kusu/etc/db.passwd /var/www/html/# chmod +r /var/www/html/db.passwd# cp /root/.ssh/authorized_keys /var/www/html/public_keys# chmod +r /var/www/html/public_keys建立计算节点的kickstar自动安装配置文件。在/var/www/html目录下建立cfg目录，并生成计算节点的配置文件（node-60-00.cfg、node-60-01.cfg等）内容如下：# mkdir /var/www/html/cfgnode-60-00.cfg# Redhat kickstart template# $Id: kickstart.tmpl 3140 2008-03-15 17:13:11Z ggoh $# Copyright 2007 Platform Computing Inc.# Licensed under GPL version 2; See LICENSE file for details.install# Define the installation number.key -skipurl -url 0/repos/1000rootpw -iscrypted $1$12727774$kIoz3FKnJnZ./oj6qlo5I.lang enlangsupport -default=en enkeyboard usnetwork -bootproto static -device=eth0 -ip=0 -netmask= -onboot=yes -gateway=0 -nameserver=0 -hostname node-60-00.cae.dpca -noipv6network -device eth4 -bootproto static -ip 0 -netmask firewall -disabledselinux -disabledfirstboot -disableauthconfig -enableshadow -enablemd5timezone Asia/Shanghaibootloader -location=mbr -driveorder=sdaskipx#clearpart -allclearpart all drives=sdapart / -fstype=ext3 size=31920 -ondisk=sdapart swap -fstype=swap size=16000 -ondisk=sdareboot%packagescomponent-base-nodebasentp%postmkdir /root/.sshwget 0/public_keys -O /root/.ssh/authorized_keyschmod 600 /root/.ssh/authorized_keysmkdir /etc/cfmcat /etc/cfm/.cfmsecret /etc/profile.nii umount /home mkdir /caetemp chmod 1777 /caetemp mkdir /caetemp/nastran mkdir /caetemp/abaqus chmod 1777 /caetemp/nastran chmod 1777 /caetemp/abaqus mkdir /app mount -a停止管理节点上nfs，同时使管理节点上存储生效：# mkdir /app# chkconfig nfs off#