GP安装构建说明

GreenPlum 简易安装手册目录操作系统准备1系统设置1用户与组设置：2网络设置3安装Greenplum软件4Master节点上的安装和准备工作4Segment 节点上的安装4数据库初始化5准备数据库定义文件5初始化数据库6建立冗余的master节点6调整数据库参数6操作系统准备操作系统要求为Red Hat Enterprise Linux 5.5 以上，必须为x86_64平台。“以下设置应在Red Hat 认证工程师协同下完成”系统设置设置类型内容硬盘调度算法elevator=deadline内核参数设置方法： 修改/boot/grub/menu.lst 找到 kernel /vmlinuz-xxx 这一行，在最后添加 elevator=deadline检查/验证方法： 系统启动正常后，执行 cat /sys/block/*/queue/scheduler应能看到：noop anticipatory deadline cfq 磁盘预读取block readahead = 16384 对所有硬盘系统设置设置办法：修改/etc/rc.d/rc.local 增加两行blockdev -setra 16384 /dev/sd*blockdev -setra 16384 /dev/vg0/*检查办法：系统重启后，运行blockdev getra /dev/sd*blockdev -setra 16384 /dev/vg0/*应都是16384语言与字符集language=en_US.UTF-8系统设置设置办法：系统安装时指定。检查办法：登录系统，执行命令 locale结果应该是 en_US.UTF-8Sysctl.conf系统设置设置办法：修改/etc/sysctl.conf,增加以下内容：net.ipv4.ip_forward = 0 net.ipv4.conf.default.accept_source_route = 0 kernel.sysrq = 0 kernel.core_uses_pid = 1 net.ipv4.tcp_syncookies = 1 kernel.msgmnb = 65536 kernel.msgmax = 65536 kernel.sem = 250 64000 100 2048 kernel.shmmax = 5000000000 kernel.shmmni = 40960 kernel.shmall = 40000000000 net.ipv4.tcp_tw_recycle=1 net.ipv4.tcp_max_syn_backlog=4096 dev_max_backlog=10000 vm.overcommit_memory=2 net.ipv4.conf.all.arp_filter = 1 然后执行sysctl -p。检查办法：用 sysctl ，检查上述各参数是否匹配。用户资源限额系统设置设置办法：修改 /etc/security/limits.conf增加以下几行：* soft nofile 1048576* hard nofile 1048576* soft nproc 1048576* hard nproc 1048576检查办法：用任意普通用户登录，执行ulimit -a，检查上述参数是否匹配。表一：系统设置用户与组设置：增加以下用户（全部为小写）用户名UidGidgroups gpadmin30303030gpadmin gpmon30403040gpmon增加以下组（全部为小写）组名Gid gpadmin3030 gpmon3040存储与硬盘设置（待补全）挂载点建议大小文件系统类型备注/本机硬盘所有空间ext3/boot512Mext3/data存储柜所有空间Xfs挂载参数：rw,noatime,inode64,allocsize=16m 网络设置ip地址/主机名设置。主机名应设置在/etc/sysconfig/network文件中。不应该出现localhost.localdomain。所有主机的网络、主机名设置如下：主机主机名ip外部主机名外部ipmastermdw54mdw-ext未定,10.x.x.xSlave mastersmdw53smdw-ext未定,10.y.y.y计算节点1sdw1计算节点2sdw2计算节点3sdw3计算节点4sdw4所有节点上的/etc/hosts文件应保持一致，如下localhost 10.x.x.x mdw-ext10.y.y.y smdw-ext54 mdw53 smdw sdw1 sdw2 sdw3 sdw4安装Greenplum软件以下工作假设安装的greenplum数据库版本为 4.x.x.xMaster节点上的安装和准备工作在mdw节点上，将greenplum-db-4.x.x.x-build-5-RHEL5-x86_64.zip 解开，以root用户执行得到的.bin文件。按照提示进行安装。准备allnodes.txt文件，内容如下sdw1sdw2sdw3sdw4smdw准备nodes.txt文件，内容如下sdw1sdw2sdw3sdw4以root身份，执行以下命令 . /usr/local/greenplum-db-4.x.x.x/greenplum_path.shgpssh-exkeys -f allnodes.txt按提示输入各个节点的密码。创建文件夹 /data/master 并将此文件夹拥有者改成gpadmin:gpadmin，命令如下：mkdir /data/masterchown gpadmin:gpadmin /data/master在smdw主机上同样创建/data/master并将拥有者修改为gpadmin:gpadmin，命令同上。以gpadmin用户身份登陆master节点，修改/.bashrc文件，增加一行：. /usr/local/greenplum-db-4.x.x.x/greenplum_path.shSegment 节点上的安装在master节点上，以root用户身份，执行以下命令：. /usr/local/greenplum-db-4.x.x.x/greenplum_path.shgpseginstall -f allnodes.txt在master节点上，以root用户身份执行以下命令：. /usr/local/greenplum-db-4.x.x.x/greenplum_path.shgpssh -f nodes.txt mkdir /data/d1 /data/d2 /data/d3 /data/d4gpssh -f nodes.txt mkdir /data/m1 /data/m2 /data/m3 /data/m4gpssh -f nodes.txt chown gpadmin.gpadmin /data/d1 /data/d2 /data/d3 /data/d4gpssh -f nodes.txt chown gpadmin.gpadmin /data/m1 /data/m2 /data/m3 /data/m4数据库初始化以下工作，在Master节点上以gpadmin用户身份完成。准备数据库定义文件假设在所有节点上存储空间都挂载在/data创建文件 gpinitsystem_config 内容如下：ARRAY_NAME=Greenplum SEG_PREFIX=gpseg PORT_BASE=40000 declare -a DATA_DIRECTORY=(/data/d1 /data/d2 /data/d3 /data/d4 ) MASTER_HOSTNAME=mdwMASTER_DIRECTORY=/data/master MASTER_PORT=5432 TRUSTED_SHELL=ssh CHECK_POINT_SEGMENTS=256ENCODING=UNICODEMIRROR_PORT_BASE=50000 REPLICATION_PORT_BASE=41000 MIRROR_REPLICATION_PORT_BASE=51000 declare -a MIRROR_DATA_DIRECTORY=(/data/m1 /data/m2 /data/m3 /data/m4) 创建节点描述文件 nodes.txt 内容如下：sdw1sdw2sdw3sdw4初始化数据库执行命令gpinitsystem -c gpinitsystem_config -h nodes.txt按提示操作。修改 /.bashrc 文件，增加一行：export MASTER_DATA_DIRECTORY=/data/master/gpseg-1退出系统并重新以gpadmin登陆建立冗余的master节点执行命令gpinitstandby -s smdw按提示操作。调整数据库参数以下数据库参数调整后必须重新启动数据库。调整方法：执行命令 gpconfig -c 参数名 -v 参数值 -m Master节点值检查方法：重启数据库后，执行命令 gpconfig -s 参数名参数名参数值mast