GreenPlum数据库详细安装过程.doc

精品文档目录1.概述11.1.GreenPlum数据库概述11.2.GreenPlum数据库架构原理12.SUSE Linux Enterprise 11 64-bit操作系统安装过程22.1.初始化阶段22.2.系统分区42.3.软件选择和系统任务122.4.语言选择142.5.Kdump设置152.6.安装过程153.配置网卡IP164.GreenPlum中Master配置过程254.1.建立gpadmin用户254.2.关闭防火墙274.3.启动FTP294.4.使用FlashXP上传GreenPlum数据314.5.使用putty.exe工具配置GreenPlum数据库354.6.GreenPlum数据库配置详情424.6.1.GrennPlum数据库的初始化494.6.2.修改GreenPlum数据库账户的权限53附录Ai附录Biiiv欢迎下载iv欢迎下载iv欢迎下载。精品文档1. 概述1.1. GreenPlum数据库概述1.2. GreenPlum数据库架构原理本系统中GreenPlum由一个主节点（master）和四个从节点(segment)构成，主节点和从节点由一台千兆交换机进行连接。客户端（Client）发送的命令通过主节点的主控作用，然后分发到从节点；从节点将用户需要的结果汇总到主节点，由主节点进行整合然后再将结果返回给客户端。主节点与从节点的链接规则是保证每台服务器中网口的IP地址不是互联互通的，但是与其他的服务器之间可以通信。换句换说保障同一台服务器中的IP地址不是处于同一网段，但是不同服务器中的相同网口属于同一网段。在此需要特别提醒用户Master中一共拥有五块网卡，第五块网卡是与client进行连接的网口。负责外部用户的访问和数据传输。网线连接顺序节点名称网口1网口2网口3网口4网口5Master10.10.10.*Seg1Seg2Seg3Seg4GP数据库网线的接线示意图2. SUSE Linux Enterprise 11 64-bit操作系统安装过程安装GreenPlum数据库的服务器，在安装SUSE Linux Enterprise 11操作系统之前首先需要进行磁盘阵列的设置。本系统的GP数据库中磁盘阵列选择Raid5的方式（未完待续）。在主节点服务器的安装过程中尤其需要注意：主节点比从节点多一块网卡，在服务器的外面可以很容易的看到主节点的网口为5个，其余从节点的网口为4个。2.1. 初始化阶段服务器的磁盘阵列做完之后，进入服务器的BIOS将服务器的硬盘分Raid5，Raid5做好后设置BIOS的启动项为光驱启动。然后将SUSE系统安装光盘放入服务器的光驱进入系统安装界面，选择第二项“Installation”，然后按回车键。接收许可协议如下图中的红色框内，点击下一步校验光盘系统完整性，完成后，点击下一步选择安装模式“New Installation”，点击下一步选择时区与时钟，Region选择“亚洲”（Asia），Time_Zone选择“北京”（Beijing）。注意：此处需要将左下角的“HardWare clock Set to UTC ”去掉勾选。然后点击下一步2.2. 系统分区本系统需要分成4个分区，其中数据分区（/data）要求容量最大，其余的分区在满足系统正常运行的前提下保证使用的容量最小。本系统中每个节点的硬盘为八块1T，做完磁盘阵列后，系统硬盘的总容量大约为7T。系统分区建议表系统分区建议分区序号大小文件系统Mount110GExt3/boot250GSwapswap350GExt3/4剩余容量XFS/data选择“Physical Machine”，点击下一步在安装设置中选择“Expert”主菜单在Expert菜单内选择“Partitioning”选择“Custom Partitioning（for Expert）”,点击下一步在左侧的树状结构中选择“Hard Disks”中的sda；然后点击页面下端的“Add”按钮，界面跳转。选择“Primary”，点击下一步设置“Custom Size”为1GB，然后点击下一步设置“Format Partition”文件系统的格式为“EXT3”；Mount Partition 选择“/boot”目录；然后点击“完成”再一次点击“Add”按钮，界面跳转选择“Primary Partition”，点击下一步设置“Custom Size”为5GB，点击下一步设置“Format Partition”为“Swap”，“Mount Partition”为“swap”，点击完成第三次点击“Add”按钮，界面跳转选择“Primary Partition”，然后点击下一步设置“Custom Size”为5GB，点击下一步设置“Format Partition”格式为“Ext3”，“Mount Partition”格式为“/”，点击完成最后一次点击“Add”按钮，界面跳转。选择“Primary Partition”，点击下一步设置“Custom Size”为剩余的所有容量，点击下一步设置“Format Partition”文件系统格式为“XFS”，“Mount Partition”为“/data”，注意：此处的“/data”需要用户手动输入。点击完成在“Expert Partitioner”主界面右下角点击“Accept”按钮。界面跳转回“Installation Setting”界面2.3. 软件选择和系统任务在“Installation Setting”主界面选择“Expert”中的“Software”，界面跳转，按照下图进行勾选勾选完成后，点击界面左下角的“Details”按钮，界面跳转在“Search”输入框内输入“VSFTP”，点击“Search”按钮，将查询的结果勾选，然后点击“Accept”按钮。界面弹出提示框，请点击“Continue”按钮。界面将跳转回“Installation Setting”界面2.4. 语言选择在“Installation Setting”界面，选择“Expert”主菜单中的“Language”，界面跳转在语言栏选择“Simpled Chinese”然后点击“Accept”弹出提示框，点击“OK”按钮，界面将跳转回“Installation Setting”界面2.5. Kdump设置在“Installation Setting”界面，选择“Expert”主菜单中的“Kdump”，界面跳转在服务器的安装过程中，Kdump中默认选中“enable_Kdump”，我们需要将Kdump更改为“Disable_Kdump”。然后点击“OK”按钮，界面将跳转回“Installation Setting”界面2.6. 安装过程直接点击右下角“Install”按钮弹出提示框，点击“Install”界面将跳转到安装进度界面开始安装系统，(大约2540分钟)。安装结束后，系统会自动重启进入到配置root用户、密码页面。将密码修改为“root”之后，点击下一步3. 配置网卡IP主节点的用户名为：mdw；从节点的用户名为：sdw1/sdw2/sdw3。进入网卡配置界面，选择“Network Interface”。（注意：关闭防火墙功能）要求配置的网段IP地址使数据库内部实现完全不共享的架构，并且支持多路数据并发。服务器中网卡IP地址配置规则节点名网段1网段2网段3网段4mdwsdw1sdw2sdw3注意：主节点（mdw）中拥有5块网卡，第五块网卡配置成对外访问的IP，例如：9下面以mdw主节点为例演示网卡的配置过程。其他三个子节点的网卡配置过程与主节点网卡配置的过程相似，只是子节点中不存在“10.10.10.X”段的网卡，详细的配置请参考“服务器中网卡IP地址配置规则”。选择第一块网卡，然后点击“Edit”按钮按下图填写网卡IP，然后点击下一步。注意此处的IP地址是GP数据库对外连接是使用的IP，请用户记好。选择第二块网卡，然后点击“Edit”按钮按下图填写网卡IP地址，点击下一步选择第三块网卡，点击“Edit”按钮按下图填写网卡的IP，点击“下一步”选择第四块网卡，点击“Edit”按钮按下图填写网卡IP地址，点击下一步选择最后一块网卡，点击“Edit”按下图填写网卡IP，点击“下一步”网卡配置结束，点击右下角“OK”按钮点击“下一步”选择“NO.Skip This Test”，然后点击“下一步”按钮选择“Use Following Configuration”，点击“下一步”按钮直接点击“下一步”按钮弹出提示框，选择“Yes”继续直接点击“下一步”按钮点击“完成”按钮系统重新启动输入用户名：root,然后按“回车”键输入密码：root，然后按“回车”键4. GreenPlum中Master配置过程SUSE Linux Enterprise 11操作系统安装完成之后，在Master服务器中进行操作。首先，在Master节点中新建一个用户（用户名：gpadmin，密码：gpadmin），并且将系统的防火墙关闭、启动FTP服务；然后使用FlashXP将GreenPlum数据库配置所需要的文件上传到指定文件夹；最后使用Putty.exe工具配置GreenPlum数据库中的相关参数。4.1. 建立gpadmin用户登录系统成功后，点击左下角“Computer”，选择“YaST”在“Filter”中输入“user”，然后选择“User and Group Manage”点击左下角“Add”按钮新建一个用户，用户名：gpadmin，密码：gpadmin点击“Detail”按钮，在“User ID（uid）”中数据“3030”，然后点击下一步4.2. 关闭防火墙在Suse系统中选择“Computer”，点击“YaST”在“Filter”中输入“Firewall”命令，然后选右侧“Firewall”将防火墙关闭，否则使用“FlashXP”工具连接“9”时，无法连接成功4.3. 启动FTP在Suse系统中选择“Computer”，点击“YaST”在“Filter”中输入“ftp”，然后点击右侧的“FTP Server”按照下图设置“FTP Start-Up”设置完成后，点击“Start FTP Now”按钮，然后点击“finish”按钮4.4. 使用FlashXP上传GreenPlum数据使用root用户名和密码登录到SUSE系统，然后logout然后使用FlashXP软件上传所需文件注意此处的IP地址是安装系统时，设置的第一块网卡的IP地址4.5. 使用putty.exe工具配置GreenPlum数据库输入密码：root时用户不可见，数据完成之后回车查看home/gpadmin/Desktop目录下的文件是否存在，按回车键ll命令显示所有的文件夹，按回车键输入下图中划红线的命令，然后按“回车”键一直按空格键直到显示如下图所示输入“yes”同意许可条件按回车键输入yes输入命令“chownR gpadmin /user/local/greenplum-db”数据命令“chownR gpadmin /user/local/greenplum-db-/”输入命令“chown -R gpadmin /data/”安装greenPlum软件vi /etc/hosts，编辑etc目录下的hosts文件在键盘上按“insert”键，或者直接输入“insert”命令，使用上下左右键进行选择，将这一行删除，删除时请按DEL键在9mdwmdw后面回车然后按照下图输入，从“9mdwmdw”开始输入修改环境变量注意：其余的子节（sdw1,sdw2,sdw3）请参考MDW节点进行配置。都需要将grennplum文件上传、修改etc/hosts文件和环境变量。4.6. GreenPlum数据库配置详情source /usr/local/greenplum-db/greenplum path.shroot 不显示使用如下命令，对master机器进行无验证连接;Gpssh-exkeysf all_hosts期间需要输入作为验证root密码(root用户)退出putty，使用gpadmin账户登录，然后再次使用Putty,用户名gpadmin修改.Bashrc文件，添加两行:Source /usr/local/greenplum-db/greenplum_path.shExport MASTER_DATA_DIRECTORY=/data/gpseg-1/使用如下命令：Gpssh-exkeysf all_hosts期间需要输入作为验证gpadmin密码(gpadmin用户)所有的服务器都安装greenplum-db软件，但是只有mdw需要做上述无验证连接4.6.1. GrennPlum数据库的初始化打开FlashXP将下图中的划红线部分的文件上传到9中上传的文件无需选择目录，直接点击上传即可使用vi命令进行“gpinitsystem_config”文件的编辑，检查文件中的数据存放位置和备份文件存放位置。检查数据文件夹的存放位置，如下图中红色框内所示vi gpinitsystem_config使用“gpinitsystem -C gpinitsystem_config”命令进行greenplum数据库的初始化。命令请参考下图中红色框内初始化过程中，会出现“是否继续greenplum数据库的创建”选项，输入“y”或者输入“Y”进行确定。然后系统将继续进行greenplum数据库的创建创建成功后，系统将会出现如下的提示，如下图中红色框内的提示信息。4.6.2. 修改GreenPlum数据库账户的权限GP初始化完成之后，修改/data/gpseg-1/pg_hba.conf文件，在最后一行加上如下命令: host all all /8 md5（注意md5请小写，本人在测试过程中截图截错了！md5一定要小写）重新读取配置文件使用psqld template1 进入系统的模板数据库，使用如下命令修改gpadmin账户权限: alter role gpadmin with login password gpadmin;附录A常用命令命令解释