大数据平台环境搭建傻瓜式说明书_第1页
大数据平台环境搭建傻瓜式说明书_第2页
大数据平台环境搭建傻瓜式说明书_第3页
大数据平台环境搭建傻瓜式说明书_第4页
大数据平台环境搭建傻瓜式说明书_第5页
已阅读5页,还剩25页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、Cloudera大数据平台环境搭建(CDH5.13.1 版)版本v1.0作者郭维忠发布日期2018-03-10目录 TOC o 1-5 h z Cloudera大数据平台环境搭建 1(CDH5.13.1 版) 1 HYPERLINK l bookmark2 o Current Document . 基础环境 4 HYPERLINK l bookmark4 o Current Document 软件环境 4 HYPERLINK l bookmark6 o Current Document 配置规划 4 HYPERLINK l bookmark10 o Current Document 所需要的软

2、件资源 4 HYPERLINK l bookmark16 o Current Document 修改机器名(所有节点) 5 HYPERLINK l bookmark26 o Current Document 设置防火墙(所有节点) 5 HYPERLINK l bookmark36 o Current Document 配置免密码登录 SSH 6 HYPERLINK l bookmark44 o Current Document 关闭SELINUX(所有节点) 6 HYPERLINK l bookmark50 o Current Document 修改 Linux 内核参数(所有节点) 7 HY

3、PERLINK l bookmark66 o Current Document 其他安装与配置(所有节点) 8 HYPERLINK l bookmark70 o Current Document 配置NTP服务 8 HYPERLINK l bookmark98 o Current Document 安装 oracle JDK1.8(所有节点) 10 HYPERLINK l bookmark100 o Current Document Mysql安装(主节点) 11 HYPERLINK l bookmark113 o Current Document .安装 CM 12 HYPERLINK l

4、bookmark115 o Current Document 传包,解包 12 HYPERLINK l bookmark123 o Current Document 创建数据库 12 HYPERLINK l bookmark127 o Current Document 创建用户 13 HYPERLINK l bookmark131 o Current Document 制作本地YUMM 13 HYPERLINK l bookmark135 o Current Document 拷贝 jar 包 14 HYPERLINK l bookmark141 o Current Document 修改 c

5、loudera-scm-agent 配置 14 HYPERLINK l bookmark147 o Current Document 启动 CM Server 和 Agent 14 HYPERLINK l bookmark149 o Current Document 访问 CM 15 HYPERLINK l bookmark151 o Current Document .安装 CDH 15 HYPERLINK l bookmark153 o Current Document 登录后界面 15 HYPERLINK l bookmark155 o Current Document 选择CM版本 1

6、6指定主机 17选择 CDHS本 18 HYPERLINK l bookmark180 o Current Document 出现 “主机运行状态不良”错误 19检查主机正确性 19 HYPERLINK l bookmark190 o Current Document 选择安装的服务 20 HYPERLINK l bookmark194 o Current Document 角色分配 20数据库设置 21 HYPERLINK l bookmark214 o Current Document 测试连接报错: 22群集设置 23 HYPERLINK l bookmark224 o Current

7、Document 开始安装 24 HYPERLINK l bookmark228 o Current Document 安装完成 25警告信息: 25 HYPERLINK l bookmark238 o Current Document .常见错误 27 HYPERLINK l bookmark240 o Current Document 初始化数据库错误: 27未能连接到 Host Monitor 281,基础环境软件环境本文将介绍 Centos7.4 离线安装 CD即口 Cloudera Manager过程,软件版本如下:NO.软件名称版本1.操作系统Centos7,4 64 位2.JDK

8、jdk-8u151-linux-x643.Clouder Manager5.13.14.CDH5.13.15.数据库Mysql 5.76.JDBCmysql-connector-java-5.1.43.jar配置规划本次安装共5台服务器,服务器配置及用途如下:NO.机器名称内网IP配置用途1.node168688C/32Gb/1TB主,CM MysqlDB2.node169698C/32Gb/1TB从3.node170708C/32Gb/1TB从4.node171718C/32Gb/1TB从5.node172728C/32Gb/1TB从所需要的软件资源JDK环境:JDK 版本:1,8,0_15

9、1 jdk-8u151-linux-x64.rpm 下载地址: TOC o 1-5 h z CMKCM 本:5.13.1cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz下载地址:CDH&CDK 本:5.13.1 ,CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel;CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel,sha1 ;manifest.json下载地址:JDBC连接 jar 包:jar 包版本:5.1.43 , mysql-connector-java-5.1.43.jar 下载地址:修

10、改机器名(所有节点)1)修改机器名称# hostnamectl set-hostname xxx /设置机器名#hostname /查看本机名这种方式,在 Centos7中可以永久性改变主机名称。每个节点机器,都要配置hosts# vi /etc/hosts内容都改为:.1 localhost / 建议保留此行168 node168169 node169170 node170171 node171172 node172设置防火墙(所有节点)注:为了简便,可以先关闭防所有节点火墙,安装完成后,再按照下面步骤设置。防火墙常用命令:# firewall-cmd -state(查询防火墙状态)#sys

11、temctl stop firewalld.service(关闭防火墙)#systemctl start firewalld.service(开启防火墙)#systemctl disable firewalld.service(禁止 firewall开机启动)设置防火墙策略,在所有节点执行下面脚本(执行前要启动防火墙):/集群机器间可以相互访问firewall-cmd -permanent -add-rich-rule=rule family=ipv4 source address=68 port protocol=tcpport=0-65535 acceptfirewall-cmd -per

12、manent -add-rich-rule=rule family=ipv4 source address=69 port protocol=tcpport=0-65535 acceptfirewall-cmd -permanent -add-rich-rule=rule family=ipv4 source address=70 port protocol=tcpport=0-65535 acceptfirewall-cmd -permanent -add-rich-rule=rule family=ipv4 source address=71 port protocol=tcpport=0

13、-65535 acceptfirewall-cmd -permanent -add-rich-rule=rule family=ipv4 source address=72 port protocol=tcpport=0-65535 accept/设置可以访问的端口firewall-cmd -permanent -add-port=0-65535/tcpfirewall-cmd -reload注意:需要在所有的节点上执行,因为涉及到的端口太多了,临时开放所有端口是为了安装起来 方便,安装完毕后可以根据需要设置防火墙策略,保证集群安全。配置免密码登录SSH将子节点设置为从主节点ssh无密码登陆(

14、主节点访问从节点需要无密码互通,否则后面会出现问题)在主节点上执行:cd/进入到根目录ssh-keygen -t rsa一路回车,生成无密码的密钥对。LrooTynomcnodc home# ssh keygen -t r与小Gorier dting publlc/pr iVdtt*3日 key pdir ,Enter file in which to the key (/root/.ssh/id rsa): /root/.5sh/id_rsa already exists.Overwrite ly/n? yEnter passphrase (tmpty for no passphrnse):

15、Enter 与amu pa5sphra5e again;Ynur idenTiTicaticn has been saved i n / roar/ . s*ih/iri rsa PYour public key has been saved in /root/.ssh/id rsa.pubThe key fingerprint is:96 : b4 : 4日:31: &a : Sa: 13: HZ: cs: pH : 69: 79:3(1:72: 25: 3 rnotijdnainpnodeThe key s randomart linage is : + - - RSA 204UJ+n f

16、 * S g,0* *,q o .把公钥拷贝至node169服务器上:# scp /root/.ssh/id_rsa.pub rootnode169:/ 输入 node169 机器上 root 用户密码拷备成功登录到node169服务器上:然后在node169服务器上,把公钥的内容追加到authorized_keys文件末尾(这个文件也在隐藏文件夹.ssh下,如果没有可以新建):# cat id_rsa.pub /.ssh/authorized_keys如果提示下面信息,则需要创建./ssh目录:-bash: /root/.ssh/authorized_keys: No such direct

17、ory创建/.ssh目录,再追加公钥内容mkdir -/.sshcat id_rsa.pub /.ssh/authorized_keys并设置authorized_keys的访问权限:chmod 600 /.ssh/authorized_keys测试:在node168点上执行ssh node169 ,正常情况下,不需要密码就能直接登陆进去了。在node168节点出现下面表示成功登录 node169节点:rootnodel68ssh nodel69Last login: Thu Mar 22 09:39:52 2018 from 172.16.3-168Erootnodel69以同样的方式将 公

18、钥拷贝至其他节点服务器上 。关闭SELINUX(所有节点)关闭linux SELINUX安全内核# setenforce 0(临时生效)修改 /etc/selinux/config 下的 SELINUX=disabled(重启后永久生效)# vi /etc/selinux/config内容增加:SELINUX=disabled-重启后生效: # reboot查看SELINUX是否关闭:#sestatus(在Centos7中遇到SELINUX无法关闭的问题,重新启动机器恢复正常)修改Linux内核参数(所有节点)为避免安装过程中出现的异常问题,首先调整Linux内核参数。设置s,控制换出运行时内

19、存的相对权重,Cloudera建议将s设置为10 :/查看scat /proc/sys/vm/s/永久性修改,执行下面两条命令sysctl -w vm.secho vm.s = 10 /etc/sysctl.conf关闭透明大页面:自CentOS6版本开始引入了 Transparent Huge Pages(THP),从CentOS7版本开始,该特性默认就 会启用。尽管THP的本意是为提升内存的性能,不过某些数据库厂商还是建议直接关闭THP,否则可能会导致性能出现下降。首先查看透明大页是否启用,always never表示已启用,always never 表示已禁用:cat /sys/kern

20、el/mm/transparent_hugepage/defragalways madvise nevercat /sys/kernel/mm/transparent_hugepage/enabledalways madvise never以上状态就说明是启用的。临时关闭(重启机器会变回默认开启状态):echo never /sys/kernel/mm/transparent_hugepage/defragecho never /sys/kernel/mm/transparent_hugepage/enabled永久关闭:/ 编辑/etc/rc.d/rc.localvi /etc/rc.d/r

21、c.local/在文件后添加下面内容:if test -f /sys/kernel/mm/transparent_hugepage/enabled; thenecho never /sys/kernel/mm/transparent_hugepage/enabled fiif test -f /sys/kernel/mm/transparent_hugepage/defrag; thenecho never /sys/kernel/mm/transparent_hugepage/defrag fi保存退出,然后赋予rc.local文件执行权限:#chmod +x /etc/rc.d/rc.lo

22、cal重启系统,以后再检查 THP状态,显示状态被禁用了。root(nodel68 -JL-caX/sys/k&rnel/mm trans par ent_hugepage/defrag madvi (TnaverJ?rootnodel6E J35ys/kernel/mm/transparent_hugepage /enabl ed always madvise(Tnevr_JTrootnode168 -JS .3)修改文件句柄数:修改系统文件句柄数限制:查看文件句柄数,显示1024,显然太小# ulimit -n1024/修改限制#vi /etc/security/limits.conf/在

23、文件后加入下面内容:soft nohard no修改后需要重启机器。其他安装与配置(所有节点)为避免安装过程中出现异常问题,安装相关依赖包:yum -y install psmisc MySQL-python at bc bind-libs bind-utils cups-client cups-libs cyrus-sasl-gssapi cyrus-sasl-plain ed fuse fuse-libs httpd httpd-tools keyutils-libs-devel krb5-devel libcom_err-devel libselinux-devel libsepol-d

24、evel libverto-devel mailcap noarch mailx mod_ssl openssl-devel pcre-devel postgresql-libs python-psycopg2 redhat-lsb-core redhat-lsb-submod-security x86_64 spax time zlib-develyum install -y python-lxmlyum install krb5-devel cyrus-sasl-gssapi cyrus-sasl-deve libxml2-devel libxslt-devel mysql mysql-d

25、evel openldap-devel python-devel python-simplejson sqlite-develchmod +x /etc/rc.d/rc.localyum -y install rpcbindsystemctl start rpcbindecho systemctl start rpcbind /etc/rc.d/rc.local配置NTP服务具体建设过程如下:集群中所有主机必须保持时间同步,如果时间相差较大会引起各种问题。所有节点安装相关组件:yum install ntp ntpdate -yNTP服务端(主节点):1)查找时间同步服务器:打开网址,内容如下

26、:Asia asia.pooLntptorgTo use this sperofie pool 7口口已 add the following to vonr ntp.conf file:servsr CL as ia. po*l_ ntjp. oreB0TV0T 1- /GJiih 口g,+ITtCh Wserver 2 qx口中加七口和 wa sisrysr 3L as ia po-?l- rrt-p. ers2)编辑 /etc/ntp.conf :vi /etc/ntp.conf/在文件中输入上面网页内容:server 0.server server 2.server 3.启动ntp服务:

27、# systemctl start ntpd配置开机启动:# systemctl enable ntpd.servicechronyd并且是开机自启状态,所以导致 ntpd开注意:如果ntpd开机启动失效,有可能是因为安装了 机自启失败。#查看 chronyd设置状态# systemctl status chronyd显示如下:Irootnndfl64- -r 5月1:*1时仪 式触,clrgriydi 0krsnydfclTH &11 anfc|irgvwI Ldided: Icuefed .sr dciryd. arvke;vf rid*jr pr-frc snBjbhtf)或匚兀三二 二

28、工 TVT RlHilUllO %、K Mb iinJikQrmvL L&l; FTftWTmnRFdocs: iwn:chrorycKfl)Z,:chr 审w,sf (5)ProcFSi : 了 CjcecStartPoBt*/irar/ I ibesec/tbrony-helper update-daewn : 口用圮r ri ted. st at usO/SUCC ESS process: 72Q D 也氢 art -uisr/sblnclron/cli JOTLONS (codt eiii*d. st atu 5-0 SUCCESS)Hair fid: 727 (MrwtOCGroup

29、:一r.、111 ie/ctir 口口网,5 frvi c tL727 usr/sbi rV chr onydMar ?2 19:42:W nodel9 Mir 22 11241:27 nodfelM m材 72 11:43: nodelM BUT 22nodelMMIT 22 U:43:29 Md, war,2 11二44:打 mdel的 ar 22 11 :44 s M nodWHN war 22 11 = 1152 37 n-DdeL69 war 22 11川5门9 rwdelfl ar 22 11 乂朝* rodeld9 Lrootflrtodeiey .k .chronyd chro

30、rryd chratiyd cbronyd cnrcrrydl cHr cfrv CtT chrunyd chrnnyd-,aF ! F 7777777m 2 2 -J* 2 22 2 22 z 7777 777 777 . r B .I K , B B r;与/f clork wmq by -27W-W%7S jsNmds. adiustKTif:Sy5tB clock wfts fipped try -上/i上seconds:sf-leicred source 再3.fib 116,t?fi;Srmirce fed. 1L6,12b replaced with 翻3LH5.1M,123:&

31、tltlibs - client - server 的顺序安装:rpm -ivh mysql-community-common-5.7.18-1.el7.x86_64.rpmrpm -ivh mysql-community-libs-5.7.18-1.el7.x86_64.rpmrpm -ivh mysql-community-client-5.7.18-1.el7.x86_64.rpmrpm -ivh mysql-community-server-5.7.18-1.el7.x86_64.rpmrpm -ivh mysql-community-devel-5.7.18-1.el7.x86_64

32、.rpm/安装下面包,否则Hue安装报连接错误rpm -ivh mysql-community-libs-compat-5.7.18-1.el7.x86_64.rpm启动数据库systemctl start mysqld查看状态:systemctl status mysqld修改MySQLU始密码1、先修改配置文件/etc/f 令MySQlM过登录时的权限检验,在mysqld下加入一行:skip-grant-tables2、重启 MySQL#service mysqld restart3、免密码登录 MySQL#mysql4、mysql客户端执行如下命令,修改root密码mysql use m

33、ysql;mysql UPDATE user SET authentication_string = password(your-password) WHERE host = localhost AND user=root;mysql select host,user, authentication_string, password_expired from user;mysql update user set password_expired=N where password_expired=Y /密码不过期mysql update user set host=% where user=ro

34、ot and host=localhost; /远程可访问mysql flush privileges; / 刷新mysql exit;/ 退出5、修改配置文件/etc/f删除此前新增那一行 skip-grant-tables ,并重启MySQL这一步非常重要,不执行可能导致严重的安全问题)#service mysqld restart / 重启 Mysql2.安装CM传包,解包在主节点上下载相关软件包,这里将软件包下载到/data/ cdh/ 目录下。cd /data/cdh下载 Mysql JDBC 包:#wget下载CM#wget 5/cloudera-manager-centos7-c

35、m5.13.1_x86_64.tar.gz下载CDH#wgetwget .sha1#wget将CMS压到/opt/目录:tar -zxvf cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz -C /opt/ls /opt/cloudera cm-5.13.1创建数据库在主节点上:mysql -h -uroot -p /加参数-h指定本机方式,否则可能不允许执行grantEnter password:输入数据库密码/在MariaDB (none) 命令状态输入下面脚本:create database hive DEFAULT CHARSET utf8

36、 COLLATE utf8_general_ci;create database amon DEFAULT CHARSET utf8 COLLATE utf8_general_ci;create database hue DEFAULT CHARSET utf8 COLLATE utf8_general_ci;create database monitor DEFAULT CHARSET utf8 COLLATE utf8_general_ci;create database oozie DEFAULT CHARSET utf8 COLLATE utf8_general_ci;grant al

37、l privileges on *.* to rootlocalhost identified by root with grant option;grant all on *.* to root%H Identified by root;flush privileges;exit;/ 复制 Mysql JDBC 包到/opt/cm-5.13.1/share/cmf/lib/目录#cp mysql-connector-java-5.1.43-bin.jar /opt/cm-5.13.1/share/cmf/lib/初始化CM执行下面脚本/opt/cm-5.13.1/share/cmf/sche

38、ma/scm_prepare_database.sh mysql cm -hnode168 -uroot -proot -scm-host node168 scm scm scm/如果出现下面错误:java.sql.SQLException: Access denied for user rootlocalhost (using password: YES)/解决办法:在/etc/hosts 文件中,加上 localhost.node168主节点/etc/hosts 内容:g27. ft. O, 1Tocalhost.nodelBSnodeL68 nodeL63 nodelTO nodel71

39、172.16.168172.1b, J. 169172.16.孑,170172.16. 3. 171 72. 6. 1. 172执行成功界面:脚本 /scm_prepare_database.sh iPirtfki#rlt* *#-511pr I 14 。内(Fq rSh /:电 1 口 -T 箪 itZ中Wv4I56j,占jvj中wXk !. 24.4 zv- sariivrLHftlBQdMiDHivtr 1. Wit 14 Oi*FKjKfeL. TVtt Mi dMrtf wMl j.iTMi *-1,w fi Mor41iN.wdEN VI hmAI lOM4M *h*t1 mj 2

40、J JL-Q。端 err ml a。t-s-t-abish T3L oriwct1HfHiri50rl*wt 即*cwnMLto vyn 5.S.I.Ml $Ff5Mnt$ 5HL conM. rgr iiwl由飞:广上 矛厂ilme n-lng tsl be wrif)BniiHrccrEIf 1(jee iFVier is mt: fiilM-i md elitfw eo eivliclcly dlMlkle 9aL by mtmIeEWliriCdl4i*n.LruLjii4 MJ* nWftigHLlw I* 口 外 词”.3-3一31工 嘴也小Mtwr 1加4 Wf!-J*-1,t.

41、a I i a ,lr Am MW M. C*TC .工 ImBI-lll-ME-ThUVr,11 4 . pr0E = E IfUdMF. Rd1 . AlLfH a X&PPCGKL E4 I触* ih S4W, . 4. Vlfi cKfliof 工日JJ VifiUiiT1 -W miLit-ill ishiRi fs.弋fHm 哂 EM灼it Eto M 3. rqqwArvMnfs sn bhhh.tnIsnT -sec喇4门忖Se-FHrC- C Ifl-CMe trawixp i!J. Ml I*隼I,I either cgi eipHcrtl 4131L 岫 mmlE5,*

42、rw rwi ir m jii1* yir +ZOli -Q3-J 3 17 -02ma in:MGlidr iL-.HiitH-|r Iih. ibut b 1. HtCuieE Jicurtar- 5u1匚二/(口111丫二adE.a dit iau3.411 AFN 中W T*诞 fit口婚 AC -rE】4l (1dh|卬 ClMAfk-lOIE HA.利中 UR创建用户在所有节点上执行:# useradd -system -home=/opt/cm-5.13.1/run/cloudera-scm-server -shell=/bin/false -comment Cloudera S

43、CM User cloudera-scm制作本地YUM在主节点上:/进入软件包目录#cd /data/cdh/ 拷贝三个文件至1J /opt/cloudera/parcel-repo/ 目录#cp CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 manifest.json/opt/cloudera/parcel-repo/ 进A/opt/cloudera/parcel-repo/ 目 录#cd /opt/cloudera/parcel-repo/修改文件名#mv CDH-5.1

44、3.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha此时 /opt/cloudera/parcel-repo/rootnodel68 parcel-repo# 11zotal L88898Qrw-rr1rootroot19342312&1Mar27L7;MCDH-5.13.cdhS.LJ.l.p02-el7. parcelrwrr1rootroot41Mar2717: 34CDH;5.13,1-1, cdh5.LJ.l.pO,parcel,sharw-r-r1rootroot73766Ma

45、r2717;34manifest.jsonrootnodel68 parcel-rep口#.拷贝jar包在所有节点上:/如果没有/usr/share/java/ 目录,则创建# cp mysql-connector-java-5.1.43-bin.jar /usr/share/java/mysql-connector-java.jar在主节点上:/ 将 mysql JDBC jar 包拷贝到 /opt/cm-5.13.1/share/cmf/lib/目录#cp mysql-connector-java-5.1.43-bin.jar /opt/cm-5.13.1/share/cmf/lib/修改

46、 cloudera-scm-agent 酉己置在主节点上,修改 /opt/cm-5.13.1/etc/cloudera-scm-agent/config.ini文件:/ 将 config.ini server_host=localhost内容改为 server_host=68# sed -i s/server_host=localhost/server_host=68/ /opt/cm-5.13.1/etc/cloudera-scm-agent/config.ini在主节点上:/将cm-5.13.1打包,并复制到其他节点#cd /opt#tar czf cm-5.13.1.tar.gz cm-

47、5.13.1/复制到其他节点#scp cm-5.13.1.tar.gz node169:/opt/#scp cm-5.13.1.tar.gz node170:/opt/#scp cm-5.13.1.tar.gz node171:/opt/#scp cm-5.13.1.tar.gz node172:/opt/在所有从节点上解压:/将cm-5.13.1 包解压#cd opt#tar -xzvf cm-5.13.1.tar.gz/解压后删除#rm -rf cm-5.13.1.tar.gz启动 CM Server 和 Agent在主节点上,启动 cloudera-scm-server :/opt/cm

48、-5.13.1/etc/init.d/cloudera-scm-server start日志,查看启动过程。启动过程较慢,可通过 /opt/cm-5.13.1/log/cloudera-scm-server 在所有节点上,启动 cloudera-scm-agent :/opt/cm-5.13.1/etc/init.d/cloudera-scm-agent start访问CM地址:http:/ 主节点IP:7180用户名、密码:adminclouderd mam 即汨?.安装CDH登录后界面接受协议:bEfir MR. H vfiJM 典.戒T葬M&NAOE京迪使用cloudew m白MgM甄F

49、可*:新闻驰碑EHC USE?LKEkEE liFAS AbD CDNDTC9KThFSf附修5 !4: rttf; - r*xi. |n-i= y F ;1m:T! A= T1 rf 2 ,Elr QF p=jp. ,H 田 0E7HEP Hr I Aarrl?(n 7: i FZriN* |TL i RR*,KEjIF THFBf TFSlfSMFRJI lr BU iELTRQ1 DCEFTjSLL OF Tiff THUS JVC CMXICr STI TMmi M Ah MZUFTEO HEQUST i-U DETMD h 哨 iMfOL升 “IMtfL VfliKiWFMIHII

50、Ml * n ,修 WM s III mK。CmFMfr$育 II Tl的 ui4“1 Mh 尸 Rtf PMIMlGl.giJ“阿MU,;tT,5片,毗*1 修“内 ftu iAD 皿 E IhE 9EfiHj*lHfiilCHi TrflALfEMEnr海 喳d u.tiE修口 *ll nr 1M tEsridi TonoiwEM; 0 Nk 峪咄鼻鼻tfr TO BF121 LT 励| 附 M| | grTTT IFEMi ncTinKTMS MT rOTTE .TE IKTUTHTf g IWQ(T mN AJW QF * Tf|iM4 JA /VUCllOH4 QF才E TEiWF0

51、O 皿4 NOir |jg AORTd H4F Th F5 UiMi i * ULiriirii tilHHiM*3# 0g” Htib 的 杏山巾 MiF* SIR 口岸二 1IF般姬选洋口口udem Manager 和 CDH,而H J? Ji 工i.二尸,:可足皿群F H -d oicfi-li MO-tp I CcywnQn ruC#5. MilW餐* 31学4,foscnf qnp1FeieN I *4mc*、i|044i/噂牙E即配d甑串咚 萼卬事1才由上*产*惮N/TWR!岸方,AHpiM西叫方Nm 1*11 prated M jit h chvr*Ehil ihjiCOH fn

52、tj ri4u*qRMjipr-*n*nin gr*5 BiiwWd Vpi83.3.指定主机输入后点【搜索】在搜索主机名和IP地址框输入node169-172,这里输入的内容支持正则表达式。按钮,出现机器列表:douden r为CDH档集安装并j定主机.1mt?一1=1凡呼笃口口对口 a-F.曲Er三日F时尹生4死,+0出自酣ft1 日1 :fcE*!七户 5tdW3串口选择“当前管理的主机“选择项卡,点【继续】流鼻*RUMMHIMI arf- *天-Qi |gF if F* 眄E I4J1W-tjEl FHr 龊艮*1修断.”餐.即1能l通i*fHfwW4UBTIKi1/*TI*,TVdv

53、l7 11J3KJIJ1li.齐* FUW:P!星Z941 ifEJfam i n172 NJ 1730十闻却也史1电I Jl3.4.选才? CDHR本这里需要选择制作本地源时的版本,如果选择别的版本的就会去官网下载,那样安装速度会很慢。群集安装走舞括湖座m* 而餐之*和151中岫何才耽1:及意 开T.:HWct*|,*郭*. FhtainnF 可有二Q PMt r:fl片馈am-.b-bi,】i-dhii i| DOM T k 1 rvM ” 感 好五If nwdAR7 小 T; VCW 哑军耳!0币.hHt*imbI 口 weiULdl *r-SsfiMXiwj/imU泅巾*1 尢.蜘fl

54、MFB 4U 7 pf 9无Q宜出叱匕血乂啦底L 141 S leb 呢口日日听1点【继续】按钮,进入安装界面。3.4.1.出现“主机运行状态不良”错误三礼il后喊/才_工TJ/二优*!卜 IrTdMFtUta. rwfein/r*TU0 -*i.号iODD遇到节点“主机运行状态不良”的提示,解决办法是删除故障节点Agent服务cm_guid文件:#rm -rf/opt/cm-5.13.1/lib/cloudera-scm-agent/cm_guid重新启动故障节点Agent服务:#/opt/cm-5.13.1/etc/init.d/cloudera-scm-agent restart重启故障

55、节点Agent服务后,故障消失:注:出现故障原因是,因为我之前在故障节点启动过cloudera-scm-agent 服务。期集史第工比1TfW*JlrfW.itKLDE3EI3.5.检查主机正确性确保全部验证通过。群集安装传奇主帆正群传”一,.江aiEnF-5十三srgti*-t asnwewT* 3rsn,.9KWITMHrLT&iML*M .*Tme 尤产1Hm 侬睇 断fp为HxciL电&:曰gTmg帆dI W H#R |,”iwiFtnw%4mBfwm 卫ftf*曰1尹1上的界*才-”“詈2尸面配119.金总liqitW上珏9晶dBnS l,hEV Pydvn Vi?rms*;,.片土

56、叫正在卸BH4. 3餐/王在筠.亍 E 如HiIEjni 三二AEiZmx 积询片.AMvuH呷Ewn 口 EarL:# Elhf4周事f jF. :hiii fllPKWKH ,选择安装的服务本文选择的是安装所有服务。群集设置西桂寻卷在鼾鼻上杳转啊GO*F ii室.ggWWEQBeL44kA. ImAH t -fi MwIMict 2 jl.0城.可阜肥匍心呼口 *嘱5.*1出1 巾1明/ 了即出白j.814 %啃.1”的卜11*1第 AMHm FN C 白 血即必“工 L ZMKMfhH, BUi, kig X闻 F13A wn HM- Hg. ram :uhC4 Z). NXKfMH.

57、Chn4L H*l Hi-tlSlr6 * *用 M ,HEFK *RIM C 13 Uipfi44hc E ) _ 工Mw. H*. NfUl。.r*joi_ tUSIM+E W4a 再由4HUhtWWV#iHL H.看iffl-IhMHlfeHU#WE.kiW.-LMtiWefl 口HrtfehfeSrw. 一工明=和二用 W =tUEl : JiWeSVSfiC3aM . 4: FE U-角色分配这里应该根据实际需求和服务器的硬件参数自己选择性集设置室跳左曲妞白至史融取IK由邑Th I曲:魏修庄不正看:里更.加曲其心生生:的由医犬拿)脆脸隹电 单可期埸幅星需季 忙山#得沸鼻聘三由腹将*n

58、.台史.本 伯丁赛有配:鼠三可7强主机巨包UjRo中nScr* 4 靳厘da1 bflrWdvlW*nMi与3mHM相同*Q HWStZZl NdOWNMk a 1 fffcnni HTtpFS * 1 崛Hnwfe-1 64rwseT&B丁均乜声号&rtEar I帐iitUD&aMEi? n n&dfilhJ lUl Garrwaju r 5 好IE3 hr Mctiyw S*Ff k I ifrttM4411Ml喘理工曜博 HueC3 HLift SAfRHfc1 t 1QjLad BJnew a 1 Etnwte-169nwetfiflnwl1皤日 DfrtaNadt fQfl 返回nD

59、DOOO3.8.数据库设置指定的数据库名称,要与2.2 节创建的数据库(hive,monitor,oozie,hue)保持一致,并输入对应的数据库用户名和密码,为了简便这里用的是root账号名和密码。整餐设置AilJiClIVHy M-Wffcir二,,TIPkKri1,1*1m上 乘DWlZSer*rn羯*V|.而.UX9DGiDDOO全部输入完,之后【测试连接】图集设置克哈王五H比冠*. -仲Ml Jdki 小 面加 1rfl . anJ8Mpm I临1lW.用户就1ra%MvSfQt*NmKriHV ItaXawiM-UmH ffri-irMFinM-WwK *T; *NdclblMvl

60、LraoraRrncQfli$lfWJ ImwgMTWefi1 再 MdvIA* LittL9. E HIKJfr- -E9WK - RS:*n-rixjetMfcV5:iTActivity Monrior1 船此fliMWl金*才配汪 Zi pm上运之Miftlgli昌4HMBML *.2: Mp&QL*EHWrW4OoiMeServier.SucEM小g理 li 14t上互行*SUM主机.awgf :,odvlbB川卢仇.MCivnsoiHue Su-:cvutulIEJ4壬初MmB9t3ra儒W l&RSJRcdvlM 卢QL.hutmlvocri*Gftfrq*皿*It-iWflwtf

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论