




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、Cloudera大数据平台环境搭建(CDH5.13.1版)版本vl.O作者郭维忠发布日期2018-03-10目录TOC o 1-5 h zCloudera大数据平台环境搭建1 HYPERLINK l bookmark0 o Current Document (CDH5.13.1版)1 HYPERLINK l bookmark4 o Current Document 1.基础环境4 HYPERLINK l bookmark6 o Current Document 1.1.软件环境4. HYPERLINK l bookmark8 o Current Document 1.2.配置规划4. HYPE
2、RLINK l bookmark10 o Current Document 所需要的软件资源4. HYPERLINK l bookmark16 o Current Document 修改机器名(所有节点)5.设置防火墙(所有节点)6. HYPERLINK l bookmark40 o Current Document 1.6.配置免密码登录SSH6. HYPERLINK l bookmark62 o Current Document 关闭SELINUX(所有节点)8. HYPERLINK l bookmark64 o Current Document 修改Linux内核参数(所有节点)8. H
3、YPERLINK l bookmark66 o Current Document 其他安装与配置(所有节点)1.0 HYPERLINK l bookmark70 o Current Document 配置NTP服务10 HYPERLINK l bookmark102 o Current Document 安装oracleJDK1.8(所有节点)1.2 HYPERLINK l bookmark128 o Current Document Mysql安装(主节点)1.3 HYPERLINK l bookmark156 o Current Document 安装CM15 HYPERLINK l bo
4、okmark158 o Current Document 2.1.传包,解包1.52.2.创建数据库1.5创建用户1.6 HYPERLINK l bookmark180 o Current Document 制作本地YUM源1.6.拷贝jar包1.7. HYPERLINK l bookmark192 o Current Document 修改cloudera-scm-agent配置1.7 HYPERLINK l bookmark200 o Current Document 启动CMServer和Agent1.8 HYPERLINK l bookmark202 o Current Documen
5、t 访问CM1.8 HYPERLINK l bookmark204 o Current Document 安装CDH18 HYPERLINK l bookmark206 o Current Document 3.1.登录后界面1.8选择CM版本1.9.指定主机2.0选择CDH版本2.1出现“主机运行状态不良”错误2.2 HYPERLINK l bookmark228 o Current Document 3.5.检查主机正确性2.3 HYPERLINK l bookmark232 o Current Document 选择安装的服务2.3 HYPERLINK l bookmark236 o C
6、urrent Document 角色分配2.4数据库设置.测试连接报错:2.5群集设置2.6-TOC o 1-5 h z HYPERLINK l bookmark250 o Current Document 开始安装2.8 HYPERLINK l bookmark254 o Current Document 安装完成.警告信息:2.9 HYPERLINK l bookmark266 o Current Document 4.常见错误31 HYPERLINK l bookmark268 o Current Document 初始化数据库错误:3.1 HYPERL
7、INK l bookmark288 o Current Document 未能连接到HostMonitor3.2-丄-丄1.基础环境软件环境本文将介绍Centos7.4离线安装CDH和ClouderaManager过程,软件版本如下:NO.软件名称版本1.操作系统Centos7.464位2.JDKjdk-8u151-linux-x643.ClouderManager5.13.14.CDH5.13.15.数据库Mysql5.76.JDBCmysql-connector-java-5.1.43.jar配置规划本次安装共5台服务器,服务器配置及用途如下:NO.机器名称内网IP配置用途1.node16
8、8688C/32Gb/1TB主,CM,MysqlDB2.node169698C/32Gb/1TB从3.node170708C/32Gb/1TB从4.node171718C/32Gb/1TB从5.node172728C/32Gb/1TB从所需要的软件资源JDK环境:JDK版本:1.8.0_151jdk-8u151-linux-x64.rpm下载地址: HYPERLINK /technetwork/java/javase/downloads/jdk8-downloads /technetwork/java/javase/downloads/jdk8-downloads-2133151.htmlCM
9、包:CM版本:5.13.1cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz下载地址: HYPERLINK /cm5/cm/5/cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz /cm5/cm/5/cloudera-manager-centos7-cm5.13.1_x86_64.tar.gzCDH包CDH版本:5.13.1,CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel;CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1;manifest.
10、json下载地址: HYPERLINK /cdh5/parcels/5.13.1/manifest.json /cdh5/parcels/5.13.1/manifest.json HYPERLINK /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 HYPERLINK /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel
11、/cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcelJDBC连接jar包:jar包版本:5.1.43,mysql-connector-java-5.1.43.jar下载地址: HYPERLINK /maven2/mysql/mysql-connector-java/5.1.43/mysql-connector-java-5.1.43.jar /maven2/mysql/mysql-connector-java/5.1.43/mysql-connector-java-5.1.43.jar修改机器名(所有节点)修改机器名称#host
12、namectlset-hostnamexxx/设置机器名#hostname/查看本机名这种方式,在Centos7中可以永久性改变主机名称。2)每个节点机器,都要配置hosts#vi/etc/hosts内容都改为:localhost/建议保留此行68node16869node16970node17071node17172node172设置防火墙(所有节点)注:为了简便,可以先关闭防所有节点火墙,安装完成后,再按照下面步骤设置。防火墙常用命令:#firewall-cmd-state(查询防火墙状态)#systemctlstopfirewalld.service(关闭防火墙)#systemctlst
13、artfirewalld.service(开启防火墙)#systemctldisablefirewalld.service(禁止firewall开机启动)设置防火墙策略,在所有节点执行下面脚本(执行前要启动防火墙):集群机器间可以相互访问firewall-cmd-permanent-add-rich-rule=rulefamily=ipv4sourceaddress=68portprotocol=tcpport=0-65535acceptfirewall-cmd-permanent-add-rich-rule=rulefamily=ipv4sourceaddress=69portprotoco
14、l=tcpport=0-65535acceptfirewall-cmd-permanent-add-rich-rule二rulefamily二ipv4sourceaddress二70portprotocol二tcpport二0-65535acceptfirewall-cmd-permanent-add-rich-rule二rulefamily二ipv4sourceaddress二71portprotocol二tcpport二0-65535acceptfirewall-cmd-permanent-add-rich-rule二rulefamily二ipv4sourceaddress二72portp
15、rotocol二tcpport二0-65535accept/设置可以访问的端口firewall-cmd-permanent-add-port=0-65535/tcpfirewall-cmd-reload注意:需要在所有的节点上执行,因为涉及到的端口太多了,临时开放所有端口是为了安装起来方便,安装完毕后可以根据需要设置防火墙策略,保证集群安全。配置免密码登录SSH将子节点设置为从主节点ssh无密码登陆(主节点访问从节点需要无密码互通,否则后面会出现问题)在主节点上执行:#cd/进入至U根目录#ssh-keygen-trsa一路回车,生成无密码的密钥对。Lroct世n目menodehome#ssh
16、-keygen-trsaGenera七亠“public/piivatersakeypair.Enterflle1nwhichtosavethekey(./root/.ssh/idrsaj:/root/.slvitJ_rsaalreadyexists.ICuerwrite(y/rJ?yEnterpassphrasefemptyfornopassphrase):匚nterpassphraseagain:Youridentificationhasbeensavedin/root/.ssh/idrsa.Yourpublickeyhasbeersavedin/root/.ssh/idrsa.pub.Th
17、ekeyfingerprintis:9G:b4:4a:31:6a:8a:13:02:c8:e8:69:79:3d:72:26:43root(3namierodeThekeysrardomartimage1s:+-FtSA2Q481+|+.o把公钥拷贝至node169服务器上:#scp/root/.ssh/id_rsa.pubrootnode169:输入node169机器上root用户密码拷备成功登录到node169服务器上:然后在node169服务器上,把公钥的内容追加到authorized_keys文件末尾(这个文件也在隐藏文件夹.ssh下,如果没有可以新建):#catid_rsa.pub/
18、.ssh/authorized_keys如果提示下面信息,则需要创建/ssh目录:-bash:/root/.ssh/authorized_keys:Nosuchfileordirectory/创建/.ssh目录,再追加公钥内容#mkdir/.ssh#catidrsa.pub/.ssh/authorizedkeys并设置authorized_keys的访问权限:#chmod600/.ssh/authorizedkeys测试:在node168点上执行sshnode169,正常情况下,不需要密码就能直接登陆进去了。在node168节点出现下面表示成功登录node169节点:root(&nodel68
19、#sshnodel69Lastlogin:ThuMar2209:39:522018from68rootnodel69|以同样的方式将公钥拷贝至其他节点服务器上。关闭SELINUX(所有节点)关闭linuxSELINUX安全内核#setenforce0(临时生效)修改/etc/selinux/config下的SELINUX=disabled(重启后永久生效)#vi/etc/selinux/config内容增加:SELINUX二disabled重启后生效:#reboot查看SELINUX是否关闭:#sestatus(在Centos7中遇到SELINUX无法关闭的问题,重新启动机器恢复正常)修改Li
20、nux内核参数(所有节点)为避免安装过程中出现的异常问题,首先调整Linux内核参数。1)设置swappiness,控制换出运行时内存的相对权重,Cloudera建议将swappiness设置为10:/查看swappiness#cat/proc/sys/vm/swappiness/永久性修改,执行下面两条命令#sysctl-wvm.swappiness=10#echovm.swappiness=10/etc/sysctl.conf2)关闭透明大页面:自CentOS6版本开始引入了TransparentHugePages(THP),从CentOS7版本开始,该特性默认就会启用。尽管THP的本意是
21、为提升内存的性能,不过某些数据库厂商还是建议直接关闭THP,否则可能会导致性能出现下降。首先查看透明大页是否启用,alwaysnever表示已启用,alwaysnever表示已禁用:#cat/sys/kernel/mm/transparent_hugepage/defragalwaysmadvisenever#cat/sys/kernel/mm/transparent_hugepage/enabledalwaysmadvisenever以上状态就说明是启用的。临时关闭(重启机器会变回默认开启状态):#echonever/sys/kernel/mm/transparent_hugepage/de
22、frag#echonever/sys/kernel/mm/transparenthugepage/enabled永久关闭:编辑/etc/rc.d/rc.local#vi/etc/rc.d/rc.local/在文件后添加下面内容:iftest-f/sys/kernel/mm/transparent_hugepage/enabled;thenechonever/sys/kernel/mm/transparent_hugepage/enabledfiiftest-f/sys/kernel/mm/transparent_hugepage/defrag;thenechonever/sys/kernel/
23、mm/transparent_hugepage/defragfi保存退出,然后赋予rc.local文件执行权限:#chmod+x/etc/rc.d/rc.local重启系统,以后再检查THP状态,显示状态被禁用了。root做root做nodE:石5sys/kernel/nnm/transparent_hjgepage/defalwaysmadvlseCneverJ)rootOnodel6Ekernel/mm/transparent_hgqpJige/enab1sdalwaysmadviseOneverLroot(nodel68旷.3)修改文件句柄数:修改系统文件句柄数限制:查看文件句柄数,显示
24、查看文件句柄数,显示1024,显然太小#ulimit-n其他安装与配置(所有节点)为避免安装过程中出现异常问题,安装相关依赖包:#yum-yinstallpsmiscMySQL-pythonatbcbind-libsbind-utilscups-clientcups-libscyrus-sasl-gssapicyrus-sasl-plainedfUsefuse-libshttpdhttpd-toolskeyutils-libs-develkrb5-devellibcom_err-devellibselinux-devellibsepol-devellibverto-develmailcapno
25、archmailxmod_sslopenssl-develpcre-develpostgresql-libspython-psycopg2redhat-lsb-coreredhat-lsb-submod-securityx86_64spaxtimezlib-devel#yuminstall-ypython-lxml#yuminstallkrb5-develcyrus-sasl-gssapicyrus-sasl-develibxml2-devellibxslt-develmysqlmysql-developenldap-develpython-develpython-simplejsonsqli
26、te-develchmod+x/etc/rc.d/rc.local#yum-yinstallrpcbindsystemctlstartrpcbindechosystemctlstartrpcbind/etc/rc.d/rc.local配置NTP服务集群中所有主机必须保持时间同步,如果时间相差较大会引起各种问题。具体建设过程如下:所有节点安装相关组件:#yuminstallntpntpdate-yNTP服务端(主节点):1)查找时间同步服务器:打开网址,内容如下:AsiaasiapooLTousethis呂p皂匚辻ifpoolzone,addth已followingtoyourntp.conff
27、ileserverQ.畝mi口o济1mt口,carsseri/er1.asla.po*l.ntp.ccrgserverNasia口ool匕此口.ctrg=qe*v口t*3.asia.pool.rrL2)编辑/etc/ntp.conf:#vi/etc/ntp.conf在文件中输入上面网页内容:serverO.启动ntp服务:#systemctlstartntpd配置开机启动:#systemctlenablentpd.service注意:如果ntpd开机启动失效,有可能是因为安装了chronyd并且是开机自启状态,所以导致ntpd开机自启失败。#查看chronyd设置状态#systemctlsta
28、tuschronyd显示如下:r(wt?nodel69-*systenctlstatuschronyd*卢hfi?rridi航OTHi占E町1idfl时卑m|Loaided:load-edC/usr/11b/sysi.:aj:rlsi;dlii/rrlndg1nan;ctTQnyd(BjnmmcIrony-confC5ESDp&sIueepc!deaIM737e.ecstartposr-/u5r/11bexec/chrcmy-he1perupdaTe-diiDH(CDde-esTied,srarus-D/succESSj720-Esec5tartESDp&sIueepc!deaIM/sysre
29、ni.ince/chrenyd.seric-e727/usr/sbin/ctwonydwarMarMarMarMarMarMarMarMarMarwarMarMarMarMarMarMarMarMarMarracktenodeisg|19:4239ll:4Ji27LL;4i;Zfl11:43231L:4Ji2911:44:2311:44134il:45i3711:45:39-11;45;43nocl&169nadeL69nodeLO?rodelS?nad&169nadc-lfiOnodeLG?nod&169nadtlfi?nadeio?clclClchrwrydchrgrr/d727727材7
30、27727727冷727727b冇jsysceiiclockMrongby-2B752.6&9675secortii嘉ClfKk归SCepfm!try-iB/SJ.6MS75:5flllCiedsourceG9,00.llSrlZGzScHirce69.6Q丄16.126replacedwith2O3ul35-lB4:123lisellectedsource21:匚ants-nchronisc:naslactAblasources:Selectedsource.23T,6420:cants/nchrofl1se:noslcraibleiaurces:Selectedsaurce69.GO.11
31、4-_22J5elecxedsource203,115,154,123srarLd以面表明,chronyd显示为开机启动状态。将chronyd设为禁用状态:#systemctldisablechronyd.service此时,NTP的服务开机自启动完成!5)检查是否设置成功:#ntpq-p更新时间#timedatectlNTP客户端(所有从节点):远程客户端时间同步测试#date#ntpdate6868是NTP服务端IP,显示如下信息,测试成功:root(&nodel72#bsteThuMar2216:4+;00C5TZO1SLrr0tnodel72#ntpdate172r16,3-16822
32、Mar16:4-1:25ntpdate1152:adjusttimeserver68offset-0.00622secruutniudel72|客户端设置计划任务,每30分钟同步时间#crontab-e加入内容:0-59/30*/usr/sbin/ntpdate68&/sbin/hwclock-w设置定时任务开机启动/设置开机启动#systemctlenablecrond.service查看状态#systemctlstatuscrond安装oracleJDK1.8(所有节点)下载rpm安装包jdk-8u151-linux-x64.rpmCentOS系统一般自带OpenJdk,需要卸载掉自带的O
33、penJdk,使用#rpm-qa|grepjava查询java相关的包,使用#rpm-e-nodeps+包名强制卸载掉,下面安装oralceJDKrpm-ivhjdk-8u151-linux-x64.rpm配置JAVA_HOME环境变量:修改/etc/profile文件配置环境变量,执行命令:vi/etc/profile在profile文件最后,输入下面内容,保存并退出。exportJAVA_HOME=/us叨ava/jdk1.8.0_151exportPATH=$PATH:$JAVAHOME/bin执行下面命令,让配置生效source/etc/profile使修改立即生效echo$PATH查
34、看PATH值echo$JAVAHOME查看JAVAHOME值在Centos7中修改/etc/profile文件配置环境变量,机器启动后有时不生效,可以修改/etc/bashrc文件配置环境变量:vi/etc/bashrc在文件最后加入:exportJAVA_HOME=/us叨ava/jdk1.8.0_151exportPATH=$PATH:$JAVA_HOME/bin使修改立即生效source/etc/bashrc查看JAVA_HOME值echo$JAVAHOMEMysql安装(主节点)到官网 HYPERLINK /downloads/file/?id=469456%e9%80%89%e6%8
35、b%a9%e5%af%b9%e5%ba%94%e5%ae%89%e8%a3%85%e5%8c%85%ef%bc%9a /downloads/file/?id=469456选择对应安装包:下载安装包#wget HYPERLINK /archives/mysql-5.7/mysql-5.7.18-1.el7.x86 /archives/mysql-5.7/mysql-5.7.18-1.el7.x8664.rpm-bundle.tar解压安装包#tar-xvfmysql-5.7.18-1.el7.x86_64.rpm-bundle.tar解压后文件列表:mysql-community-embedde
36、d-devel-5.7.18-1.el7.x8664.rpmmysql-community-devel-5.7.18-1.el7.x86_64.rpmmysql-community-client-5.7.18-1.el7.x86_64.rpmmysql-community-common-5.7.18-1.el7.x86_64.rpmmysql-community-embedded-5.7.18-1.el7.x86_64.rpmmysql-community-embedded-compat-5.7.18-1.el7.x86_64.rpmmysql-community-libs-5.7.18-1.
37、el7.x86_64.rpmmysql-community-server-minimal-5.7.18-1.el7.x86_64.rpmmysql-community-test-5.7.18-1.el7.x86_64.rpmmysql-community-minimal-debuginfo-5.7.18-1.el7.x86_64.rpmmysql-community-libs-compat-5.7.18-1.el7.x8664.rpm3)按次序安装按common-libs-client-server的顺序安装:#rpm-ivhmysql-community-common-5.7.18-1.el
38、7.x86_64.rpmrpm-ivhmysql-community-libs-5.7.18-1.el7.x86_64.rpmrpm-ivhmysql-community-client-5.7.18-1.el7.x86_64.rpmrpm-ivhmysql-community-server-5.7.18-1.el7.x86_64.rpmrpm-ivhmysql-community-devel-5.7.18-1.el7.x86_64.rpm安装下面包,否则Hue安装报连接错误rpm-ivhmysql-community-libs-compat-5.7.18-1.el7.x8664.rpm启动数据
39、库#systemctlstartmysqld查看状态:#systemctlstatusmysqld修改MySQL初始密码1、先修改配置文件/etc/f令MySQL跳过登录时的权限检验,在mysqld下加入一行:skip-grant-tables2、重启MySQL#servicemysqldrestart3、免密码登录MySQL。#mysql4、mysql客户端执行如下命令,修改root密码mysqlusemysql;mysqlUPDATEuserSETauthentication_string=password(your-password)WHEREhost=localhostANDuser=
40、root;mysqlselecthost,user,authentication_string,password_expiredfromuser;mysqlupdateusersetpassword_expired=Nwherepassword_expired=Y/密码不过期mysqlupdateusersethost=%whereuser=rootandhost=localhost;/远程可访问mysq卜flushprivileges;刷新mysq卜exit;/退出5、修改配置文件/etc/f删除此前新增那一行skip-grant-tables,并重启MySQL(这一步非常重要,不执行可能导
41、致严重的安全问题)#servicemysqldrestart/重启Mysql2.安装CM传包,解包在主节点上下载相关软件包,这里将软件包下载到/data/cdh/目录下。#cd/data/cdh载MysqlJDBC包:#wget HYPERLINK /maven2/mysql/mysql-connector-java/5.1.43/mysql-connector-java-5.1.43.jar /maven2/mysql/mysql-connector-java/5.1.43/mysql-connector-java-5.1.43.jar载CM:#wget HYPERLINK http:/ar
42、chive-primary.cloudera.eom/cm5/cm/5/cloudera-manager-centos7-cm5.13.1 http:/archive-primary.cloudera.eom/cm5/cm/5/cloudera-manager-centos7-cm5.13.1x8664.tar.gz载CDH:wget HYPERLINK /cdh5/parcels/5.13.1/manifest.json /cdh5/parcels/5.13.1/manifest.jsonwget HYPERLINK /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh
43、5.13.1.p0.2-el7.parcel.sha1 /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1wget HYPERLINK /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel /cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel将CM解压到/opt/目录:#tar-zxvfcloudera-manager-centos7-cm5.13.1_x86_64.tar.gz-C/o
44、pt/#ls/opt/clouderacm-.2.2.在主节点上:#mysql-h-uroot-p在主节点上:#mysql-h-uroot-p/加参数-h指定本机方式,否则可能不允许执行grantEnterpassword:Enterpassword:输入数据库密码/在MariaDB(none)命令状态输入下面脚本:createdatabasehiveDEFAULTCHARSETutf8COLLATEutf8_general_ci;createdatabaseamonDEFAULTCHARSETutf8COLLATEutf8_general_ci;createdatabasehueDEFAUL
45、TCHARSETutf8COLLATEutf8generalci;createdatabasemonitorDEFAULTCHARSETutf8COLLATEutf8_general_ci;createdatabaseoozieDEFAULTCHARSETutf8COLLATEutf8_general_ci;grantallprivilegeson*.*torootlocalhostidentifiedbyrootwithgrantoption;grantallon*.*toroot%Identifiedbyroot;flushprivileges;exit;/复制MysqlJDBC包至I/o
46、pt/cm-5.13.1/share/cmf/lib/目录cpmysql-connector-java-5.1.43-bin.jar/opt/cm-5.13.1/share/cmf/lib/初始化CM,执行下面脚本/opt/cm-5.13.1/share/cmf/schema/scm_prepare_database.shmysqlcm-hnode168-uroot-proot-scm-hostnode168scmscmscm/如果出现下面错误:java.sql.SQLException:Accessdeniedforuserrootlocalhost(usingpassword:YES)/解
47、决办法:在/etc/hosts文件中,加上localhost.node168Qlocalhost.nodel68主节点/etc/hosts内容:Qlocalhost.nodel68nodelGBnndel69nodel/anodelGBnndel69nodel/anodelZlnodelZZ2.3.创建用户3.168172.16.S.169703.17172脚本/scm_prepare_database.sh执行成功界面:册门*ycc-5C/Mhwi-scM-p-tpare-JlJir-sbidt.sh寸训1g-hlwalfet-priwtkb-IwhIwaihM-tsc*JjiviKiiE-
48、/UBT/-0J.51VrihrirqcHnbneihhtIE-aun-sp-i,ic.-el-El-=ur3-u-iM-BarLuMirCM.jdfeC.OfIrF1_This1dtprAUfEAd.mtriSH-dr1vfiiFLlMS11.Lj.jK.ITIvAf.UtlAdHv*Hvl1EhftSF口MdHJIMiAlladingCMTEFUdf1virl*ar2317!0Ji26cft血EcsrabiIshselc1ciiddhaicsi8?rs*弊TTIwdw1?mimc席ihnflto冲皿?.S.*54.5-6.2S-$.?.fe-卢例认“住何eelcc*wccJc啤1sin-T
49、aec:percwplUnceiiichtKUilrgjpplRjtlDnnac叩ml讣亡vtrRaceprger“1sj-efttoreedelttwe-已kpTIcJiiydlMbitssl塚seixTnegwmtarjervjccnflQurKlanfl1ainClidif1-5CSIrtimciiU54rEiecktlrqBiB_l5Lbln-cp,11帘皆已命jar:/wiryTwre/JiMfcar-Kle-ccnrwcTcr-Jarra.j*r.-aprycf-S!MJT1BAcw.clov(Jerj.3tficerprrtc/rIrajMra-ini-iH-viH-.-ptre
50、ixOEk-claudvra.mr.tfc.l1o-stBLKaql.idn.Drinr1.ThiiaihprKvtHdLUtanwdrinrl!maisum.Hnql.cj.Idbc.Driw*.ThatkH丫ariaiMJCwitiCiallyrK*l3itHrdirltha5P1ndunu*lltudInQrfehdrIyirl2di7iOJi27tFTEgwntsrat-iIshfiq55L立申耳口:*孙川网汽s1-5门艸+血d.Me席声讯to吟吨l5.5.*54.5-6.-S-.?.“铀审“叫毗,s=slcffl*wcch睥Isftact:rqrcwll-nce:i-ichtpJrd
51、叩购ei1*1叫$5il讣弋strIcace呼也刖即1j.j-rtioTaImi1crwe亡叩TlcJiiydli-itiel冲,口x曲伽亠eEEdrtrr-cw-i:itl-EJEicuH-iTloftian.3Q1-I-43-331T=U2:JTaXL4win3NF10ejm.twtiflrj_ntHr|3Eljh.ifcuEiT.MfsZuntfidCA-icuEar-LKMufiLllyuomKt*cdeIjeJhu-Alldam.schiwijesq1s口时诃讨“i|r-Mi::4ti4ccih5iJ_5-yri:*|在所有节点上执行:#useradd-system-home=/op
52、t/cm-5.13.1/run/cloudera-scm-server-shell二/bin/false-commentClouderaSCMUsercloudera-scm2.4.制作本地YUM源在主节点上:进入软件包目录#cd/data/cdh/拷贝三个文件至U/opt/cloudera/parcel-repo/目录#cpCDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcelCDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1manifest.json/opt/cloudera/parcel-repo/进入/opt/cloudera/
53、parcel-repo/目录#cd/opt/cloudera/parcel-repo/修改文件名#mvCDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha此时/opt/cloudera/parcel-repo/目录下文件:root&nodel68parcel-repo#112717:34CDH-5.13.1-1.cdh5.13.1.pO.2-el7.parcel272717:34CDH-5.13.1-1.cdh5.13.1.pO.2-el7.parcel2717:34CDH-5
54、.13.1-1.cdh5.13.1.pG.2-el7.parcel.sha2717:34manifest,json-rw-r-r一一Lrootroot1534231261Mar-rw-r-r-1rootrocrt41Mar-rw-r-r-Lrootrocrt73766Marroot(&nodel68parcel-repo#.25拷贝jar包在所有节点上:/如果没有/usr/share/java/目录,则创建cpmysql-connector-java-5.1.43-bin.jar/usr/share/java/mysql-connector-java.jar在主节点上:/将mysqlJDBCj
55、ar包拷贝到/opt/cm-5.13.1/share/cmf/lib/目录cpmysql-connector-java-5.1.43-bin.jar/opt/cm-5.13.1/share/cmf/lib/修改cloudera-scm-agent配置在主节点上,修改/opt/cm-5.13.1/etc/cloudera-scm-agent/config.ini文件:/将config.iniserver_host=localhost内容改为server_host=68#sed-is/server_host=localhost/server_host=68/opt/cm-5.13.1/etc/cl
56、oudera-scm-agent/config.ini在主节点上:/将cm-5.13.1打包,并复制到其他节点#cd/opttarczfcm-5.13.1.tar.gzcm-5.13.1/复制到其他节点scpcm-5.13.1.tar.gznode169:/opt/scpcm-5.13.1.tar.gznode170:/opt/scpcm-5.13.1.tar.gznode171:/opt/scpcm-5.13.1.tar.gznode172:/opt/在所有从节点上解压:/将cm-5.13.1包解压#cdopttar-xzvfcm-5.13.1.tar.gz解压后删除#rm-rfcm-5.1
57、3.1.tar.gz启动CMServer和Agent在主节点上,启动cloudera-scm-server:#/opt/cm-5.13.1/etc/init.d/cloudera-scm-serverstart启动过程较慢,可通过/opt/cm-5.13.1/log/cloudera-scm-server日志,查看启动过程。在所有节点上,启动cloudera-scm-agent:#/opt/cm-5.13.1/etc/init.d/cloudera-scm-agentstart访问CM地址:http:/主节点IP:7180用户名、密码:adminclouderamanage社区瞬世圧助彦安装C
58、DH登录后界面接受协议:?ImMnA%-8aeraimw澤启毎円ckllKlerwTHnagefrlzrucbrHiTdQSB35sumx-DLoiLiRH嵩WHS咅寻*trrt_3aHQX93QXH3s4eEnAF*HA3srflU25_-33Hen_-w5口EPFBaE-9M.sa3-rlLGUDElu,_srfKSl._-PIMrns吉KSFITnMGAREnuY-J8?d5os3f-sUSE4$*MJTSS8stt罢皐EHm5,3fTHATWVAfiTHEnio-Hso-rtSUCHcaK.?JHEE2HrTlHEMHmgrouImfhe若m7总良弔tr耳录he番PSEanisi?3*
59、WJICCrnp&HmgrrlgT_./WEF$HETOM_.g匚K-h国ytheEHA1F电厳azg圭-CSDCITE5sU5N&HVTCTNPRDDkTA3U吿JrIOHLEEKZ-_En$sEMID-RLL*Tiv-sx03-4口FTXQEFCrHcExTiHsst*3HSTBIS占rehjth3-E勒EEToeELEapLYKU*盟芒-AFTHrrlTrrl聖小IB酉SSS3s$3xiTHS蚤BEMENT-FFDUsZ2IM-or3sssnDxsdnaMs3H.ss-iMATmlCHANY3S3s-sn-SRHhMK-e-a-aJsstn.4LT期宙山?A1S1mnjnSHlM-lwi
60、KtJy7TEWSE-4vri药teB32sCMs屮s3EHLFrErKIr晏恥CDHOFLSsAhb-Fmslsffof&eNGF3它总OECasNmdEtorHiTruMtM-4VRloudwl-Fm=MQO.-F.tatrdMrpdttsH33ss隠境繚嗚COU帶恳s一-星就弹kygumT2U.X1I掘aLj-ffleailtaFaw界BlyTi雷f=直-PS39.XD_-舀%監皐-C复J-k43#=hawdoKmjwVRXao0&n亠*PWTHIWHu?f3J=fi日)*isjnnrart-ql3-5Kff帝囿3MKJirFgtk冃Gl當Q-o星UMW立曜3sfl-W13!wmdOH4
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 管理者沟通技巧对员工工作的影响试题及答案
- 市政项目管理试题及答案
- 2025年信用风险管理试题及答案
- 2025年电商平台内容营销与种草经济营销效果评估指标体系研究报告
- 公共关系与市场趋势的关系试题及答案
- 行政管理公文写作的必要技能试题及答案2025
- 公共关系中的社会媒体管理技巧试题及答案
- 行政管理市政学基础知识试题及答案
- 行政管理本科综合备考试题及答案
- 行政管理中的社会互动与公共关系试题及答案
- 漆房外协协议书
- 2025年能源行业能源需求预测与市场发展趋势2025
- 2024年“蓝桥杯”科学素养竞赛考试题库(含答案)
- 康复医疗复习题及参考答案
- 破产法试题及答案
- 高血压科普基础知识培训-2025世界高血压日
- 宪法卫士2023第八届全国学生学宪法讲宪法知识竞赛题库附答案(300题)
- 静脉输液不良反应及处理 课件
- 河南省开封市等2地2025届高三第三次质量检测英语+答案
- 2023年小学科学实验知识竞赛试题库含答案
- MOOC 颈肩腰腿痛中医防治-暨南大学 中国大学慕课答案
评论
0/150
提交评论