集群部署方案及安装配置手册.doc

1. 部署方案参考如上图所示，中间件平台主要包括两大部分：l 负载分发层n 包括两台服务器，通过Heartbeat实现HA，提供浮动IP给客户端，保证了系统不存在单点故障问题n 负载分发软件采用IBM HTTP Server实现n 通过IBM HTTP Server配置虚拟主机，实现对不同应用的请求进行分发到不同的后台WAS中间件集群。l WAS中间件集群n 包括两台4CPU(每CPU 4Core)服务，每个服务器上通过水平扩展可以启动多个WAS服务器。n 基于应用部署要求，为每个应用建立一个集群，逻辑上实现应用之间的隔离。n 每个集群可以根据应用的负载，动态分配WAS服务器实例数。如HR应用访问量较大则分配4个WAS实例。n 但最小要保证一个集群至少包括2个WAS实现，并且这两个实例分别在不同的物理服务器上，这样才能保证不出现单点故障。n 部署管理器，部署在WAS Server1上。2. WebSphere 7安装及配置此安装配置说明仅供参考，还需要根据现场实现情况进行调整。2.1. WAS安装一、 四台服务器拓朴结构四台机器IP地址，名称与安装内容主机名IP安装软件（组件）app1WASND 7.0( WAS)(DM+APPSRV01) app2WASND7.0( WAS)( APPSRV01)web1HIS+PLUGINSweb2HIS+PLUGINS其中DM控制台管理用户admin,口令两个web服务器的管理用户也是admin,口令二、 安装后验收http:/*.*.*.*:9060/ibm/console可打开应用服务器主机的控制管理台，管理用户admin,口令*服务器集群下建有应用集群服务器应用服务器下建有两个WEB服务节点共有五个，分别是一个控制节点(一个dmgr节点)，两个受控节点(两个app节点)，两个非受控节点(两个web节点)集群下各受控节点已同步，并启动服务；两个WEB服务已生成插件、传播插件并启动。在DMGR控制管理台可直接控制两个WEB的启动与停止。三、 安装前系统检查 群集安装时，确认所有机子的日期要一致 确认磁盘空间足够两个应用服务器的安装文件放在/was_install两个WEB服务器的安装文件放在/http_install安装目录都是安装于默认的/opt目录下两个应用服务器安装后生成目录 /opt/IBM/WebServer/AppServer两个WEB服务器安装后生成目录/opt/IBM/HTTPServer 两个WEB服务器的目录/opt/IBM/HTTPServer/plugins放有插件 确认管理域之内的所有的机器主机名和ip地址相互能够ping通在安装前，要确保四台机的/etc/hosts文件里面增加四台机的ip与主机名，修改如下*.*.*.1 app1*.*.*.2 app2*.*.*.3 web1*.*.*.4 web2(对于初次安装系统后的主机，因为没有在HOSTS文件中增加此类记录，会导致安装失败，现象是安装后生成的profiles不完整，并且startManager.sh执行失败，启动不了管理服务。另外，安装完WAS后，不能修改主机名，否则WAS的服务启动不了，需要重新安装) 确认主机名在生产环境中不会再改变 四台主机做好设置，能够用xmanager进行图形化安装。如不能进行图形化安装，则需要修改was或his下的responsefile.txt文件中的各参数，工作量大而且易出错。 安装介质已有， was7.0 nd for linux x86-64 bit对于was7.0 ，对于操作系统与硬件空间要求如下:/support/docview.wss?rs=180&uid=swg27012474The following list identifies the products that are supported when WebSphere Application Server runs on the Linux x86-64 operating system. It is not necessary to run these products on the same machine or operating system as WebSphere Application Server.：Operating Systems supported with 64-bit WebSphere Application Server Red Hat Enterprise Linux AS, Version 4 with Update 6 Red Hat Enterprise Linux ES, Version 4 with Update 6 Red Hat Enterprise Linux, Version 5Red Hat Enterprise Linux product site SUSE Linux Enterprise Server, Version 9 with SP4 SUSE Linux Enterprise Server, Version 10 with Update 1 SUSE Linux Enterprise Server, Version 11 (See Required Detail 6) SUSE Linux Enterprise Server product siteHardware Requirements AMD Opteron and Intel EM64T (64 bit kernel support only) Disk space requirements Minimum 1 GB physical memory recommended CD-ROM drive四、 把安装程序包放到主机/was_install目录下，解压，解包命令gunzip *.gzTar xvf *.tar五、 图形化安装过程(用XMANAGER3.0执行安装)1、应用服务器主机36安装was过程如下各步：进入linux环境，打开终端，打开文件系统，在was_installwas_ins目录下的launchpad.sh ，双击运行选择左面列表的第一项，进行was安装，进入下一个安装画面选择接受协议系统进行安装前检查，检查版本，软硬件环境，检查通过Sample例程选择，安装（此例程可用来学习参考检验用），两个语言包也选择上，一并安装默认安装到OPT目录下/opt/IBM/WebSphere/AppServerapp1主机是管理控制的主机，选择安装CELL（会安装dmgr01与appsrv01，并且自动联结），app2只安装一个Application Server(APPSRV01)，这是两台应用服务器安装过程的唯一区别管理用户与口令分别设为admin,admin, Samples口令也设为sample此步不选择，跳过安装前检查执行权限，因为是用root用户执行安装，权限检查肯定通过权限通过，安装过程总结如下点next后，进行安装安装完成安装后成功，在app1主机下的/opt/IBM/WebServer/AppServer/profiles目录下可看到DMGR01，APPSRV01两个目录。其中DMGR01是管理台概要文件，只在app1主机上有。同样，在主机app2机上安装was后，在app2下的/opt/IBM/WebServer/AppServer/profiles目录下可看到APPSRV01一个目录。在app1主机下的profilesDMGR01FIRSTSTEPS目录下，运行firststeps.sh，可进行安装后检测检测结果通过，请注意蓝色字体：Server name is:dmgrProfile name is:Dmgr01Profile home is:/opt/IBM/WebSphere/AppServer/profiles/Dmgr01Profile type is:dmgrCell name is:app1_Cell01Node name is:app1_CellManager01Current encoding is:UTF-8Start running the following command:/opt/IBM/WebSphere/AppServer/profiles/Dmgr01/bin/startManager.sh -profileName Dmgr01ADMU0116I: Tool information is being logged in file /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/logs/dmgr/startServer.logADMU0128I: Starting tool with the Dmgr01 profileADMU3100I: Reading configuration for server: dmgrADMU3200I: Server launched. Waiting for initialization status.ADMU3000I: Server dmgr open for e-business; process id is 32586Server port number is:9060IVTL0010I: Connecting to the APP1 WebSphere Application Server on port: 9060IVTL0015I: WebSphere Application Server APP1 is running on port: 9060 for profile Dmgr01IVTL0035I: The Installation Verification Tool is scanning the /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/logs/dmgr/SystemOut.log file for errors and warnings.11/2/09 23:27:40:343 CST 00000000 WSKeyStore W CWPKI0041W: One or more key stores are using the default password.11/2/09 23:27:42:466 CST 00000000 ThreadPoolMgr W WSVR0626W: The ThreadPool setting on the ObjectRequestBroker service is deprecated.IVTL0040I: 2 errors/warnings are detected in the /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/logs/dmgr/SystemOut.log fileIVTL0070I: The Installation Verification Tool verification succeeded.IVTL0080I: The installation verification is complete.上述显示说明安装正常，DMGR服务可正常启动。访问端口是9060此时到IE，可打开控制台http:/*.*.*.*:9060/ibm/console选择继续浏览此网站，进入主控画面输入admin,*此时在服务器可以看到一个SERVER1，但没有启动代理服务前，前台是不能启动的。需到服务器下运行。rootAPP1 bin# cd Profiles/AppSrv01/binrootAPP1 bin# ./startNode.sh节点代理启动ADMU0116I: Tool information is being logged in file /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/nodeagent/startServer.logADMU0128I: Starting tool with the AppSrv01 profileADMU3100I: Reading configuration for server: nodeagentADMU3200I: Server launched. Waiting for initialization status.ADMU3000I: Server nodeagent open for e-business; process id is 330此时再到前控制台，可正常启动server1了(或者在服务器下运行命令./startServer.sh Server1 ，同样可以启动服务)至此，主机36安装并验证完毕。2、主机app1的dmgr与appserver启停的服务器下命令(如主机重启，需要到服务器下手工执行脚本)cd /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/bin./startManager.sh启动dmgr01服务，此脚本成功执行后，则可打开前端控制台再启动节点代理cd /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/bin./startNode.sh启动节点代理后，则可在前端控制台去启动server1,也可在服务器端直接用脚本启动./startServer.sh server1(对应上述启动命令，关闭服务的命令分别为)./stopServer.sh server1./stopManager.sh -username admin password *3、再去安装app2机过程同app1机，不同处只是在概要文件创建里不选择cell，只选择一个application server就行了。安装执行完成后，检查profiles下，已有appsrv01至其下的bin执行如下脚本，关联节点NODE2到主机36的DMGR服务节点cd /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/bin./addNode.sh *.*.*.* 8879其中IP地址是主机36的IP，后面的8879是SOP端口。输入app1上DMGR01管理用户admin，口令*执行成功rootAAAAAPP2-* bin# ./addNode.sh *.*.*.36 8879ADMU0116I: Tool information is being logged in file /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/addNode.logADMU0128I: Starting tool with the AppSrv01 profileCWPKI0308I: Adding signer alias CN=APP1, OU=Root Cer to local keystore ClientDefaultTrustStore with the following SHA digest: B5:37:07:88:00:A4:78:10:95:B0:56:17:3C:8D:A9:A7:C0:BD:76:3FRealm/Cell Name: Username: admin Password: CWPKI0308I: Adding signer alias datapower to local keystore ClientDefaultTrustStore with the following SHA digest: A9:BA:A4:B5:BC:26:2F:5D:2A:80:93:CA:BA:F4:31:05:F2:54:14:17ADMU0001I: Begin federation of node AAAAAPP2-*Node01 with Deployment Manager at *.*.*.36:8879.ADMU0009I: Successfully connected to Deployment Manager Server: *.*.*.36:8879ADMU0505I: Servers found in configuration:ADMU0506I: Server name: server1ADMU2010I: Stopping all server processes for node AAAAAPP2-*Node01ADMU0512I: Server server1 cannot be reached. It appears to be stopped.ADMU0024I: Deleting the old backup directory.ADMU0015I: Backing up the original cell repository.ADMU0012I: Creating Node Agent configuration for node: AAAAAPP2-*Node01ADMU0014I: Adding node AAAAAPP2-*Node01 configuration to cell: APP1Cell01ADMU0016I: Synchronizing configuration between node and cell.ADMU0018I: Launching Node Agent process for node: AAAAAPP2-*Node01ADMU0020I: Reading configuration for Node Agent process: nodeagentADMU0022I: Node Agent launched. Waiting for initialization status.ADMU0030I: Node Agent initialization completed successfully. Process id is: 6848ADMU0300I: The node AAAAAPP2-*Node01 was successfully added to the APP1Cell01 cell.ADMU0306I: Note:ADMU0302I: Any cell-level documents from the standalone APP1Cell01 configuration have not been migrated to the new cell.ADMU0307I: You might want to:ADMU0303I: Update the configuration on the APP1Cell01 Deployment Manager with values from the old cell-level documents.ADMU0306I: Note:ADMU0304I: Because -includeapps was not specified, applications installed on the standalone node were not installed on the new cell.ADMU0307I: You might want to:ADMU0305I: Install applications onto the APP1Cell01 cell using wsadmin $AdminApp or the Administrative Console.ADMU0003I: Node AAAAAPP2-*Node01 has been successfully federated.此时再到app1主机的DMGR控制台可以看到节点app2主机的SERVR1可以启动app2机上的SERVER1。(至app2机上的profiles/appsvr01/bin下执行./startServer.sh server1也可)六、 两应用服务器建集群。把app1与app2的应用服务放在集群中1、删除两个应服务器下的单个SERVER。停止两个服务后，删除，保存设置把单个服务器删除2、建集群，起名HR_cluster注意：把配置HTTP会话内存到内存的复制勾上。“下一步”，分别对应两应用服务主机，各一个SERVER，分别名称为app1app2集群建完后如下3、到系统管理节点中同步各节点4、启动集群集群可正常启动至此，两台应用服务器的集群安装完毕！七、 安装WEB服务器33机安装HTTPSERVER与PLUGINS插件程序安装包在/http_install目录下，解压解包后，执行http_ins/ihs/目录下的install.sh文件，用xmanager来执行该文件进行安装。安装画面如下：第一步设置端口，选择默认的Web1机的http port 80http administration port 8008后面一步，在设置插件安装目录与应用服务器主机名称那里，33对应的插件安装目录是默认的/opt/IBM/HTTPServer/plugins对应的应用服务主机名设为 app1(注意：34那台机安装httpserver时，选择对应的应用服务主机设为app2，其他过程都相同)注意在管理用户与口令那里设置为admin,*注意：因为这两个web服务器要通过另外一台应用服务器的dmgr来管理，所以这里的安全管理用户与口令要设。否则dmgr上无法管理启停。下面这一步，设置用户与组分别为nobody,nobody (注意：这个用户与组在etc/group,passwd,shadow中要有)33上WEB服务器安装完成34上HTTPSERVER完装过程类似，只是先把对应的应用服务器主机名设为app2八、 两台WEB服务器的启动过程正常过程：在两台WEB服务器下，HTTPServer/bin目录下，执行如下脚本，启停apache服务./apachectl start./adminctl start提示./adminctl start: admin http started 九、 回到app1的DMGR主控制台，建立WEB服务节点与启动管理。选择系统管理节点，增加非受管制的两个WEB节点(前面两个app节点是受管制节点)点添加，选择非受管节点为WEB1机上的节点命名并设置主机名称非受管节点名称：webnode1主机名：web1第一个节点添加成功再同样操作继续添加第二个非受管节点非受管节点名称：webnode2主机名：web2然后回到服务器类型下，选择WEB服务器，选择两个非受管节点，分别去创建webserver1下一步后，增加设置属性，管理用户与口令 .用户与口令是在WEB机上安装HTTPSERVER时的设置admin,admin完成第一个WEB节点上WEBSERVER的创建同上操作再去完成第二个web服务节点的webserver1创建。两个都创建完毕后。选择生成插件，生成插件成功，提示如下：PLGC0005I: Plug-in configuration file = /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/config/cells/APP1Cell01/nodes/webnode1/servers/webserver1/plugin-cfg.xmlPLGC0052I: Plug-in configuration file generation is complete for the Web server. APP1Cell01.webnode1.webserver1.PLGC0005I: Plug-in configuration file = /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/config/cells/APP1Cell01/nodes/webnode2/servers/webserver1/plugin-cfg.xmlPLGC0052I: Plug-in configuration file generation is complete for the Web server. APP1Cell01.webnode2.webserver1.传播插件成功，提示如下：PLGC0062I: The plug-in configuration file is propagated from /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/config/cells/APP1Cell01/nodes/webnode1/servers/webserver1/plugin-cfg.xml to /opt/IBM/HTTPServer/Plugins/config/webserver1/plugin-cfg.xml on the Web server computer.PLGC0048I: The propagation of the plug-in configuration file is complete for the Web server. APP1Cell01.webnode1.webserver1.PLGC0062I: The plug-in configuration file is propagated from /opt/IBM/WebSphere/AppServer/profiles/Dmgr01/config/cells/APP1Cell01/nodes/webnode2/servers/webserver1/plugin-cfg.xml to /opt/IBM/HTTPServer/Plugins/config/webserver1/plugin-cfg.xml on the Web server computer.PLGC0048I: The propagation of the plug-in configuration file is complete for the Web server. APP1Cell01.webnode2.webserver1.两个WEB服务已建立，并可通过DMGR 来控制启停。2.2. 安装补丁安装工厂，并打补丁1.进入目录/tmp/WAS7LINUX/Linux_suppl/ UpdateInstaller（根据实际路径调整），执行install命令，如下图所示：2.出现如下页面，点击“Next”：3.出现如下页面，选择“I accept”，点击“Next”：4.在出现的页面上点击“Next”（出现“Passed”表示补丁安装安装工厂的安装程序通过对操作系统的检查）；5.出现如下页面，确认安装目录为“/websphere/UpdateInstaller”，点击“Next”：目录为“websphere/UpdateInstaller”6.在出现的页面上点击“Next”；7.等待进度条行进至100%8.出现如下页面，选择“Launch IBM Update Installer for WebSphere software on exit”（这一步会在结束补丁安装工厂的安装后，自动启动补丁安装工厂），点击“Finish”；9.拷贝补丁文件至目录/ websphere/UpdateInstaller/maintenance下：cp /tmp/WAS7LINUX/pack/*.pak websphere/UpdateInstaller/maintenance/（路径根据实际情况修改）10.在拷贝补丁文件的同时，补丁安装向导可能会自动弹出（注：如果该页面没有自动弹出，请执行/ websphere/UpdateInstaller/update.sh），如下图所示。请确认已经执行过上一步后，再点击“Next”：11.出现如下页面，确认WAS的安装目录为“/websphere/AppServer”，点击“Next”：目录为“websphere/AppServer”12.出现如下页面，确认选择了“Install maintenance package”，点击“Next”：13.出现如下页面，确认该目录下的确存在补丁文件，即为第9)步已拷贝文件到该目录下，或者，选择想要安装的补丁文件所在的目录，点击“Next”：注意：l 安装补丁时，需要确保当前没有WAS进程在运行，使用ps ef |grep java命令查看。目录为“websphere/UpdateInstaller/maintenance/”14.出现如下页面，选中所有需要安装的补丁文件，点击“Next”：15.出现如下页面，点击“Next”：16.等待进度条行进至100%17.出现如下页面，点击“Finish”：18.查看版本，确认补丁安装成功：执行：/ websphere/AppServer/bin/versionInfo.sh出现如下页面。注意最后10行以内的内容。Version应为：32.3. 创建概要文件1.创建概要文件-用root 用户登录进入目录cd /websphere/AppServer-生成profiles目录并指定目录所有者mkdir profileschown -R wsuser:usr /websphere/AppServer-进入目录cd /websphere/AppServer/bin -创建概要文件./manageprofiles.sh -create -profileName AppSrv01 -profilePath /websphere/AppServer/profiles/AppSrv01 -templatePath /websphere/AppServer/profileTemplates/default -hostName hnnyyx1srv2（-hostName 后面名字为安装was本机的规划好的名字，名字不要有下划线等其他字符）-如创建错误，需要删除AppSrv01时，用Root用户使用如下命令，创建正确时，不需执行 cd /websphere/AppServer/bin./manageprofiles.sh -delete -profileName AppSrv012.用root用户启动应用程序cd / websphere/AppServer/ profiles /AppSrv01/bin/./startServer.sh server13.进后台管理器设置安全性（目的：设置后，只能wasadmin用户可以管理was控制台）（1）在IE里录入http:/*.*.*.*:9061/admin进入后台管理界面（2）在“安全性-全局安全性”界面中“可用域定义”选择“联合存储库”，点击“设置为当前”，然后点击“配置.”进入属性设置界面，操作步骤如下图：4.点击“配置.”进入下图界面2.选择联合存储库1.全局安全性3.点下设置为当前(3)、在下图界面中输入“主要管理用户名”为“wasadmin”，点击确定后进入密码验证界面，录入两遍相同密码：was123，而后点击“确定”5.录入wasadmin后点“确定”，在密码验证界面，录入两遍密码：was123，点击“确定”，回到下图界面（4）选中“启用管理安全性”并去除“应用程序安全性”及“JAVA2安全性”选项，再次选中“联合存储库”，点击“设置为当前”，然后点击“应用”，最后点击“保存”完成安全性设置。6.选中“联合存储库”7.勾选9.不勾选8.不勾选11.点“应用”10.点击“设置为当前”全局安全性12.点“保存”完成安全性设置4.停止应用程序-用wsuser用户cd /websphere/AppServer/profiles /AppSrv01/bin/./stopServer.sh server1 -username wasadmin -password was1235.启动应用程序-用wsuser 用户cd /websphere/AppServer/profiles/AppSrv01/bin/./startServer.sh server1 -username wasadmin -password was1232.4. 创建和配置数据源1.如果WebSphere Application Server的实例未运行(查看实例是否运行，可以在操作系统上用命令ps ef | grep java查看。如果没有从/websphere/IBM/WebSphere/AppServer目录下发起的java进程，则未运行)，则启动WebSphere应用服务器运行实例, 运行命令:-用wsuser用户cd / websphere/AppServer/ profiles/AppSrv01/bin/./startServer.sh server1-username wasadmin -password was1232.应用服务器启动后，通过浏览器进行管理WebSphere服务器http:/*.*.*.*:9060/admin3.在管理界面左侧菜单中，选择资源 -JDBC - JDBC 提供程序选择JDBC提供程序2.点“新建”1.选择该作用域，服务器名=server14.选择“作用域”到服务器级别，并点击“新建”按钮，创建JDBC Driver5.依次按下图选择数据库类型“DB2”，提供程序类型“DB2 Universal JDBC Driver Provider”，实施类型“连接池数据源”，接受自动的名称和描述，点击“下一步”：6.在“输入数据库类路径信息”页面上，设置如下图所示的两个JDBC Driver安装目录环境变量为“/home/websphere/db2driver”，点击“下一步”：*使用wsuser用户创建db2drivercd /home/webspheremkdir db2driver使用root用户将“db2配置db2driver”目录中的文件传到WebSphere主机“/home/websphere/db2driver”目录下并赋权限chown -R wsuser:usr db2driver如果要修改“数据库类路径信息”则进入“环境”-“WebSpere环境变量”7.在最后一页上点击“完成”；8.以下步骤进行设置此JDBC Driver之下的数据源，点击“DB2 Universal JDBC Driver Provider”进入此数据源点击“DB2 Universal JDBC Driver Provider”9.在配置界面中，选择右侧“数据源”连接，进入数据源设置。点“数据源”10.点击“新建”，创建数据源点击“新建”11.在创建数据源界面中，输入您应用所使用数据源名“TC”和JNDI名称“TC”，点击“下一步”：12.在数据源配置“步骤2”中，输入如下数据库基本信息。点击“下一步”：数据库名：tradectr驱动程序类型：4 （默认值）服务器名称：IP地址端口号：50000 13.在该步骤中，直接点击“下一步”；（将在其后得步骤中创建安全性别名）14.在“总结”页面上，点击“完成”；15.在如下页面上，点击“保存”：16.保存之后，点击“TC”进入此数据源，并点击右侧“JAAS J2C 认证数据”，创建连接数据库的用户名和密码别名：点这里17.在如下页面点击“新建”：点“新建”18.在如下页面上输入如下数据，点击“确定”：别名：tc用户标识：tc密码：business 19.在如下页面上，点击“保存”：点“保存”20.出现如下页面，点击“TC”，回到刚才创建的数据源管理界面：点“TC”21.回到先前创建的数据源“jdbc/TC”管理界面，选择“组件管理的认证别名”和“容器管理的认证别名”为刚才创建的“tc”别名，映射配置别名选“DefaultPrincipalMapping”。点击“确定”：映射配置别名选“DefaultPrincipalMapping”22.按照上面的方法，保存设置，然后在如下页面上，选中“TC”，然后点击“测试连接”：23.按照上述2.4.9到2.4.22步方法创建数据源“QC”2.5. 应用包发布1.将应用包app.war通过ftp命令(二进制bin方式)传到/tmp目录下2.进入管理控制台，在左边的菜单栏目中点击“应用程序 - 应用程序类型-WebSphere企业应用程序”，页面上点击“安装”，如下图：点“安装”按钮3.出现如下页面，选择“远程文件系统”，并在“完整路径”一栏输入（或选择）“/tmp/app.war”，点击“下一步”：选择应用4.出现如下页面，选择“快速路径”点击“下一步”：选择“快速路径”5.出现如下页面