kettle集群及动态集群配置

1、Kettle版本：v0.5.1Kettle集群方式：固定数量子服务器的集群，动态集群 固定数量子服务器的集群部署方法：u 使用条件：有大数据量的数据需要进行处理，并且有固定数据的子服务器可以一直保持可连接使用（如果数据处理过程中有子服务器不可用将导致集群运行的失败）u 配置方法：1. 配置子服务器信息：在kettle中可以在转换作业的主对象树下的子服务器文件夹下创建，也可以在探索资源库的窗口下的子服务器下创建，子服务的配置如下图：如果是作为主服务器，则将上面的主服务器选型勾选即可。2. 配置集群schemas信息：在kettle中可以在转换作业的主对象树下的集群schemas文件夹下创建，也可

2、以在探索资源库的窗口下的集群下创建，配置如下图：通过选择子服务器功能选择此集群中的服务器其中需要有一个服务器作业主服务器。3. 配置作业与转换中的集群功能：将作业与转换中需要使用集群的控件右键在弹出菜单中选择集群，4. 配置完集群的控件显示如下：5. 启动集群：在各服务器中kettle安装路径下，打开cmd窗口，输入以下命令启动集群功能（windows下的命令）Carte.bat ip地址 端口号出现以下命令说明集群功能启动完成6. 启动带有集群的作业与转换：l 非资源库方式创建的作业与转换，只需要正常启动此作业与转换即可启动集群功能，l 使用资源库方式创建的作业与转换，启动带集群的作业与转换

3、前，需要在此集群包含的所有子服务器上的kettle上创建与此集群的资源库名称和配置都一致的资源库连接。7. 在主服务器上启动带集群的作业与转换，可以通过在子服务器或者集群schemas上右键选择监控功能查看此集群下运行的作业与转换的信息与状态 动态集群配置u 使用条件：子服务器可以动态改变并没有固定的数量，在带集群功能的作业转换运行过程中，如果子服务器连接断开，集群还可以继续运行直至成功。但是在作业与转换启动后，如果有新的子服务器连接创建，也不会加入到正在运行的集群中。u 配置方法：1. 在kettle安装路径下的pwd文件夹下包含以下xml文件：2. 在作为主服务器的kettle下编辑car

4、te-config-master-8080.xml3. 在作为子服务器的kettle下编辑carte-config-master-8080.xml，与主服务器的内容一致4. 在作为子服务器的kettle下编辑carte-config-8081.xml文件5. 在配置集群schemas中勾选动态集群，并且只选择主服务器即可6. 启动主服务器的集群功能，在主服务器的kettle安装路径下使用cmd输入以下命令Carte.bat pwd/carte-config-master-8080.xml出现以下命令说明集群功能启动成功7. 启动子服务器的集群功能，在子服务器的kettle安装路径下使用cmd输入以下命令Carte.bat pwd/carte-config-8081.xml出现以下命令说明集群功能启动成功8. 在主服务器的电脑中使用浏览器，输入http:/ip地址:8080