apache+tomcat+mysql 负载平衡和集群

1、apache+tomcat+mysql 负载平衡和集群前言：公司开发了一个网站，估计最高在线人数是3万，并发人数最多100人。开发的网站是否能否承受这个压力，如何确保网站的负荷没有问题，经过研究决定如下：（1） 采用负载平衡和集群技术，初步机构采用Apache+Tomcat的机群技术。（2） 采用压力测试工具，测试压力。工具是Loadrunner。硬件环境搭建：为了能够进行压力测试，需要搭建一个环境。刚开始时，测试在公司局域网内进行，但很快发现了一个问题，即一个脚本的压力测试结果每次都不一样，并且差别很大。原来是受公司网络的影响，于是决定搭建一个完全隔离的局域网测试。搭建后的局域网配置如下：（

2、1） 网络速度：100M（2） 三台服务器：负载服务器 ：操作系统windows2003，Tomcat服务器：操作系统windows2000 Professional数据库服务器：操作系统windows2000 Professional三台机器的cpu 2.4 G, 内存 1G。软件环境搭建：软件的版本如下：Apache 版本：2.054，Tomcat,mysql ：4.1.14.JDK1.5压力测试工具：Loadrunner7.8。负载平衡方案如下：一台机器（操作系统2003）安装apache，作为负载服务器，并安装tomcat作为一个worker；一个单独安装tomcat，作为第二个wor

3、ker；剩下的一台单独作为数据库服务器。Apache和tomcat的负载平衡采用JK1.2.14（没有采用2.0，主要是2.0不再维护了）。集群方案：采用Tomcat本身的集群方案。在server.xml配置。压力测试问题：压力测试后，发现了一些问题，现一一列出来：（1） 采用Tocmat集群后，速度变得很慢。因为集群后，要进行session复制，导致速度较慢。Tomcat的复制，目前不支持application复制。复制的作用，主要用来容错的，即一台机器有故障后，apache可以把请求自动转发到另外一个机器。在容错和速度的考虑上，我们最终选择速度，去掉了Tomcat集群。（2） 操作系统&l

4、t;IfModule mod_disk_cache.c>CacheEnable disk /CacheRoot c:/cacherootCacheSize 327680CacheDirLength 4CacheDirLevels 5CacheGcInterval 4</IfModule><IfModule mod_mem_cache.c>CacheEnable mem /MCacheSize 8192MCacheMaxObjectCount 10000MCacheMinObjectSize 1MCacheMaxObjectSize 51200</IfModu

5、le></IfModule>worker. Properties文件# perties ，可以参考# In Unix, we use forward slashes:ps=# list the workers by nameworker.list=tomcat1, tomcat2, loadbalancer# # First tomcat server# worker.tomcat1.port=8009worker.tomcat1.host=localhostworker.tomcat1.type=ajp13# Specify the size of t

6、he open connection cache.#worker.tomcat1.cachesize# Specifies the load balance factor when used with# a load balancing worker.# Note:# -> lbfactor must be > 0# -> Low lbfactor means less work done by the worker.worker.tomcat1.lbfactor=900# # Second tomcat server# worker.tomcat1.port=8009wor

7、ker.tomcat1.host=01worker.tomcat1.type=ajp13# Specify the size of the open connection cache.#worker.tomcat1.cachesize# Specifies the load balance factor when used with# a load balancing worker.# Note:# -> lbfactor must be > 0# -> Low lbfactor means less work done by the worker.wor

8、ker.tomcat1.lbfactor=2000# # Load Balancer worker# # The loadbalancer (type lb) worker performs weighted round-robin# load balancing with sticky sessions.# Note:# -> If a worker dies, the load balancer will check its state# once in a while. Until then all work is redirected to peer# worker.worker

9、.loadbalancer.type=lbworker.loadbalancer.balanced_workers=tomcat1,tomcat2# END perties#Tomcat1配置:<!配置server.xml去掉8080端口，即注释掉如下代码：><Connectorport=”8080 maxThreads=”150 minSpareThreads=”25 maxSpareThreads=”75enableLookups=”false” redirectPort=”8443 acceptCount=”100debug=”0 cdisable

10、UploadTimeout=”true” /><!配置8009端口如下：><Connector port=”8009maxThreads=”500 minSpareThreads=”400 maxSpareThreads=”450enableLookups=”false” redirectPort=”8443 debug=”0protocol=”AJP/1.3 /><!配置引擎><Engine name=”Catalina” defaultHost=”localhost” debug=”0 jvmRoute=”tomcat1>启动内存配置,

11、开发configure tomcat程序即可配置：Initial memory pool: 200 MMaxinum memory pool:300MTomcat2配置：配置和tomcat1差不多，需要改动的地方如下：<!配置引擎><Engine name=”Catalina” defaultHost=”localhost” debug=”0 jvmRoute=”tomcat2>启动内存配置,开发configure tomcat程序即可配置：Initial memory pool: 512 MMaxinum memory pool:768MMysql配置：Server类

12、型：Dedicated MySQL Server MachineDatabase usage:Transational Database Only并发连接数量：Online Transaction Processing(OLTP)字符集：UTF8数据库连接池的配置：我们采用的是spring 框架，配置如下：<property name=”hibernateProperties”><props><prop key=”hibernate.dialect”>org.hibernate.dialect.MySQLDialect</prop><pro

13、p key=”hibernate.connection.driver_class”>com.mysql.jdbc.Driver</prop><prop key=”hibernate.connection.url”>jdbc:mysql:/03/db</prop><prop key=”hibernate.connection.username”>sa</prop><prop key=”hibernate.connection.password”></prop><prop key=”

14、hibernate.show_sql”>false</prop><prop key=”hibernate.use_sql_comments”>false</prop><prop key=”hibernate.cglib.use_reflection_optimizer”>true</prop><prop key=”hibernate.max_fetch_depth”>2</prop><prop key=”hibernate.c3p0.max_size”>200</prop><

15、prop key=”hibernate.c3p0.min_size”>5</prop><prop key=”hibernate.c3p0.timeout”>12000</prop><prop key=”hibernate.c3p0.max_statements”>50</prop><prop key=”hibernate.c3p0.acquire_increment”>1</prop></props></property>其他的没有额外配置。LoadRunner 常见问题：（1）s

16、ofeware caused connction：这种情况，一般是脚本有问题，或者loadrunner有问题。解决方法：重新启动机器，或者重新录制脚本，估计是loadrunner的bug。（2）cannot connect to server:无法连接到服务器。这种情况是服务器的配置有问题，服务器无法承受过多的并发连接了。需要优化服务器的配置，如操作系统采用windows 2003 server，优化tomcat配置：maxThreads=”500 minSpareThreads=”400 maxSpareThreads=”450。但是tomcat 最多支持500个并发访问优化apache配置

17、：ThreadsPerChild 1900MaxRequestsPerChild 10000其他的错误如：Action.c(10): Error -27791: Server has shut down the connection prematurelyHTTP Status-Code=503 (Service Temporarily Unavailable)一般都是由于服务器参数配置不够好引起的，按照问题（2）处理，如果仍旧不行，需要优化硬件和调整程序了。Apache问题：（1） File does not exist: C:/Apache/htdocs/favicon.ico：这个问题是

18、apache，htdocs目录没有favicon.ico文件引起的，该文件是网站的图标，仅在firefox,myIE等浏览器出现。（2） 图片无法显示：配置apache后，却无法显示图片。解决方法：把程序的图片，按照程序结构copy到apache的htdocs目录下。（3） 无法处理请求：当我们输入 *.do 命令后，apache确返回错误信息，而连接tomcat却没有问题。原因是没有把.do命令转发给tomcat处理。解决方法如下：在apache配置文件中配置如下内容：DocumentRoot “C:/Apache/htdocs”JkMount /*.jsp loadbalancerJkMount /*.do loadbalancer总结：网站的压力测试，涉及的知识面挺广的，不仅要熟悉压力测试工具，还要知道如何配置和优化应用服务器和数据库，并且需