《apache+tomcat+mysql 负载平衡和集群》由会员分享,可在线阅读,更多相关《apache+tomcat+mysql 负载平衡和集群(9页珍藏版)》请在金锄头文库上搜索。
1、apache+tomcat+mysql 负负载载平平衡衡和和集集群群前言:公司开发了一个网站,估计最高在线人数是 3 万,并发人数最多 100 人。开发的网站是否能否承受这个压力,如何确保网站的负荷没有问题,经过研究决定如下:(1) 采用负载平衡和集群技术,初步机构采用 Apache+Tomcat 的机群技术。(2) 采用压力测试工具,测试压力。工具是 Loadrunner。硬件环境搭建:为了能够进行压力测试,需要搭建一个环境。刚开始时,测试在公司局域网内进行,但很快发现了一个问题,即一个脚本的压力测试结果每次都不一样,并且差别很大。原来是受公司网络的影响,于是决定搭建一个完全隔离的局域网测试
2、。搭建后的局域网配置如下:(1) 网络速度:100M(2) 三台服务器:负载服务器 :操作系统 windows2003,Tomcat 服务器:操作系统 windows2000 Professional数据库服务器:操作系统 windows2000 Professional三台机器的 cpu 2.4 G, 内存 1G。软件环境搭建:软件的版本如下:Apache 版本:2.054,Tomcat5.0.30,mysql :4.1.14.JDK1.5压力测试工具:Loadrunner7.8。负载平衡方案如下:一台机器(操作系统 2003)安装 apache,作为负载服务器,并安装 tomcat 作为一
3、个 worker;一个单独安装 tomcat,作为第二个 worker;剩下的一台单独作为数据库服务器。Apache 和 tomcat 的负载平衡采用 JK1.2.14(没有采用 2.0,主要是 2.0 不再维护了)。集群方案:采用 Tomcat 本身的集群方案。在 server.xml 配置。压力测试问题:压力测试后,发现了一些问题,现一一列出来:(1) 采用 Tocmat 集群后,速度变得很慢。因为集群后,要进行 session 复制,导致速度较慢。Tomcatd 的复制,目前不支持 application 复制。复制的作用,主要用来容错的,即一台机器有故障后,apache 可以把请求自动
4、转发到另外一个机器。在容错和速度的考虑上,我们最终选择速度,去掉 了Tomcat 集群。(2) 操作系统最大并发用户的限制:为了采用网站的压力,我们开始的时候,仅测试 Tomcat 的最大负载数。 Tomcat 服务器安装的操作系统是 windows2000 Professional。当我们用压力测试工具,并发测试时,发现只要超过 15 个并发用户,会经常出现无法连接服务器的情况。经过研究,发现是操作系统 的问题:windows2000 Professional 支持的并发访问用户有限,默认的好像是 15 个。于是我们把操作系统全部采用 windows2003 server 版本。(3) 数据
5、库连接池的问题:测 试数据库连接性能时,发现数据库连接速度很慢。每增加一些用户,连接性能就差了很多。我们采用的数据库连接池是 DBCP,默认的初始化为 50 个,应该不会 很慢吧。查询数据库的连接数,发现初始化,只初始化一个连接。并发增加一个用户时,程序就会重新创建一个连接,导致连接很慢。原因就在这里了。如何解决 呢?偶尔在 JDK1.4 下的 Tomcat5.0.30 下执行数据库连接压力测试,发现速度很快,程序创建数据库连接的速度也是很快的。看来JDK1.5 的 JDBC 驱动程序有问题。于是我们修改 JDK 的版本为 1.4.(4) C3P0 和 DBCPC3P0 是 Hibernate
6、3.0 默认的自带数据库连接池,DBCP 是 Apache 开发的数据库连接池。我们对这两种连接池进行压力测试对比,发现在并发 300 个用户以下时,DBCP 比 C3P0 平均时间快 1 秒左右。但在并发 400 个用户时,两者差不多。速度上虽然 DBCP 比 C3P0 快些,但是有 BUG:当 DBCP 建立的数据库连接,因为某种原因断掉后,DBCP 将不会再重新创建新的连接,导致必须重新启动Tomcat 才能解决问题。DBCP 的 BUG 使我们决定采用 C3P0 作为数据库连接池。调整后的方案:操作系统 Windows2003 server 版本JDK1.4Tomcat 5.0.30数
7、据库连接池 C3P0仅采用负载平衡,不采用集群。软件的配置:Apache 配置:主要配置 httpd.conf 和新增加的文件 workers.propertiesHttpd.conf:#一个连接的最大请求数量MaxKeepAliveRequests 10000#NT 环境,只能配置这个参数来提供性能#每个进程的线程数,最大 1920。NT 只启动父子两个进程,不能设置启动多个进程ThreadsPerChild 1900每个子进程能够处理的最大请求数MaxRequestsPerChild 10000# 加载 mod_jk#LoadModule jk_module modules/mod_jk.
8、so# 配置 mod_jk#JkWorkersFile conf/workers.propertiesJkLogFile logs/mod_jk.logJkLogLevel info#请求分发,对 jsp 文件,.do 等动态请求交由 tomcat 处理DocumentRoot “C:/Apache/htdocs”JkMount /*.jsp loadbalancerJkMount /*.do loadbalancerJkMount /servlet/* loadbalancer#关掉主机 Lookup,如果为 on,很影响性能,可以有 10 多秒钟的延迟。HostnameLookups Of
9、f#缓存配置LoadModule cache_module modules/mod_cache.soLoadModule disk_cache_module modules/mod_disk_cache.soLoadModule mem_cache_module modules/mod_mem_cache.soCacheForceCompletion 100CacheDefaultExpire 3600CacheMaxExpire 86400CacheLastModifiedFactor 0.1CacheEnable disk /CacheRoot c:/cacherootCacheSize
10、327680CacheDirLength 4CacheDirLevels 5CacheGcInterval 4CacheEnable mem /MCacheSize 8192MCacheMaxObjectCount 10000MCacheMinObjectSize 1MCacheMaxObjectSize 51200worker. Properties 文件# workers.properties ,可以参考http:/jakarta.apache.org/tomcat/connectors-doc/config/workers.html# In Unix, we use forward sl
11、ashes:ps=# list the workers by nameworker.list=tomcat1, tomcat2, loadbalancer# # First tomcat server# worker.tomcat1.port=8009worker.tomcat1.host=localhostworker.tomcat1.type=ajp13# Specify the size of the open connection cache.#worker.tomcat1.cachesize# Specifies the load balance factor when used w
12、ith# a load balancing worker.# Note:# - lbfactor must be 0# - Low lbfactor means less work done by the worker.worker.tomcat1.lbfactor=900# # Second tomcat server# worker.tomcat1.port=8009worker.tomcat1.host=202.88.8.101worker.tomcat1.type=ajp13# Specify the size of the open connection cache.#worker.
13、tomcat1.cachesize# Specifies the load balance factor when used with# a load balancing worker.# Note:# - lbfactor must be 0# - Low lbfactor means less work done by the worker.worker.tomcat1.lbfactor=2000# # Load Balancer worker# # The loadbalancer (type lb) worker performs weighted round-robin# load
14、balancing with sticky sessions.# Note:# - If a worker dies, the load balancer will check its state# once in a while. Until then all work is redirected to peer# worker.worker.loadbalancer.type=lbworker.loadbalancer.balanced_workers=tomcat1,tomcat2# END workers.properties#Tomcat1 配置:启动内存配置,开发 configur
15、e tomcat 程序即可配置:Initial memory pool: 200 MMaxinum memory pool:300MTomcat2 配置:配置和 tomcat1 差不多,需要改动的地方如下:启动内存配置,开发 configure tomcat 程序即可配置:Initial memory pool: 512 MMaxinum memory pool:768MMysql 配置:Server 类型:Dedicated MySQL Server MachineDatabase usage:Transational Database Only并发连接数量:Online Transacti
16、on Processing(OLTP)字符集:UTF8数据库连接池的配置:我们采用的是 spring 框架,配置如下:org.hibernate.dialect.MySQLDialectcom.mysql.jdbc.Driverjdbc:mysql:/202.88.1.103/dbsafalsefalsetrue2200512000501其他的没有额外配置。LoadRunner 常见问题:(1)sofeware caused connction:这种情况,一般是脚本有问题,或者 loadrunner 有问题。解决方法:重新启动机器,或者重新录制脚本,估计是loadrunner 的 bug。(2)cannot connect to server:无法连接到服务器。这种情况是服务器的配置有问题,服务器无法承受过多的并发连接了。需要优化服务器的配置,如操作系统采用 windows 2003 server,优化 tomcat 配置:maxThreads=”