交流经验,享受测试乐趣!!!

网站的压力测试

上一篇 / 下一篇  2008-07-03 10:26:32 / 个人分类:LoadRunner

51Testing软件测试网'Q:tt9JN6s0Kv

转载51Testing软件测试网RhS2w9d/@1@w

*Qw1ie\y0网上关于Apache + JK + Tomcat的集群配置例子很多,按着例子配置下来,基本都能运行,不过,在一些重要的地方却没有进一步的说明。这次公司一个产品就是采用Apache+JK+Tomcat集群,在整个配置、测试过程中,遇到了许多的问题,经过不断测试、摸索,最后总算是搞定了,性能也达到了预期的目标。针对网上的例子,感觉有必要再详细的介绍一下我的配置过程,对一些要特别注意的地方进行补充。
,f:|%p~$K7c q7w.wGja0
#H&M9uI LF2kp0集群有别于分布式的解决方案,它采用的是每台服务器运行相同应用的策略,由负责平衡的服务器进行分流,这对提高整个系统的并发量及吞吐量是更有效的办法。而集群对请求的处理又有两种不同的方式:负载平衡、状态复制(即集群),状态复制需要在各服务器间复制应用状态,而负载平衡则不用,每台服务器都是独立的。实践证明,在各应用服务器之间不需要状态复制的情况下,负载平衡可以达到性能的线性增长及更高的并发需求。51Testing软件测试网 p%pl w f s%s7C9Z
51Testing软件测试网4vhy\ ? J [+P
对于集群的其它基础知识,在此就不再做累赘。以下就这次Apache + JK + Tomcat的负载平衡配置进行总结,重点关注整个配置及注意事项。
Z;M:X6Vk)Gc0
6}1z&`oL,AN:Wn,p0准备软件51Testing软件测试网#}Kh8Njc*J7m2@QD
1、  Tomcat或JBoss(本文档中采用的是JBoss4.0.2);
*k.^d'c0V2eh0
c"BckJt&X9_]02、  apache2.0.54是开源的Web服务器,下载地址为:http://www.apache.org/dist/httpd/binaries/51Testing软件测试网#E!xS"R R
51Testing软件测试网 UcH:O\9qI
3、  mod_jk-1.2.14-apache-2.0.54.so模块,jk是mod_jserv的替代者,它是Tomcat-Apache插件,为Apache和Tomcat的连接器,处理Tomcat和Apache之间的通信,在集群配置中充当负载均衡器的作用,当前的最新版本为1.2.15,不过不同JK版本与不同的Apache版本之间的搭配有一些差异,有的甚至配不起来。JK2是符合apache2.x系列的新品,但由于其配置太过麻烦,使用的人很少,所以目前已停止开发,所以我们采用了jk连接器,下载地址:http://www.apache.org/dist/tomcat/tomcat-connectors/jk/binaries/
xv {`*l8p0
)r*c`?!@R G!W&J E0集群与负载平衡
Itjn-zV(r H0使用mod_jk默认的以轮循方式进行平衡负载,假设有四个服务器节点,有10个请求,则四个节点分别接受请求编号如下:
-s k1_'@2l0
(dL A6d2@'d*g!NLD0                                                                      节点1  节点2  节点3  节点4
v3b^ [.tA051Testing软件测试网(B"[Ny8j EB
                                                                           1         2          3         4
#]!V Al7J `#z{S0  
-Wgw([ a ZQI0                                                                           5         6          7         8
dA:oXP'tl \+\0
"|5IF#Yq8B3{?9E0b0                                                                           9        10
&G6A2rH-l7N1?$Z7b0
U6\S![9h0而集群方式也是使用这种方法进行平衡。Tomcat中的集群原理是通过组播的方式进行节点的查找并使用TCP连接进行会话的复制。51Testing软件测试网H4AL6C4v m7exo9y

R,L-] w c/S7`bo0    集群不同于负载平衡的是,由于集群服务需要在处理请求之间不断地进行会话复制,复制后的会话将会慢慢变得庞大,因此它的资源占用率是非常高的,如果在并发量大的应用中,复制的会话大小会变得相当大,而使用的总内存更是会迅速升高。51Testing软件测试网1`"j jLl i

t;~B;L*^6rM8D3pa0    但集群的会话复制,增加了系统的高可用性。由于在每台服务器都保存有用户的Session信息,如果服务器群中某台当机,应用可以自动切换到其它服务器上继续运行,而用户的信息不会丢失,这提高了应用的冗错性。51Testing软件测试网7k)_$MTQ p9F.H
51Testing软件测试网&B5RaG${&XIO
具体采用负载平衡还是集群,这要看应用的需求了。51Testing软件测试网@*zE VF
51Testing软件测试网:p(K7n.j ]a
安装配置Apache
]z;`~n6x-g01、下载Apache的安装程序apache_2.0.54-win32-x86-no_ssl.exe后,安装很简单,一路回车,就此略过。51Testing软件测试网XVYdje7y.^

-O|V'cs02、安装完毕后,将下载的mod_jk-1.2.14-apache-2.0.54.so复制到Apache安装目录下的modules子目录中。
]o S)]*Y:B a/]#h)Qfy051Testing软件测试网,mPf/f4FQd-j6b
3、然后进入Apache安装目录下的conf子目录中,打开httpd.conf配置文件,在最后插入以下一行:51Testing软件测试网| { _NW

},a4dxYB)}0Include conf/mod_jk.conf
:N ^.AuT ^s9O051Testing软件测试网 E5io\D,E
4、  在conf子目录下,建立一个新的配置文件:mod_jk.conf,此文件为Apache加载连接器的配置文件,文件名可修改,但要与httpd.conf中Include的文件名一致,内容如下:51Testing软件测试网N}nP/R

&US zt-s0# Load mod_jk module. Specify the filename
`-|nsYG[~i0
rFUX[ PRb0# of the mod_jk lib you’ve downloaded and51Testing软件测试网MWE4oO7K
51Testing软件测试网#OI,Y-gP$V5mAA L
# installed in the previous section
~(rFI$O#]'\.L051Testing软件测试网;n^6]'sQ%R
#加载mod_jk模块
9be3k^)mi,~9q0
xEcpL}:oA0LoadModule jk_module modules/mod_jk-1.2.14-apache-2.0.54.so
.Ggg+K fM0
s O0O ].|lp0# Where to find workers.properties
gr.p/A:GDQ051Testing软件测试网9Z(ok"PN3DS1L
JkWorkersFile conf/workers2.properties
7y;JZ#P+N0
_f*{_c V%A0# Where to put jk logs
gj+dSYs2dE#x Zm051Testing软件测试网$Jc"x_7]IQ~*c-M
JkLogFile logs/mod_jk.log51Testing软件测试网"?C\W8y8v_p6h g
51Testing软件测试网\ X2Czy`.C-r
# Set the jk log level [debug/error/info]
#Y6m I;lQ5q-V051Testing软件测试网'[&O)\mQ d#P9Rn Pi'a
JkLogLevel info51Testing软件测试网]#Bc-q7@Ypt6b

6dGF2Z$@#Te&J0# Select the log format51Testing软件测试网rv.`)?!K
51Testing软件测试网w5["o wt![%N9x)P-n
JkLogStampFormat "[%a %b %d %H:%M:%S %Y] "51Testing软件测试网ct2hUsT _

%e] mO}5iEq L0# JkOptions indicate to send SSL KEY SIZE,
} Yq6JQm051Testing软件测试网"^a0g!O4z#B]
JkOptions +ForwardKeySize +ForwardURICompat -ForwardDirectories51Testing软件测试网(O}WQ FY

5~ee9h1w+V(w#n0# JkRequestLogFormat set the request format51Testing软件测试网3B/mT)mA Y_$k'~

2[5UR? g0JkRequestLogFormat "%w %V %T"
#F3Bs? v0
~rvZ;| }/tw0# 请求分发配置,可以配置多项
Q$_:[u7^r.H9q0
mV%Al_&j$H6S6o0JkMount /* loadbalancer
` {8v7?N$la!M051Testing软件测试网3gt xP!XB }#g
51Testing软件测试网'qilT;[ xG
#关掉主机Lookup,如果为on,很影响性能,可以有10多秒钟的延迟。
R bC8}6q3Jz,W-{0HostnameLookups Off51Testing软件测试网'xa(`z'd*c@+L7gu
51Testing软件测试网S`|N3ly[*]P v
注:蓝色加粗的两行是重点,第一句是Apache加载JK模块用的;第二句为配置哪些URL请求将由负载平衡器来处理。51Testing软件测试网"B)csC8w uo;ZwL
51Testing软件测试网:w8[4v'K3w$?up
5、  在conf子目录下,建立一个新的配置文件:workers2.properties,此文件为负载平衡的配置文件,文件名不能修改,这是JK默认的名字,内容如下:
y+q"Y7}vC\*m5{-e051Testing软件测试网Z7?I'V;nb
worker.list=loadbalancer51Testing软件测试网 id8C Og~ hk,g

o4\2~^T:v\0# Define the first node...51Testing软件测试网h[ wvuQ6E
51Testing软件测试网tH5Ll3D
worker.server99.port=800951Testing软件测试网 R#t}m[0A o Q Z\

aD,HU!o$oB0worker.server99.host=192.168.11.99
/L;D'p}*cH^0
[lw{6pL r/A0worker.server99.type=ajp1351Testing软件测试网3u9mU:jn!T MQ)S`
51Testing软件测试网&u0Q!Y#[ {rH'Ms
worker.server99.lbfactor=151Testing软件测试网7xpFm6|0` F E
51Testing软件测试网w-XIQSC%G!Dpi p
worker.server99.local_worker=1
2jy+RKbXf-]0
R|1jTFX0worker.server99.cachesize=1000
b:\ SBoSN&i051Testing软件测试网8S)^js'o4?
worker.server99.cache_timeout=60051Testing软件测试网dBs}/O2JEg
51Testing软件测试网 oYksa9wl
worker.server99.socket_keepalive=1
W^4s2?Zoh2pG w[0
UZ-P#AlKN _2r0worker.server99.socket_timeout=0
xo].i,WaG9kE0
ys KN2p g|){/Z0worker.server99.reclycle_timeout=300
;vUtzc1fD#zlF'o T051Testing软件测试网^L` JeL
worker.server99.retries=351Testing软件测试网uBWf1K Q/yE*u2l
51Testing软件测试网RUy.h&m;L
# Define the second node...
dbs5H;{(W1x0
YF tq0jH*h*p0worker.server202.port=800951Testing软件测试网JSz)sO)xO[Y#]

4{y"S(@OngI0worker.server202.host=192.168.11.20251Testing软件测试网CrHSN`
51Testing软件测试网1zc+v!{;_,D5} u"h
worker.server202.type=ajp13
G~6@Vds1Zb$ae7b051Testing软件测试网0ACc%a0@*oD ~
worker.server202.lbfactor=151Testing软件测试网-kQ?1Ws:b+j
51Testing软件测试网Gh)@!SI@c[)Q
worker.server202.local_worker=1
+\_.iu4jr&Q2b051Testing软件测试网f%P Dje.Ke|?+@
worker.server202.cachesize=1000
Xm&qW7P051Testing软件测试网/b4P o }j_$p
worker.server202.cache_timeout=60051Testing软件测试网$h3Tl e0tj3B$m!Cz

4~d0VCa4_]0worker.server202.socket_keepalive=1
\h5R8AuCn7z*L(s;k0
Y,vWFW"R0worker.server202.socket_timeout=0
!ukFQ/{ n]8\T051Testing软件测试网I&CSAWn |2{
worker.server202.reclycle_timeout=30051Testing软件测试网5?4nF2`i,g
51Testing软件测试网.l7q`D \2MoZy1jl
worker.server202.retries=351Testing软件测试网*\i4FCGxB1D/z
51Testing软件测试网0KI(U:t`
# Now we define the load-balancing behaviour51Testing软件测试网D"rD~F+Z%eHs

fev A_wY0worker.loadbalancer.type=lb51Testing软件测试网f5R%H-uaLG

Ke"O"f5K#S0worker.retries=3
#zg6p"bFc051Testing软件测试网#W9Ge E Hpi
worker.loadbalancer.balance_workers=server99 ,server20251Testing软件测试网zWU NV Ic
51Testing软件测试网)Z P ]]0L5r;v
worker.loadbalancer.sticky_session=true
Y K&]4b!t{0
'{:zR(lB0worker.loadbalancer.sticky_session_force=true

|W0[sF ]N#xp051Testing软件测试网5F ~a;\"llq
注:以上定义了两个worker,一个为server99,另一个为server202,定义了一个负载平衡服务器loadbalancer,其中标蓝色的为重点配置项,相关的详细说明可以看官方的网站文档:http://tomcat.apache.org/connectors-doc/,其它节点的定义可以直接Copy,修改一下节点名及IP就好了。51Testing软件测试网H1p v]U0K
A、worker.list=loadbalancer
6ixj2h2n0
Y&fQ(i:S Eg$~0设定工作的负载平衡器,各Tomcat节点不能加入此列表。51Testing软件测试网;N e f+ql
51Testing软件测试网?8C7s4g$bD,w
B、worker.server99.lbfactor
_4N3U/rR/\7@,y#O0
4B]Io kl0负载平衡的权重比,如果此权重比越大,则分配到此节点的请求越多,如以上两个节点的权重比为1:1,则为平均分配。
c3y3Cr y-F|+T{051Testing软件测试网Xl-DLJ.[K+QU;b
C、worker.loadbalancer.balance_workers=server99,server20251Testing软件测试网]{!D*yjy+FTw2i,P
51Testing软件测试网#f-E6L@s Qi&U
   指定此负载平衡器负责的Tomcat应用节点。
h3hhj0\.X;^0
+]8mR Gr Dd8@-F ~0D、worker.loadbalancer.sticky_session=true51Testing软件测试网q7D"Z S(EZX7b

`.qF6b+Aj0   此处指定集群是否需要会话复制,如果设为true,则表明为会话粘性,不进行会话复制,当某用户的请求第一次分发到哪台Tomcat后,后继的请求会一直分发到此Tomcat服务器上处理;如果设为false,则表明需求会话复制。
SD.JNV!\d|Z0
y ^7T)f;qp0E、worker.loadbalancer.sticky_session_force=true
!X%B;|.g"dj,OA&[0
o'D#Soz S0   如果上面的sticky_session设为true时,建议此处也设为true,此参数表明如果集群中某台Tomcat服务器在多次请求没有响应后,是否将当前的请求,转发到其它Tomcat服务器上处理;此参数在sticky_session=true时,影响比较大,会导致转发到其它Tomcat服务器上的请求,找不到原来的session,所以如果此时请求中有读取session中某些信息的话,就会导致应用的null异常。
Y2_9Z;RM`M lM e5\051Testing软件测试网M(}-{dyC
6、Apache服务器的配置文件httpd.conf中,默认有三个参数对性能的影响比较大,但根据不同的性能要求,参数的表现又不一样,太小并发提不上去,太大性能反而不好,建议根据项目的需要,实际做个测试,如并发要求800的话,可以设定为:51Testing软件测试网t ehX n,k5b(]

2?+Ae/d6c7N^0#一个连接的最大请求数量51Testing软件测试网,XU;]%oPN1sB2D?

Jz(I M*_'g @@0MaxKeepAliveRequests 1000(值为0,则不限制数量)51Testing软件测试网!F~9Si9GHh
51Testing软件测试网4j7_*N:a T;bdM
#每个进程的线程数,最大1920。NT只启动父子两个进程,不能设置启动多个进程51Testing软件测试网'X Nd C6p|6\8w

"B2\#g:m ^y Y}-i|0ThreadsPerChild    1000(最大为1920)
G2h:W/A'D7Z uy051Testing软件测试网R|Q R,F,`M
#每个子进程能够处理的最大请求数
4[w^s)l\p0
5}1]8D5T+B)F3@*j$|0MaxRequestsPerChild   1000(值为0,则不限制数量)51Testing软件测试网d*Oq@8W"p[F$dS8e

A4H#D$d*f:ixzzT*u V0这三个参数要根据不同的需求,不同的服务器进行调整。51Testing软件测试网\[+@.yS4e?

Z*P2t_%K!_#y0安装配置Tomcat或JBoss51Testing软件测试网jq"I&aL
1、对于Tomcat或JBoss的安装,这里不做说明,目前我们是采用Apache+JBoss,不过,JBoss也是用的Tomcat,所以这里的配置也是适合Tomcat的;
C)H5W3T3V0f[0
7W)BX't jF7VQ02、对于JBoss的配置,很简单,只需要改两个地方就可以了:
RW6o$HMm2]6SS0
T#i1rds~0第一个地方:进入jboss-4.0.2\server\default\deploy\jbossweb-tomcat55.sar,打开server.xml,大约在第32行左右,有,在其中加入一个参数,变为:51Testing软件测试网K|a)z Q)H o2?~
51Testing软件测试网USb)s_2X&o b
Engine name="jboss.web" defaultHost="localhost">
DQlJHgSk051Testing软件测试网D/v~+hR
给它增加一个jvmRoute属性:51Testing软件测试网{r+|-lUl C5n&O
51Testing软件测试网 x\ LQ3z0z\
<Engine jvmRoute="server1" name="jboss.web" defaultHost="localhost">
u4y&qBHz5w+n0请注意,jvmRoute的值必须和mod_jk中的节点名字正确对应,否则无法正确路由。Cluster中的所有节点都应该做相应的配置。51Testing软件测试网['Pf$D Fo

\^8CE0~t:o0Y0Jboss的配置完成了,下面需要在你的web应用中修改配置文件,让它支持集群。51Testing软件测试网2^P~v'NX4e

1O/X8Tx;R"Qq5_0在WEB-INF\web.xml中加入属性:    <distributable/>
Xb-xrW;Pa051Testing软件测试网/`#v KP;R
Ok,基于用户的cluster完成了,每个用户会绑定都某个节点上进行交互。这种绑定是如何完成的呢?原来apache把客户分发到节点后,该节点会在用户的session id后面加上此节点的路由名称,变成这个样子:51Testing软件测试网Ql ?1Q t X'z J

C h3WH-})W ep;g/w0Efdfxxd98daja87daj76da2dka**,server1
,RNT*e:t`0
,e*J'c+h@ wFa6Y/W}0    有了这个标志,就能分辨该session属于哪个节点。
/^w_6W+o5]f;p4? k051Testing软件测试网"G7ux4U3L#n&q ^
第二个地方:进入jboss-4.0.2\server\default\deploy\jbossweb-tomcat55.sar\META-INF目录,打开jboss-service.xml,大约在110行,有false,将其改为:true51Testing软件测试网-i8aE4I'H
51Testing软件测试网Ri2DF6]#i&c2k
这里有一个需要特别注意的地方,JBoss的Tomcat中,关于AJP连接协议的默认配置,对于大并发量是不够用的,要做一些修改,进入jboss-4.0.2\server\default\deploy\jbossweb-tomcat55.sar,打开server.xml,找到的地方,这里是定义AJP连接器的地方,它的配置中没有maxThreads项,默认为200,我们可以做修改:
F,z,M#j%X2]*X&B@8{051Testing软件测试网3m1[;tq+J(~ X^ k
         emptySessionPath="true" enableLookups="false" redirectPort="8443"
fb:@.TQ.]0
,XPn0@4j'Ki0         protocol="AJP/1.3" maxThreads="3000"/>51Testing软件测试网y\+g%y$|Xd/LW

gtA0s&fO&I6k0maxThreads的值要看你的并发量多大,设置太大也不好。
ai'tn.Jx0
,_ HV&m*\,p0运行至此,整个配置全部完成,注意一点是,在各JBoss节点,重启或新增加一个JBoss节点时,需要重新启动Apache,而对于服务器群中某个JBoss节点shutdown,Apache会自动侦测,不用重新启动。
1E Y vmJ Ceb0
rx/i0Cc3e"c2Q0如果在运行过程中,群中的某个JBoss节点shutdown,则已登录到此服务器上的用户的请求将出错,此服务器负责的session将丢失,但Apache会自动侦测到此服务器已shutdown,后继的新请求将不会再引导到此节点。
5B4y,B mg|,m)i F0
X!h@{b0对于负责请求分发的Apache服务器,需要消耗大量的CPU资源,因此如果在测试过程中出现一些Service Temporarily Unavailable或Server  has shut down the connection prematurely这样的错误,这一般都是服务器配置不够好引起的,或者是Apache、Tomcat、及应用中的某些配置不够使用,这时候就要考虑换更好的机器或优化应用中的配置。
0}d N[$t{(z/C051Testing软件测试网$eA0Eo7W5d\e
51Testing软件测试网 YhH3{ @,G1UHp
常见问题51Testing软件测试网5E#@w M1G:AQ]J
51Testing软件测试网"Y'tu2Z/E
一、cannot connect to server:无法连接到服务器。这种情况是服务器的配置有问题,服务器无法承受过多的并发连接了,需要优化服务器的配置:51Testing软件测试网byGIQi _

,j I ZO!O~L&wX0操作系统采用更高版本,如windows 2003 server,
m1o@j_"P'oX051Testing软件测试网5z7`g#dQ!q,~s
优化tomcat配置:maxThreads="500" minSpareThreads="400" maxSpareThreads="450"
s5o-M!N2OV0
L7@Cp'D-gVt%e0但是tomcat 最多支持500个并发访问51Testing软件测试网dAM'[9ZM:d

vXQ?7g0优化apache配置:
EFu$BE ]0
!w/X yK`:st2`*S{0ThreadsPerChild 190051Testing软件测试网~TN-E,LY:F:]k

q'\1Z:{^0MaxRequestsPerChild  10000
U^-nx)[G)R0
#[r4T ]S0二、 Action.c(10): Error -27791: Server  has shut down the connection prematurely51Testing软件测试网(a0a:yc1@1i@
51Testing软件测试网 ?v.hiFb#n
HTTP Status-Code=503 (Service Temporarily Unavailable)
CBu5WV0一般都是由于服务器配置不够好引起的,需要优化硬件和调整程序了。
7kl IN"Rk*n0
&@ pI;|Ma @0三、无法处理请求:
F lB7i)h2rY.W-s051Testing软件测试网OFU T_No+It eL
当我们输入 ***.do 命令后,apache却返回错误信息,而连接tomcat却没有问题。原因是没有把.do命令转发给tomcat处理。解决方法如下:51Testing软件测试网2]DvZU
51Testing软件测试网tf%R!L M*M*Z/j
在apache配置文件中配置如下内容:51Testing软件测试网I}r5u5S
51Testing软件测试网9da?4IX_R w
JkMount /*.jsp loadbalancer51Testing软件测试网,K z.MlS/_6@

,\#y m*L9F&Bg"w:A'q0JkMount /*.do loadbalancer

0r:Bz6jEP051Testing软件测试网J3_7w e%C

B{Mrd5J0

8W4r7Z Wes O0估计最高在线人数是3万,并发人数最多100人。开发的网站是否能否承受这个压力,如何确保网站的负荷没有问题,经过研究决定如下:51Testing软件测试网Z*{!| {?o,G
(1) 采用负载平衡和集群技术,初步机构采用Apache+Tomcat的机群技术。
h3}6vjb~ ~{0(2) 采用压力测试工具,测试压力。工具是Loadrunner
?2dEZ9[8V+@ V4{Z0硬件环境搭建:51Testing软件测试网p;zSdX C]
为了能够进行压力测试,需要搭建一个环境。刚开始时,测试在公司局域网内进行,但很快发现了一个问题,即一个脚本的压力测试结果每次都不一样,并且差别很大。原来是受公司网络的影响,于是决定搭建一个完全隔离的局域网测试。搭建后的局域网配置如下:
\$is T0b'P:I0(1) 网络速度:100M
mK&M"[8d_y0B0(2) 三台服务器:51Testing软件测试网3IZD6[*j8Wd
负载服务器 :操作系统windows2003,51Testing软件测试网'f;D;DR T\7D!]i#Y M
Tomcat服务器:操作系统windows2000 Professional51Testing软件测试网2s#y"o!t-TVHe
数据库服务器:操作系统windows2000 Professional51Testing软件测试网 c Z]T~*L$n5kA
三台机器的cpu 2.4 G, 内存 1G。51Testing软件测试网 f-Y\&gU\;I#x
软件环境搭建:51Testing软件测试网*Q Zm7m/q8O!T8O}a2?v-U
软件的版本如下:
? gT;aX J0Apache 版本:2.054,51Testing软件测试网 K#j6W~ [-P
Tomcat5.0.30,51Testing软件测试网8\fXK#DO%B%E
mysql :4.1.14.51Testing软件测试网AI l E|Ji1E
JDK1.551Testing软件测试网+}r:gpD|%l#s
压力测试工具:Loadrunner7.8。51Testing软件测试网^C3Ce#H
51Testing软件测试网_ C\2o0El.r` C
负载平衡方案如下:
k Hr@;t/h+@0一台机器(操作系统2003)安装apache,作为负载服务器,并安装tomcat作为一个worker;一个单独安装tomcat,作为第二个worker;剩下的一台单独作为数据库服务器。
"l6DI e]\[P;Z:D+k0Apache和tomcat的负载平衡采用JK1.2.14(没有采用2.0,主要是2.0不再维护了)。51Testing软件测试网@3k4{f;br a
集群方案:
+U"mX4w*Z2@0采用Tomcat本身的集群方案。在server.xml配置。51Testing软件测试网9] g*s @3P!S
压力测试问题:
8s7m a%Ho:Z3Q0压力测试后,发现了一些问题,现一一列出来:51Testing软件测试网teb3Np ~ B+A^
(1) 采用Tocmat集群后,速度变得很慢。因为集群后,要进行session复制,导致速度较慢。Tomcatd的复制,目前不支持application复制。复制的作用,主要用来容错的,即一台机器有故障后,apache可以把请求自动转发到另外一个机器。在容错和速度的考虑上,我们最终选择速度,去掉了Tomcat集群。
?j y;K2VF M0(2) 操作系统最大并发用户的限制:
T[ U.c,uL0为了采用网站的压力,我们开始的时候,仅测试Tomcat的最大负载数。Tomcat服务器安装的操作系统是windows2000 Professional。当我们用压力测试工具,并发测试时,发现只要超过15个并发用户,会经常出现无法连接服务器的情况。经过研究,发现是操作系统的问题:windows2000 Professional 支持的并发访问用户有限,默认的好像是15个。于是我们把操作系统全部采用windows2003 server版本。
H I2XPG)IHg0(3) 数据库连接池的问题:51Testing软件测试网St2j\:N%N Er,S
测试数据库连接性能时,发现数据库连接速度很慢。每增加一些用户,连接性能就差了很多。我们采用的数据库连接池是DBCP,默认的初始化为50个,应该不会很慢吧。查询数据库的连接数,发现初始化,只初始化一个连接。并发增加一个用户时,程序就会重新创建一个连接,导致连接很慢。原因就在这里了。如何解决呢?偶尔在JDK1.4下的Tomcat5.0.30下执行数据库连接压力测试,发现速度很快,程序创建数据库连接的速度也是很快的。看来JDK1.5的JDBC驱动程序有问题。于是我们修改 JDK的版本为1.4.
N(|{+k p,i}6g051Testing软件测试网tP7F9?4h7y-{
(4) C3P0和DBCP51Testing软件测试网dC%@]:HI4H
C3P0是Hibernate3.0默认的自带数据库连接池,DBCP是Apache开发的数据库连接池。我们对这两种连接池进行压力测试对比,发现在并发300个用户以下时,DBCP比C3P0平均时间快1秒左右。但在并发400个用户时,两者差不多。51Testing软件测试网Gf"JLNx2_

y4GQK X4lB,L0速度上虽然DBCP比C3P0快些,但是有BUG:当DBCP建立的数据库连接,因为某种原因断掉后,DBCP将不会再重新创建新的连接,导致必须重新启动Tomcat才能解决问题。DBCP的BUG使我们决定采用C3P0作为数据库连接池。
_ E4];xb6s8Y0调整后的方案:
6l gux-y1b0操作系统Windows2003 server版本51Testing软件测试网;t"X(i3D-a,I*^
JDK1.4
1a*w5\a |t H2\M0Tomcat 5.0.3051Testing软件测试网 em9P/ma{s:r1Z
数据库连接池C3P051Testing软件测试网?&F0IZ)h4h#z
仅采用负载平衡,不采用集群。51Testing软件测试网!M{ c'PR!`F@R
软件的配置:51Testing软件测试网8F)~$_7UHV
Apache配置:主要配置httpd.conf和新增加的文件workers.properties51Testing软件测试网 s _Z+Xjt3By$F b(t
Httpd.conf:51Testing软件测试网 vlG9^d#^
#一个连接的最大请求数量
f"@FU6Y3d9[ }B:k0MaxKeepAliveRequests 1000051Testing软件测试网?$ok'dq j|2s
#NT环境,只能配置这个参数来提供性能
Z/ecG_'m5C7Z0
qTch'HzVC0#每个进程的线程数,最大1920。NT只启动父子两个进程,不能设置启动多个进程51Testing软件测试网+I'Ag \!A1L6QU2Q2T }.s
ThreadsPerChild 1900
U{Zw2A1B*s+r0每个子进程能够处理的最大请求数51Testing软件测试网+o5A7S1n}"W@k d8o
MaxRequestsPerChild 1000051Testing软件测试网 VWV*k*h [&O
51Testing软件测试网7N*D'p Z;Sk
51Testing软件测试网1~ pz(h @
# 加载mod_jk51Testing软件测试网c j&t,S^/K;n
#
+A/BO%?iER M!B0LoadModule jk_module modules/mod_jk.so
I r r!Q {BDF6Y0#51Testing软件测试网 `,?jNJ*nvq
# 配置mod_jk
n6j%fYp0\-l8E:F+~8w:r0#51Testing软件测试网\e9@w#{rg@-xA a\
JkWorkersFile conf/workers.properties
3i'Qn&l(e|8M"@e0JkLogFile logs/mod_jk.log
$he5oEy'H7x0n}6A5o*U0JkLogLevel info
+N.U)t+wyv0#请求分发,对jsp文件,.do等动态请求交由tomcat处理
wNZ6NCUf)T{E0DocumentRoot \"C:/Apache/htdocs\"
{r'f-`5G@u0JkMount /*.jsp loadbalancer
4FM/e q"I-T0JkMount /*.do loadbalancer
AM.dEG mv5j]0JkMount /servlet/* loadbalancer
zs4A Ic F0#关掉主机Lookup,如果为on,很影响性能,可以有10多秒钟的延迟。
Q,mt?M#U0HostnameLookups Off
F E|p?4e5{Y0#缓存配置51Testing软件测试网"hJ;c1|LU:n+E
LoadModule cache_module modules/mod_cache.so
MVy,B.cA.@0LoadModule disk_cache_module modules/mod_disk_cache.so
,L IL-c2L$f0LoadModule mem_cache_module modules/mod_mem_cache.so
#v6G0o0Y8A,`%e051Testing软件测试网']F~Tc%AM#K

ow\0b8a/t(M:q;a%w0CacheForceCompletion 10051Testing软件测试网bub^/LP
CacheDefaultExpire 3600
5_L*R9I-W)ej0CacheMaxExpire 86400
9gkP8]J5\FW0CacheLastModifiedFactor 0.1
bgiQ+B-x"A k$]0
9u ojS0e0
"n0V[W'{%n4i4{0CacheEnable disk /51Testing软件测试网Da,?+J C8PaP? L5i
CacheRoot c:/cacheroot51Testing软件测试网6x t7M+}%@i
CacheSize 32768051Testing软件测试网aP-UaWJ
CacheDirLength 451Testing软件测试网tP1N JF6j}+?
CacheDirLevels 551Testing软件测试网9N x,`O#Vhs T
CacheGcInterval 4
G2qQA UIb051Testing软件测试网*s2v IQZ;D
51Testing软件测试网 ue1S+m+V^
CacheEnable mem /51Testing软件测试网+X}c8wt;\%r5N ^
MCacheSize 8192
/dNx#ii v8Fk9u)k0MCacheMaxObjectCount 1000051Testing软件测试网Zq%m4h*}
MCacheMinObjectSize 151Testing软件测试网4e`"z%F'U|
MCacheMaxObjectSize 51200
u^:zs u&f051Testing软件测试网$x*B1bp(R&aZ1o1y
51Testing软件测试网_t{x? ^%P |*x%a
worker. Properties文件
SM2|.x8t0#
)e PY G7YL#D+u&Qj0# workers.properties ,可以参考51Testing软件测试网 d$a+jL8_AD_e
http://jakarta.apache.org/tomcat/connectors-doc/config/workers.html51Testing软件测试网1hE5MfD Ja
# In Unix, we use forward slashes:
g,n/L(ozY[0ps=
+_B'N$z5`$?OL[0
+Lma3k+g0# list the workers by name
4?F,AJRc051Testing软件测试网3oN9XP4QCJd
worker.list=tomcat1, tomcat2, loadbalancer
7nQ;[ ~${P*?+]G"k0
!W W5c a1E ^Lb0# ------------------------51Testing软件测试网RuO#p/UB
# First tomcat server51Testing软件测试网1x_s wG*c2Cf3e4R
# ------------------------
(]}$W$k:Tg&|0worker.tomcat1.port=8009
T)L G!F-gbtmBN0worker.tomcat1.host=localhost51Testing软件测试网\4[.@f(pYlc
worker.tomcat1.type=ajp13
K2xd]-O(K1d0
_ R*o4o` U;tD0# Specify the size of the open connection cache.
"@v&Ih:I0#worker.tomcat1.cachesize51Testing软件测试网5Fg+F(D5g Vu1H8J
51Testing软件测试网#@!QB8B1FD+~5d l
#51Testing软件测试网Dd$ApL#x4P8x
# Specifies the load balance factor when used with
e0N*Tm/\"La0# a load balancing worker.
p6SpE5dhR-M:W0# Note:
:|,JJ R$\rU5{5t-Q0# ----> lbfactor must be > 0
x'n%Re1dn4\b_0# ----> Low lbfactor means less work done by the worker.51Testing软件测试网*Io%PDs;K2N7[Q4h
worker.tomcat1.lbfactor=90051Testing软件测试网OsKX D.H?O
51Testing软件测试网l1|$J5M#e%k_
# ------------------------
}]0@!y"O#d%Oz0# Second tomcat server51Testing软件测试网ZTZ[9\7j"p~&kc7J$p
# ------------------------51Testing软件测试网4Y b0Y4f;lt p
worker.tomcat1.port=8009
(B#Fu6L$?0worker.tomcat1.host=202.88.8.101
5])Y"DA)vhd,Oi2z0worker.tomcat1.type=ajp13
^ `6b7B#D b3V b0
!x-G)I6xO*{ rq0# Specify the size of the open connection cache.
Q(E,s7B E-t FN0#worker.tomcat1.cachesize
'k_)jZlMV&q051Testing软件测试网3Xh&VXF]q
#51Testing软件测试网R{^6^ Y%J
# Specifies the load balance factor when used with
jO8[i8\X0# a load balancing worker.51Testing软件测试网Q3V6K+|Z/G
# Note:
.r S B b.v~HM.u ^0# ----> lbfactor must be > 051Testing软件测试网)@DfU&c8Y!h*B{Cx
# ----> Low lbfactor means less work done by the worker.
&dr!]:oai^0worker.tomcat1.lbfactor=2000
\5vQ(OO cFT2}051Testing软件测试网&W@3Yp7p@,\z
# ------------------------51Testing软件测试网2t J|.x1]:|
# Load Balancer worker
;\1X n0lts1nh0# ------------------------
V&V9T"XC/f051Testing软件测试网 H d+zR7^5w9q
#
g7g:R;XBB@ pe$M0`0# The loadbalancer (type lb) worker performs weighted round-robin
LR\aZ+I0# load balancing with sticky sessions.51Testing软件测试网'Q9a}(oe
# Note:
7R'c(ss^0# ----> If a worker dies, the load balancer will check its state51Testing软件测试网U Y^ju faB'n;pF
# once in a while. Until then all work is redirected to peer51Testing软件测试网#] L3]bF#@}L NrB
# worker.51Testing软件测试网 ]zPW^ Lme
worker.loadbalancer.type=lb51Testing软件测试网-W%e7Kpvmrc
worker.loadbalancer.balanced_workers=tomcat1,tomcat2
p9xk0YAt051Testing软件测试网/sl}T K Z;` c
#51Testing软件测试网D k6SmI;]MB
# END workers.properties
TB6\ K-UN0#51Testing软件测试网IR4@O!NH
51Testing软件测试网/_ ZC C-b6L:}
Tomcat1配置:
r_hD,XR CDPf0
;j*e!gkl8R0port=\"8080\" maxThreads=\"150\" minSpareThreads=\"25\" maxSpareThreads=\"75\"
w u2F}zt0enableLookups=\"false\" redirectPort=\"8443\" acceptCount=\"100\"
S K f6fY qOa?0debug=\"0\" connectionTimeout=\"20000\"51Testing软件测试网_0\ fj$M1i:O5N
disableUploadTimeout=\"true\" />51Testing软件测试网'{ t.p6t2h\9k
51Testing软件测试网\Nr@k#IB

hOY/BI0maxThreads=\"500\" minSpareThreads=\"400\" maxSpareThreads=\"450\"
!v8g+c"mL0enableLookups=\"false\" redirectPort=\"8443\" debug=\"0\"51Testing软件测试网 w5fP/y3A
protocol=\"AJP/1.3\" />51Testing软件测试网^I;W8G~

qV V;iiN/Cs051Testing软件测试网 l7fuxDB\z^7OK

~'s{/L)x6K0启动内存配置,开发configure tomcat程序即可配置:
P2ruj'{t0Initial memory pool: 200 M51Testing软件测试网%vD4DH9Th:K&C.[
Maxinum memory pool:300M51Testing软件测试网7xDid DJY7G
Tomcat2配置:51Testing软件测试网!Fb|XQ
配置和tomcat1差不多,需要改动的地方如下:51Testing软件测试网2e$bU7i+v

`:d:q0Cy]p0
$t \!F7__7bw0
t ?@3YL Y!G0启动内存配置,开发configure tomcat程序即可配置:51Testing软件测试网k ?%B EmGf o$E4Wi$u
Initial memory pool: 512 M51Testing软件测试网.p FC.p!af%W q
Maxinum memory pool:768M
s3x4u N&TW6A!l0Mysql配置:
!?6`,e2Gw5zjkX0Server类型:Dedicated MySQL Server Machine51Testing软件测试网^%?;] d!f'c
Database usage:Transational Database Only51Testing软件测试网w_ `F+G `$UA.g
并发连接数量:Online Transaction Processing(OLTP)
@'w Fr$D!RXx0字符集:UTF851Testing软件测试网@'rI@C
数据库连接池的配置:51Testing软件测试网JH#S5Ny0o
我们采用的是spring 框架,配置如下:
.hZ#wB U@-D051Testing软件测试网Ya;JLw9|C'{;k

r.`3Y%p fJ^}6f0org.hibernate.dialect.MySQLDialect
:g/|%]9Le[~o&Kxd8@0com.mysql.jdbc.Driver
[p8gEy0jdbc:mysql://202.88.1.103/db
6QJ"d@%g'N'e"r7Y0sa51Testing软件测试网mns"V g

4KN/E"KVN9_0
(i_zfcB0HZ0false
W U_EvwX0false
;Mg D*C:p*xlAj$k#|051Testing软件测试网*Qh"\p1Jc,H
true51Testing软件测试网_$|6y XOOIQH
251Testing软件测试网 JF;Vqc;l

@BF:a%@020051Testing软件测试网 j m'lu!myOxCJ!n2[m
551Testing软件测试网|(aE1p?m*S
1200051Testing软件测试网R!afSF&C3Y
50
3A'w@Q7}3m&y f0151Testing软件测试网#e g X4mj!\&s

D\&fVQW0
51Testing软件测试网 S ?fT!KE ]4_"c
其他的没有额外配置。51Testing软件测试网 ky+s Y*h3| ]
LoadRunner 常见问题:51Testing软件测试网u}:\P(S
(1)sofeware caused connction:这种情况,一般是脚本有问题,或者loadrunner有问题。解决方法:重新启动机器,或者重新录制脚本,估计是loadrunner的bug。51Testing软件测试网0csUv |MXW'Qf
(2)cannot connect to server:无法连接到服务器。这种情况是服务器的配置有问题,服务器无法承受过多的并发连接了。需要优化服务器的配置,51Testing软件测试网#CX5A9N6t'W&y!@
如操作系统采用windows 2003 server,
wx G/K.u5h:A Uq0优化tomcat配置:maxThreads=\"500\" minSpareThreads=\"400\" maxSpareThreads=\"450\"。但是tomcat 最多支持500个并发访问51Testing软件测试网V2w^:s6C.V6d3L
优化apache配置:51Testing软件测试网F J)a3YE,Ex N
ThreadsPerChild 190051Testing软件测试网7{1^JXo/[7B
MaxRequestsPerChild 1000051Testing软件测试网(][.HC D {-D|
其他的错误如:51Testing软件测试网o ?o9A6km
Action.c(10): Error -27791: Server has shut down the connection prematurely51Testing软件测试网)L.|i6m?"`
HTTP Status-Code=503 (Service Temporarily Unavailable)
8gZzC&z5G%wTJn0一般都是由于服务器配置不够好引起的,按照问题(2)处理,如果仍旧不行,需要优化硬件和调整程序了。51Testing软件测试网HQn@J.dz9R,s
Apache问题:
D(`s.sw2bQ H0(1) File does not exist: C:/Apache/htdocs/favicon.ico:
+aT$zo\A0这个问题是apache,htdocs目录没有favicon.ico文件引起的,该文件是网站的图标,仅在firefox,myIE等浏览器出现。51Testing软件测试网"h4zA'n @5y6h
(2) 图片无法显示:51Testing软件测试网&L,\*x4f&u
配置apache后,却无法显示图片。51Testing软件测试网1L| }7[,Uo#i1x
解决方法:把程序的图片,按照程序结构copy到apache的htdocs目录下。51Testing软件测试网4h o_D%UOQc
(3) 无法处理请求:51Testing软件测试网9`A%jD-YnW*wn

^KrJQh0没有问题。原因是没有把.do命令转发给tomcat处理。解决方法如下:
+Ar&Gi]\5Q'y9M0在apache配置文件中配置如下内容:51Testing软件测试网X7VGO6m l2b0K
DocumentRoot \"C:/Apache/htdocs\"51Testing软件测试网-v[-zMJ;v(Sr
JkMount /*.jsp loadbalancer
.f6v8?)i/@F)S8]2Y0JkMount /*.do loadbalancer51Testing软件测试网{.VM g g
51Testing软件测试网$G9f p ZOyj

?P moW }1Mh K0总结:51Testing软件测试网 E/O3F:Z ^6W x
网站的压力测试,涉及的知识面挺广的,不仅要熟悉压力测试,还要善于发现问题,要知道如何解决。最重要的一点,要有良好的测试方法。刚开始测试时,可以从最简单的测试脚本入手,不需要太复杂的脚本,这样便于发现问题。如我们刚开始时,就从一个简单的下载登陆界面的脚本入手,测试一个tomcat的压力负载。一个简单的获取登陆的脚本,帮助我们优化了tomcat的配置;后来再测试数据库连接,也是一个简单的数据库连接脚本,帮助我们优化了数据库连接池;然后利用这些简单的脚本,测试apache的负载平衡,优化了apache配置。最后运行复杂的脚本,模拟多种角色的用户在不同时间下的处理,以测试网站压力负载。

.q!pGj_-yS0

TAG: LoadRunner

 

评分:0

我来说两句

日历

« 2024-04-08  
 123456
78910111213
14151617181920
21222324252627
282930    

数据统计

  • 访问量: 12294
  • 日志数: 22
  • 图片数: 4
  • 建立时间: 2008-06-13
  • 更新时间: 2009-04-30

RSS订阅

Open Toolbar