在测试一个简单系统接口性能压力时,压到必定数量,程序老是崩溃,查看相关机器相关数据时,CPU、内存、IO占用均不高,问题天然出如今其它地方
先介绍下系统部件架构html
Resin版本为:
[root@localhost lib]# java -classpath ./resin.jar com.caucho.Version
Resin-3.2.1 (built Fri, 17 Oct 2008 04:11:01 PDT)
Copyright(c) 1998-2008 Caucho Technology. All rights reservedjava
mysql版本为:
Server version: 5.5.39mysql
在跑接口压力时,当TPS达到100时,程序当报错提示为resin重启了linux
[2016-03-23 12:07:17] JDK detected deadlock. Restarting Resin. [12:07:17.929] {resin-41} JDK detected deadlock. Restarting Resin. [2016-03-23 12:07:17] "001" Id=79 BLOCKED on com.orient.dbpool.o@2726965a owned by "http--80-32" Id=59
问题该怎么解决呢?这里先,说说性能问题瓶颈解决的一个思路:
一、查看是否为服务器硬件瓶颈,这里涉及到CPU、内存、IO读写,咱们能够经过vmstat、sar或iostat来观察;经过观察,在本例中问题不存在硬件的瓶颈
二、网络瓶颈,能够经过查看网络利用率来肯定,方式不少,这里不介绍;不过若是在局域网内、且这仅仅是一个web服务类型网站,与视频类网站不一样,因此本例中也不存在网络的问题
三、linux操做系统瓶颈,linux关于性能方面设计到的内核参数太多,这里能够参数《Linux服务器性能调整》一书,当作参考书使用;本例中,对linux TCP链接释放时间作了调整,但问题依旧;
四、中间件瓶颈,这里指的就是第三方的中间件,好比tomcat、JVM、数据库等等,通常在网络下载后的程序,须要根据服务器实际情部分作调整;在本例中,调整了相关参数后,性能有所提升,但个别接口还有问题;
五、应用的瓶颈,这就须要与开发一块儿调试,好比业务逻辑、sql的优化、算法等等ios
本例中,linux内核相关参数调整,网上有更详细的参数,请自行参考:web
net.ipv4.tcp_syncookies = 1 net.ipv4.tcp_tw_reuse = 1 net.ipv4.tcp_tw_recycle = 1 net.ipv4.tcp_fin_timeout = 30
在本次测试中,相关中单件的调整以下:
一、Resin 处理能务的调整:
Resin目录下conf\resin.xml文件参数调整算法
<jvm-arg>-server</jvm-arg> <jvm-arg>-Xmx512m</jvm-arg> <jvm-arg>-Xms256m </jvm-arg> <jvm-arg>-Xss256k</jvm-arg> <memory-free-min>10M</memory-free-min> <thread-max>3000</thread-max> <socket-timeout>20s</socket-timeout> <keepalive-timeout>15s</keepalive-timeout>
具体的调整方式,能够参考JVM的性能调优相关文章,如:http://uule.iteye.com/blog/2114697sql
二、web数据库链接参数调整
有的程序中参web链接数据的处理能力有作限制,本例中,默认初始处理能力为1,这里作修改数据库
dbInitialCapacity="1" (初始化处理能力) dbMaxCapacity="5" (最大处理能力
三、mysql数据库性能处理调整
具体的可参数MySQL数据库性能能调整进行,根据机器内存,CPU状况进行调整,能够参考blog:http://www.educity.cn/shujuku/692462.html
本例中,对最大链接数、链接池作了调整tomcat
--max_connections=1200
--innodb_buffer_pool_size=2500M
四、程序内部问题,好比登录时达到了最大的文件打开数,等等
这里设计到内部程序这里就不例举了
参考资料:
linux性能调整:http://download.csdn.net/detail/machen_smiling/7736543
mysql性能调整:http://www.educity.cn/shujuku/692462.html
linux性能监控命令:http://os.51cto.com/art/201412/460698_all.htm