[原创]系统响应慢问题_OpenStack, 云计算等杂项讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  OpenStack, 云计算等杂项讨论区 »
总帖数
4
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 5264 | 回复: 3   主题: [原创]系统响应慢问题        上一篇   下一篇 
linlin.yi
注册用户
等级:少校
经验:1024
发帖:75
精华:1
注册:2013-11-8
状态:离线
发送短消息息给linlin.yi 加好友    发送短消息息给linlin.yi 发消息
发表于: IP:您无权察看 2014-4-11 16:34:01 | [全部帖] [楼主帖] 楼主

1.环境
Weblogic版本:9.2.0

  操作系统版本:Linux 32bits

Jdk版本:sun   java version "1.5.0_04"

  数据库连接字符串:jdbc:oracle:thin:@10.237.66.2:1521:orcl

2.集群结构

下图所示,在一个weblogic集群中共有5个被管节点,分别分布在5台机器上。

北京联动北方科技有限公司

3.问题现象

在业务高峰期会出现应用响应很慢,并且有OOMOutOfMemory)问题

4.问题分析

4.1 日志分析

4.1.1 问题

">Threaddump分析:weblogic响应慢问题,在分析threaddump后发现,线程大多数处于空闲状态,活动线程数量很少,没有出现死锁或者是同步锁。如图所示

北京联动北方科技有限公司

">GC日志分析:GC日志和服务器的CPUidle的活动情况来看,发现cpu的使用率很高,99%以上。GC中有大量的fullGC活动情况。平凡的full   GC肯定是会影响weblogic  server的响应速度。因为full  gc是很消耗时间和cpu资源。如下图:

北京联动北方科技有限公司

">     日志分析:在日中发现大量的stuck状态的线程报错信息日志:

北京联动北方科技有限公司

北京联动北方科技有限公司

引起这种问题的原因是由于在执行sql语句时,查询出了大量的数据,引起的网络上的异常。解决方法可以从优化sql语句上入手。

4.1.2 解决方案

      在经过了分析后,可以从以下方面入手解决,首先,由于程序中平凡的创建大量的对象为了减少full  gc的活动次数和活动时间,可以把jvmyoung generationsold generations的比例作适当的调整。具体调整参数:XX:NewRatio=n,适当扩大young generation的比例。服务器上的默认值是8.意思就是young generationold generation=18其次,设置GC打印信息,为了观察调整后的GC详细的活动情况。参数:-verbose:gc -Xloggc:gclog.log



 4.1.3 解决方案

对于OOM问题,在观察了weblogic server日志中weblogic输出的<Health>后发现,OOM并不是heap区的OOM问题,由于现场也没有更加详细的GC的日志,所以无法准确判断引起日志中报出OOM的问题原因。建议,继续对系统进行监控







赞(0)    操作        顶端 
filogra
注册用户
等级:少校
经验:1408
发帖:13
精华:0
注册:2015-6-2
状态:离线
发送短消息息给filogra 加好友    发送短消息息给filogra 发消息
发表于: IP:您无权察看 2016-6-15 9:22:31 | [全部帖] [楼主帖] 2  楼

很详细,学习了~~



赞(0)    操作        顶端 
山友木樨
注册用户
等级:少校
经验:1040
发帖:9
精华:0
注册:2015-6-1
状态:离线
发送短消息息给山友木樨 加好友    发送短消息息给山友木樨 发消息
发表于: IP:您无权察看 2016-6-16 16:57:32 | [全部帖] [楼主帖] 3  楼

好棒~~



赞(0)    操作        顶端 
duff
注册用户
等级:少校
经验:968
发帖:0
精华:0
注册:2015-7-22
状态:离线
发送短消息息给duff 加好友    发送短消息息给duff 发消息
发表于: IP:您无权察看 2016-6-20 9:46:20 | [全部帖] [楼主帖] 4  楼

顶一个



赞(0)    操作        顶端 
总帖数
4
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论