热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

java每隔一小时fullgc_项目周期性fullGc间隔为1小时

现象:image可以看到fullGc间隔时间为1小时.同事看到这个现象后反馈说,这可能和tomcat的版本过低有关系.tomcat6.0为了避免内在溢出会通过system.gc()

现象:

3da079b10a4e

image

可以看到fullGc间隔时间为1小时.

同事看到这个现象后反馈说,这可能和tomcat的版本过低有关系.tomcat6.0为了避免内在溢出会通过system.gc()触发fullGc, 建议我们升级tomcat. 于是确认了一下,发现jdk和tomcat的版本信息为

3da079b10a4e

image

确实是非常低,无论如何也该升级了. 在升级前当然要先看看fullGc的原因了.于是通过

-XX:+PrintGCDetails

输出gc信息,这个默认是输出到控制台的,所以在catalina.out中也是可以看到的.

3da079b10a4e

image

可以看到老年代根本没有达到最大值,通过[Full GC (System)也能说明fullGc是通过System.gc()调用的

于是升级到jdk1.8 ,tomcat8.0 ,启动,本以为就此结束,没想到系统在启动时就先来了三次fullGc,这还真是个惊喜.

通过 jstat -gcutil pid 1000 5 查看如下

3da079b10a4e

image

输出的日志信息如下

3da079b10a4e

image

full gc 原因都是一样的: MetaData GC Threshold , 通过查阅资料及现场日志可以看出是Metaspace空间不够了,扩了三次.发生了三次fullGc

Metaspace 默认为20M左右,通过日志信息可以看出来

于是 设定Metaspace大小

-XX:MetaspaceSize=128M

再次重启,果然不在full Gc了,经过一段时间的监控,发现不会在频繁fullGc了

3da079b10a4e

image

本以为周期性fullGc问题就这样结束时,新的问题接踵而来.

在升级另一个项目的jdk及tomcat版本后,惊奇的发现又出现了周期性fullGc的问题,间隔时间还是一个小时.而且项目在启动时就会来一次fullGc

3da079b10a4e

image

这就纳闷了,我tomcat已经升级到8.0了,怎么还会出现呢? 没关系,把上面排查的路在走一遍.

1,查看gc日志

3da079b10a4e

image

发现是system.gc().

2,排查tomcat,发现已经不存在之前的问题.

3,尝试本地复现

本地成功复现,周期也为1小时. 猜测可能是某个组件导致的,因为太规律了,但靠猜站不住脚,还得去跟踪.

使用VisualVM 跟踪这个进程,先看下有没有特殊的线程,发现有个 GC Daemon 的守护线程

3da079b10a4e

image

有经验的同事可能已经从线程的堆栈信息中看出门道了.但我这时还没有察觉.

于是引入了BTrace, BTrace功能很强大,可以方便的获取程序运行时的数据信息,如方法参数、返回值、全局变量和堆栈信息等. 在VisualVM中有BTrace的插件,直接安装就可以.

3da079b10a4e

image

然后打开.

3da079b10a4e

image

出现这个界面

3da079b10a4e

image

然后输入以下代码:

/* BTrace Script Template */

import com.sun.btrace.annotations.*;

import static com.sun.btrace.BTraceUtils.*;

@BTrace

public class TracingScript {

/* put your code here */

@OnMethod(clazz = "java.lang.System", method = "gc")

public static void onSystemGC() {

println("entered System.gc()");

jstack();

}

}

java.lang.System 是我们要跟踪的类, gc是system中的方法名. 因为gc日志中显示是通过这个方法调用的. jstack() 是打出堆栈信息

然后点上面的start

3da079b10a4e

image

出现下面的 ** BTrace up&running就明在正常运行了,这样当System.gc()被调用的时候就会打出堆栈信息.

结果如下 (发生两次fullGc)

3da079b10a4e

image

可以发现是sun.misc.GC调用了这个线程.这个与刚刚 Thread中的信息其实是一致的.

于是项目中搜索这个关键字,不要忘记jar包也要排查.

排查到在cxf-common-utilities-2.2.10.jar 的JDKBugHacks 类中有调用

3da079b10a4e

image

通过注释能够看出是为了防止可能的内存溢出而周期性调用.

看了下这个组件的新版本,对这块已经进行了优化

3da079b10a4e

image

调整为10小时一次,同时增加了一个 控制参数 : -Dorg.apache.cxf.JDKBugHacks.gcRequestLatency=true ,在jvm参数上配置后即可不启用周期性fullGc.

这个apache cxf组件我没有用过,查阅后发现是和webservice有关的一个组件.本项目已经不在使用webservice,但代码没有梳理干净.于是排查下相关点,去掉了这个组件.再次预发布.

3da079b10a4e

image

目前发现没有在fullGc了

总结:

1. 在软件项目的生命周期中,软件维护是最后一个阶段,也是持续时间最长,花费代价最大的一个阶段,确定无用的代码一定要及时清理,提升项目清洁度,降低后继运维成本.

2. 在升级jdk及tomcat时要考虑到其它组件的版本适配,虽然是向下兼容的,但还是要做好测试.

参考文档:



推荐阅读
  • 技术分享:从动态网站提取站点密钥的解决方案
    本文探讨了如何从动态网站中提取站点密钥,特别是针对验证码(reCAPTCHA)的处理方法。通过结合Selenium和requests库,提供了详细的代码示例和优化建议。 ... [详细]
  • 1.如何在运行状态查看源代码?查看函数的源代码,我们通常会使用IDE来完成。比如在PyCharm中,你可以Ctrl+鼠标点击进入函数的源代码。那如果没有IDE呢?当我们想使用一个函 ... [详细]
  • 将Web服务部署到Tomcat
    本文介绍了如何在JDeveloper 12c中创建一个Java项目,并将其打包为Web服务,然后部署到Tomcat服务器。内容涵盖从项目创建、编写Web服务代码、配置相关XML文件到最终的本地部署和验证。 ... [详细]
  • Explore how Matterverse is redefining the metaverse experience, creating immersive and meaningful virtual environments that foster genuine connections and economic opportunities. ... [详细]
  • 本文详细介绍了 Dockerfile 的编写方法及其在网络配置中的应用,涵盖基础指令、镜像构建与发布流程,并深入探讨了 Docker 的默认网络、容器互联及自定义网络的实现。 ... [详细]
  • 本文详细介绍了Akka中的BackoffSupervisor机制,探讨其在处理持久化失败和Actor重启时的应用。通过具体示例,展示了如何配置和使用BackoffSupervisor以实现更细粒度的异常处理。 ... [详细]
  • 作为一名新手,您可能会在初次尝试使用Eclipse进行Struts开发时遇到一些挑战。本文将为您提供详细的指导和解决方案,帮助您克服常见的配置和操作难题。 ... [详细]
  • 本文详细解析了Python中的os和sys模块,介绍了它们的功能、常用方法及其在实际编程中的应用。 ... [详细]
  • andr ... [详细]
  • 微软Exchange服务器遭遇2022年版“千年虫”漏洞
    微软Exchange服务器在新年伊始遭遇了一个类似于‘千年虫’的日期处理漏洞,导致邮件传输受阻。该问题主要影响配置了FIP-FS恶意软件引擎的Exchange 2016和2019版本。 ... [详细]
  • 探讨如何真正掌握Java EE,包括所需技能、工具和实践经验。资深软件教学总监李刚分享了对毕业生简历中常见问题的看法,并提供了详尽的标准。 ... [详细]
  • 本文详细介绍了如何准备和安装 Eclipse 开发环境及其相关插件,包括 JDK、Tomcat、Struts 等组件的安装步骤及配置方法。 ... [详细]
  • 自己用过的一些比较有用的css3新属性【HTML】
    web前端|html教程自己用过的一些比较用的css3新属性web前端-html教程css3刚推出不久,虽然大多数的css3属性在很多流行的浏览器中不支持,但我个人觉得还是要尽量开 ... [详细]
  • 本文深入探讨了如何通过调整InnoDB的关键配置参数来优化MySQL的随机IO性能,涵盖了缓存、日志文件、预读机制等多个方面,帮助读者全面提升数据库系统的性能。 ... [详细]
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
author-avatar
没有丝袜姑娘
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有