线上fullgc的case

简介: fullgc

问题出现

5月31日5-2发布后,钉钉业务报警群里收到监控报警,ngprod环境出现fullgc报警,如下

image.png

image.png


分析


通过查询线上log发现,是由于DingTalkProcessDefinition.toString引起的。

image.png


DingTalkProcessDefinition.toString代码如下,是通过工具类把对象的属性值打印出来。本次迭代在DingTalkProcessDefinition新增了一个属性List nodes,ProcessNode数据结构如下图,并且ProcessNode的toString方法和DingTalkProcessDefinition的toString方法是一样的,这样就导致在

DingTalkProcessDefinition.toString的时候,由于ProcessNode的存在,导致占用的内存指数级的爆炸增长。

注:web-pro里存在LogAspect这个aop,会打印方法的入参出参和执行耗时,入参的打印会调用参数的toString,如果太长,会截取。这个问题就是在打印方法耗时时调用了DingTalkProcessDefinition和ProcessNode的toString方法。

image.png

image.png


解决方案

首先我重写了DingTalkProcessDefinition和ProcessNode的toString方法,只打印其中主要的属性值,至此其实fullgc问题已经解决,第二天和B讨论了这个需求的实现方式,修改了实现方案,

DingTalkProcessDefinition不需要使用ProcessNode这个对象。

image.png



总结

在使用树形或者更复杂的数据结构时,需要注意可能造成的性能问题,尤其是注意对应的toString方法。

相关文章
|
9月前
|
JavaScript 编译器
电商领域的 scheduled-replenishment 策略
电商领域的 scheduled-replenishment 策略
|
1月前
|
Arthas 监控 Java
|
11月前
|
前端开发
如何解决出现Unknown at rule @applyscss(unknownAtRules)警告?
如何解决出现Unknown at rule @applyscss(unknownAtRules)警告?
728 0
|
运维 监控 数据库连接
|
监控 Java 索引
增大max_result_window是错的,ES只能查询前10000条数据的正确解决方案
增大max_result_window是错的,ES只能查询前10000条数据的正确解决方案
增大max_result_window是错的,ES只能查询前10000条数据的正确解决方案
|
调度
解决使用@Scheduled创建任务时无法在同一时间执行多个任务的BUG
解决使用@Scheduled创建任务时无法在同一时间执行多个任务的BUG
145 0
|
JavaScript
TS工作的一些小技巧
1. keyof和in 1.1 keyof keyof 与 Object.keys 略有相似,只不过 keyof 取 interface 的键 interface Point { x: number; y: number; } // type keys = "x" | "y" type keys = keyof Point; 假设有一个 object 如下所示,我们需要使用 typescript 实现一个 get 函数来获取它的属性值 const data = { a: 3, hello: 'world' } function get(o: object, name
SAP BRF+ ruleset里维护多条rule,每条rule逐一执行
SAP BRF+ ruleset里维护多条rule,每条rule逐一执行
125 0
SAP BRF+ ruleset里维护多条rule,每条rule逐一执行
|
Java
程序刚启动,发生三次FullGc的问题追踪
程序刚启动,发生三次FullGc的问题追踪,原因定位到JVM的默认参数Metaspace初始值和最大值是需要设置
784 0
程序刚启动,发生三次FullGc的问题追踪
|
Java Android开发
【Android 电量优化】JobScheduler 相关源码分析 ( JobSchedulerService 源码分析 | 任务检查 | 任务执行 )
【Android 电量优化】JobScheduler 相关源码分析 ( JobSchedulerService 源码分析 | 任务检查 | 任务执行 )
131 0