分享下之前项目性能测试时遇到的各种性能问题及解决思路、方法,欢迎同行交流!
问题描述:某仓储系统压测时,发现任务分配worker后台定时处理任务时(积压2个已定位波次,每波次10000订单),ta-worker应用后台抛出”组建集合单异常”,错误信息如下:
2018-10-22 14:09:29[ schedulerFactoryBean_Worker-1:1936704 ] - [ERROR] com.jd.wms.assign.worker.TaskAssignWorker-: - [TaskAssignWorker] :{}java.lang.OutOfMemoryError: GC overhead limit exceeded。
问题分析:通过dump内存堆文件(使用MAT工具,全名Eclipse Memory Analyzer)分析,发现类org.quartz.simpl.SimpleThreadPool占用了99%的内存。如下图:
定位到代码段: com.jd.wms.location.dao.impl.ObAssignLocateMDaoImpl.selectSmallByZoneNos 。 方法 selectSmallByZoneNos 调用相关 SQL : 经确认此 SQL 查询出大量数据后存放至 List 对象中,导致应用可用内存不足,产生 OOM GC overhead limit exceeded 。优化方案:
减少 ob_locate_d 表中待任务分配数据量,数量控制在 2 个波次内。 优化 方法 selectSmallByZoneNos 涉及 sql (拆分 SQL, 待优化)。 优化结果 : 通过多个波次的任务分配, ta-worker 应用内存未 出现 OOM 现象 。提高了系统稳定性。见下图: 如觉得对你有帮助,请记得点个赞,个人整理不易....