Spark 2.3.0 Driver 内存泄漏

Spark 2.3.0 Driver 内存泄漏 问题描述 线上StructedStreaming随着运行时间变长,处理能力越来越慢,重启程序后恢复到之前的处理能力。在测试环境复现问题之后,发现Driver进程的老年代和方法区被占满,且每次垃圾回收释放的内存空间有限,导致JVM一直在FullGC,怀疑是内存泄漏导致的,遂Dump出内存快照。 内存快照分析 使用MAT(Memory Analysis
相关文章
相关标签/搜索