Spark 内存分配

Spark1.5堆内存分配   这是spark1.5及以前堆内存分配图 下边对上图进行更近一步的标注，红线开始到结尾就是这部分的开始到结尾   spark 默认分配512MB JVM堆内存。出于安全考虑和避免内存溢出，Spark只允许我们使用堆内存的90%，这在spark的spark.storage.safetyFraction 参数中配置着。也许你听说的spark是一个内存工具，Spark允许你

>>阅读原文<<