Spark 从 0 到 1 学习(6) —— Spark 内存管理

文章目录 1. 静态内存管理 1.1 静态内存管理分布图 1.2 静态内存管理详解 2. 统一内存管理 2.1 统一内存管理分布图 2.2 统一内存管理详解 3. reduce 中 OOM 如何处理? Spark 执行应用程序时,Spark 集群会启动 Driver 和 Executor 两种 JVM进程。Driver 负责创建 SparkContext 上下文,提交任务,调度任务等。Execut
相关文章
相关标签/搜索