Spark SQL工作原理剖析和性能优化

一、工作原理剖析： Spark SQL 架构中主要有这几个关键的组件：SqlParser(Sql分析程序) ，Analyser(分析器) ，Optimizer（优化器） ，SparkPlan（Spark计划） SparkSQL大致的执行流程是这样的： 1. SQL 语句经过SqlParser 完成sql 语句的语法解析功能，解析成Unresolved LogicalPlan（未解析的逻辑计划）;

>>阅读原文<<