spark-sql执行流程分析

spark-sql 架构   图1 图1是sparksql的执行架构，主要包括逻辑计划和物理计划几个阶段，下面对流程详细分析。   sql执行流程 总体流程 parser；基于antlr框架对 sql解析，生成抽象语法树 变量替换，通过正则表达式找出符合规则的字符串，替换成系统缓存环境的变量 SQLConf中的`spark.sql.variable.substitute`，默认是可用的；参考` S

>>阅读原文<<