Spark SQL 查询引擎Catalyst分析

Spark SQL 查询引擎Catalyst分析 Catalyst整体架构图 Catalyst执行流程 catalyst是spark sql的调度核心，遵循传统数据库查询解析步骤，对sql进行解析，转换为逻辑查询计划，物理查询计划，最终转化为Spark的DAG后在执行，下图为Catalyst的执行流程。   SqlParser将SQL语句被解析为语法树(AST)，也就是未解析的逻辑查询计划。Par

>>阅读原文<<