Spark Catalyst-SparkSQL执行流程

工作流程 SQL语句首先通过Parser模块被解析为语法树,即未解析的逻辑计划(Unresolved Logical Plan); 然后通过Analyzer模块借助于数据元数据解析为逻辑计划(Logical Plan); 此时再通过各种基于规则的优化策略进行深入优化,得到优化过的逻辑计划(Optimized Logical Plan); 优化后的逻辑计划依然是逻辑的,并不能被Spark系统理解,此
相关文章
相关标签/搜索