在自定义数据源中使用sparksql(Spark2.0+)带示例

主要原理 spark sql 核心: ParseInterface: 专门负责解析外部数据源SQL的SqlParser。目前自带的parser已经能知足各类需求 RunnableCommand: 从反射的数据源中实例化relation,而后注册到temp table中。 Strategy: 将plan映射为物理计划。 RelationProvider: 提供一个Relation。 BaseRela
相关文章
相关标签/搜索