SparkSQL(5)——Spark SQL编程方式执行查询

编写Spark SQL程序实现RDD转换成DataFrame Spark官网提供了两种方法来实现从RDD转换获得DataFrame,第一种方法是利用反射机制,推导包含某种类型的RDD,经过反射将其转换为指定类型的DataFrame,适用于提早知道RDD的schema。第二种方法经过编程接口与RDD进行交互获取schema,并动态建立DataFrame,在运行时决定列及其类型。 1、添加maven依
相关文章
相关标签/搜索