基于RDD建立DataFrame

Spark SQL 支持两种不一样的方法用于转换已存在的 RDD 成为 Dataset。sql 第一种方法是使用反射去推断一个包含指定的对象类型的 RDD 的 Schema。在你的 Spark 应用程序中当你已知 Schema 时这个基于方法的反射能够让你的代码更简洁。不过这种方法要求你在写程序时已经知道RDD对象的结构信息，由于须要提早根据该结构信息来定义case class。apache 第二

>>阅读原文<<