RDD和DataFrame和DataSet三者间的区别

时间 2020-05-14

标签 rdd dataframe dataset 三者间区别栏目 Spark 繁體版

原文原文链接

在SparkSQL中Spark为咱们提供了两个新的抽象，分别是DataFrame和DataSet。他们和RDD有什么区别呢？首先从版本的产生上来看：
RDD (Spark1.0) —> Dataframe(Spark1.3) —> Dataset(Spark1.6)html

若是一样的数据都给到这三个数据结构，他们分别计算以后，都会给出相同的结果。不一样是的他们的执行效率和执行方式。数据结构

在后期的Spark版本中，DataSet会逐步取代RDD和DataFrame成为惟一的API接口。htm

网址:https://www.cnblogs.com/swordfall/p/9006088.html#auto_id_0blog