如何作Spark 版本兼容

咱们知道Spark2.0 ，Spark 1.6还有Spark 1.5 三者之间版本是不兼容的，尤为是一些内部API变化比较大。若是你的系统使用了很多底层的API,那么这篇文章或许对你有帮助。咱们介绍的兼容相关一些技巧，主要包括动态编译以及反射等方式，也用到了Scala的一些语言特性。sql 案例 在Spark 1.6 时，大部分机器学习相关的类使用的向量仍是express org.apache.s

>>阅读原文<<