Spark On YARN

为什么要使用YARN? 数据共享、资源利用率、更方便的管理集群等。 详情参见：http://www.cnblogs.com/luogankun/p/3887019.html   Spark YARN版本编译 编译hadoop对应的支持YARN的Spark版本 export MAVEN_OPTS="-Xmx2g -XX:MaxPermSize=512M -XX:ReservedCodeCacheSi

>>阅读原文<<