Spark任务提交jar包依赖解决方案

一般咱们将spark任务编写后打包成jar包，使用spark-submit进行提交，由于spark是分布式任务，若是运行机器上没有对应的依赖jar文件就会报ClassNotFound的错误。 下面有三个解决方法：web 方法一：spark-submit –jars 根据spark官网，在提交任务的时候指定–jars，用逗号分开。这样作的缺点是每次都要指定jar包，若是jar包少的话能够这么作，可是

>>阅读原文<<