使用sbt assembly构建Spark项目

sbt-assembly是一个sbt插件,做用相似于Maven,用于建立一个包含依赖的JAR包java 场景:我在用sbt构建spark项目,可是在用sbt package打包生成jar包时,这个jar包并不没有包含项目的依赖,致使这个jar包提交到spark集群运行时,worker不能找到相应的类,sbt-assembly这个插件能够解决这个问题,能够将项目的依赖一同打包进jar包里。mysql
相关文章
相关标签/搜索