优雅解决Spark Application jar包冲突问题

前言 当我们开发的Spark Application变得越来越复杂,依赖的jar包越来越多时,难免会碰到jar包冲突的问题。 举个例子: 我们的业务代码用到了一个第三方库,好比:guava(虽然好用,但是版本间的兼容性差的一坨翔) Spark本身也依赖了guava,但是和业务代码中依赖的guava版本不同 这种情况下,把我们的Spark Application提交到集群里执行,很有可能因为版本问题
相关文章
相关标签/搜索