在oozie的sharelib公共库中为同一组件(不只限spark)配置不一样版本的运行环境

最近在公司开发遇到一个问题,oozie中spark的默认环境使用的是es2.0的版本。由于其余程序都使用2.0版本,因此将2.0的jar包放在了spark的环境中,而我运行spark的任务须要用到es7.2版本,这就致使因jar包版本冲突而没法运行。shell 通过百度网上有好多oozie整合spark2的文章博客,受此启发,我可使用现有的spark默认环境从新搭配一套为es7的spark运行环境
相关文章
相关标签/搜索