使用IDEA 搭建 spark on yarn 的开发环境+调试~

1.导入yarn和hdfs配置文件 由于spark on yarn 是依赖于yarn和hdfs的,因此获取yarn和hdfs配置文件是首要条件,将core-site.xml、hdfs-site.xml 、yarn-site.xml 这三个文本考入到你IDEA项目里面的resource目录下,以下图所示:java 2.添加项目依赖 除了pom里面你要添加的:mysql <dependency>
相关文章
相关标签/搜索