pycharm利用pyspark远程链接spark集群

文章目录 0 背景 1 方法 2 测试 3 参考 0 背景 因为工做须要,利用spark完成机器学习。所以须要对spark集群进行操做。因此利用pycharm和pyspark远程链接spark集群。这里记录下遇到的问题及方法。 主要是参照下面的文献完成相应的内容,可是具体问题要具体分析。html 1 方法 1.1 软件配置 spark2.3.3, hadoop2.6, python3 1.2 sp
相关文章
相关标签/搜索