pcharm 远程spark

1、通过settings 选择anaconda下python环境,并安装py4j包   2、将pyspark包加入工程目录 3、设置运行参数 PYTHONUNBUFFERED=1;SPARK_HOME=E:\spark;PYTHONPATH=E:\spark\python;HADOOP_HOME=E:\hadoop-common-2.6.0-bin-master 然后测试运行 查看 spark 任
相关文章
相关标签/搜索