pyspark读写hdfs，parquet文件

#-*- coding:utf-8 -*- import json from pyspark.sql import SparkSession #连接集群 spark = SparkSession.builder.master("yarn-client").appName("test").getOrCreate() #读取数据，数据位置‘hdfs://bd01:8020/user/root/par

>>阅读原文<<