Spark:java api读取hdfs目录下多个文件

需求: 因为一个大文件,在spark中加载性能比较差。因而把一个大文件拆分为多个小文件后上传到hdfs,然而在spark2.2下如何加载某个目录下多个文件呢?session public class SparkJob { public static void main(String[] args) { String filePath = args[0]; /
相关文章
相关标签/搜索