大数据开发之Spark篇----spark-core入门(5)

Spark序列化&Spark配置读取 序列化 简单案例 我们之前读取的文件都是文本文件,所以我们是使用textFile这个算子来读取文件所有的路径的,但是如果我们要读取的是一个序列化后的文件,我们就不能使用这个算子来读取了。我们就该用sequenceFile这个算子。 val file = sc.sequenceFile[BytesWritable,String]("") val end
相关文章
相关标签/搜索