spark总结

spark 问题总结 另可参见：http://www.javashuo.com/article/p-xditoior-km.html spark 的MapReduce运行过程 将文件读入，并split，每个split对于一个map task 由input format将其转化为一个个的key/value对，然后对其调用Mapper里面的map函数分区，每个分区对应一个reduce task 输入输

>>阅读原文<<