源码跟踪executor如何写数据到blockmanager, 以及如何从blockmanager读数据

以前看了Job怎么submit 以及最后run的, 而后也看了blockmanager是怎么工做的, 那么接下来就是要看spark是如何从blockManager中读写数据的。 首先每一个计算都是在对应机器的executor的task上面运行的, 那么计算完后也是从executor端开始写入的, 根据以前文章的解析, 咱们知道最后Task是在executor的TaskRunner中执行的, 其中在
相关文章
相关标签/搜索