spark推测执行的坑

一、spark推测执行开启spa 设置 spark.speculation=true便可kafka 二、spark开启推测执行的好处spark 推测执行是指对于一个Stage里面运行慢的Task，会在其余节点的Executor上再次启动这个task，若是其中一个Task实例运行成功则将这个最早完成的Task的计算结果做为最终结果，同时会干掉其余Executor上运行的实例，从而加快运行速度io 三

>>阅读原文<<