任务倾斜 （注意和数据倾斜的差别）

转至元数据结尾 转至元数据起始 数据倾斜指的是某个节点的数据太大，数据跑不完。而任务倾斜则是节点出问题，任务跑的慢。正好和目前出现的executor&task lost相呼应。网络 task倾斜缘由比较多，网络io,cpu,mem都有可能形成这个节点上的任务执行缓慢，能够去看该节点的性能监控来分析缘由。开启spark的推测机制后若是某一台机器的几个task特别慢，推测机制会将任务分配到其余机器执行

>>阅读原文<<