项目问题总结

项目1中出现以下几个问题的解决方案 发生数据倾斜： 1、大部分的task，都执行的特别快，剩下的几个task，执行的特别特别慢，前面的1s执行5个，但是最后需要执行2个小时 2、运行的时候，其他task都执行完了，也没什么特别的问题，但是有的task，就会突然间报OOM，JVM Out of Memory，内存溢出，反复执行几次到某个task都跑不通，最后就挂掉了 ps:不能单纯靠偶然的内存溢出就

>>阅读原文<<