数据倾斜

数据倾斜

两种数据倾斜发生的现象:

80%状况下都发生挂了,只有极少20%状况下能把task执行完成spa

 

 

窄依赖:结构简单,若是发生数据丢失,方便查找丢失的数据3d

宽依赖:结构复杂,如何发生数据丢失,由于它的数据来源是宽依赖,很差查找丢失的数据blog

相关文章
相关标签/搜索