第17课：Spark Streaming资源动态申请和动态控制消费速率原理剖析

2019独角兽企业重金招聘Python工程师标准>>> 本期内容： 1，Spark Streaming资源动态分配 2，Spark Streaming动态控制消费速率   Spark Streaming处理数据有高峰期和低峰期，如果处理不同的时期资源占用一样的话，在低峰值就会存在资源的浪费。 在SparkContext中可以通过设置spark.dynamicAllocation.enabled来开

>>阅读原文<<