Spark Streaming(二十八)性能调优

定义 在SparkStreaming应用程序中有不少可以优化的地方,这样的优化能够提升应用的运行效率。html 减小批处理的时间 SparkStreaming的优化能够大大提升每一个批次的处理时间,每一个批次处理其实就是操做RDD,那么怎么样才能缩短操做RDD的时间呢,那咱们就能够参考Spark Core(十九)Spark性能的调优来尽量的减小批处理的时间。java 增长接收数据的并行度 应用程序
相关文章
相关标签/搜索