Spark 反压机制

反压机制 Spark Streaming 1.5 以前的体系结构 在 Spark 1.5 版本之前,Spark Streaming 的体系结构如下所示: 数据是源源不断的通过 receiver 接收,当数据被接收后,其将这些数据存储在 Block Manager 中;为了不丢失数据,其还将数据备份到其他的 Block Manager 中; Receiver Tracker 收到被存储的 Block
相关文章
相关标签/搜索