广播变量和累加器的应用场景

共享变量 提供了两种有限类型的共享变量,广播变量和累加器。 我们在dirver中声明的这些局部变量或者成员变量,可以直接在transformation中使用, 但是经过transformation操作之后,是不会将最终的结果重新赋值给dirver中的对应的变量。 因为通过action,触发了transformation的操作,transformation的操作,都是通过 DAGScheduler将
相关文章
相关标签/搜索