Flink 分布式缓存 广播变量 区别

区别: 1.广播变量是基于内存的,是将变量分发到各个worker节点的内存上(避免多次复制,节省内存) 2.分布式缓存是基于磁盘的,将文件copy到各个节点上,当函数运行时可以在本地文件系统检索该文件(避免多次复制,提高执行效率)   分布式缓存: Flink提供了一个分布式缓存,类似于hadoop,可以使用户在并行函数中很方便的读取本地文件,并把它放在taskmanager节点中,防止task重
相关文章
相关标签/搜索