Flink :Flink Standalone集群搭建

      在Flink的开篇介绍中,我们其实已经了解了Flink的架构设计,我们现在再来回顾以下,Flink和Spark类似,提供了standalone模式的集群搭建和提供了on yarn , on k8s等部署方式。其中standalone集群模式是flink使用中部署的比较多的。因为现在大多数企业的大数据集群中一般使用yarn来做资源调度和管理,所以有部分企业也使用on yarn的模式来进行部署。

其中这两种模式我们都会专门进行有教程进行部署, 但是本文我们主要是部署Standalone集群的模式.

首先,我们先到Flink官网下载对应安装包, 我们这里下载1.10.1版本。下载连接为:https://flink.apache.org/downloads.html#apache-flink-1101

下载红色圈中的部分就行

后面如果用到各种sql格式的适配,把Avro,CSVJSON三个jar包都下载下来,另外如果需要和hadoop进行整合,则需要下载基于Hadoop的预编译适配jar,根据自己hadoop的版本,下载相应的版本就行。