flink入门(一)——基本原理与应用场景

1、简介

  1.简介html

  flink是一个开源的分布式流处理框架apache

  优点:高性能处理高度灵活window操做有状态计算的Exactly-once架构

  详情简介,参考官网:https://flink.apache.org/flink-architecture.html框架

       中文参考:https://flink.apache.org/zh/flink-architecture.html分布式

  flink组件介绍:性能

  

  1)部署:支持本地、集群(支持yarn资源管理)、云spa

  2)核心层:提供了计算的核心.net

  3)API:提供了面向流处理的DataStream和面向批处理的DataSethtm

  4)类库:支持Table/SQLblog

   基本架构为 DataSource(数据源) -> Transfromation(算子处理数据) ->DataSink(数据目的)

  2.框架对比:

  

  checkpoint就是检查点的意思,在重要位置设置检查点(快照),实现容错!https://blog.csdn.net/qq_39532946/article/details/78306809

相关文章
相关标签/搜索