2020-10-02【学习笔记】【企业数据湖】七、基于Apache Kafka构建消息层（1）

一、数据湖背景中的消息层 1、消息层 数据湖中的消息层应该具有以下功能： 该层的一项核心功能是对源头和终端进行解耦 能够处理来自应用服务器节点每秒几百MB的高速信息流 能够处理TB甚至PB级数据 能够低延迟、高吞吐的处理消息 能够保证信息按照时间有序传输向多个消费者传递相同消息的能力。 能够对运营统计数据进行分析，聚合来自不同数据源的数据并分析 借助廉价硬件实现高性能 能够实现最低程度的数据增加与

>>阅读原文<<