大数据平台架构的组成

01、大数据平台 是指以处理海量数据存储、计算及不间断流数据实时计算等场景为主的一套基础设施。典型的包括Hadoop系列、Spark、Storm、Flink以及Flume/Kafka等集群。 02 典型大数据平台架构 由上到下,可分为三个部分:数据搜集、数据处理、数据输出与展示。 (1)、数据采集 将应用程序发作的数据和日志等同步到大数据系统中,由于数据源不同,这里的数据同步系统实际上是多个相关系
相关文章
相关标签/搜索