数据采集中间件技术对比V1.0

1 前言 大数据平台一般包括以下几个步骤： 数据采集 -> 数据存储 -> 数据分析 -> 数据展示(可视化、报表、监控等) 其中数据采集是一个十分重要的组成部分。大数据采集的任务也有许多特点，比如：数量大、数据源多样性、变化快、保证数据正确、避免数据重复等。 这里我们调研了几款常用的大数据采集中间件：datax、flume、sqoop、canal、maxwell、nifi和kettle。 以下，

>>阅读原文<<