发送MySQL binlog到Hadoop(kafka+flume)mysql
当前场景:从mysql实时拉取修改和增量数据sql
maxwell实时抓取mysql数据的原理也是基于binlog,和canal相比,maxwell更像是canal server + 实时client。(数据抽取 + 数据转换) maxwell集成了kafka producer,直接从binlog获取数据更新并写入kafka,而canal则须要本身开发实时client将canal读取的binlog内容写入kafka中。oop