经过canal实现把MySQL数据实时增量到kafka

说明:咱们有一个业务须要把mysql中一些表实时同步到大数据集群hbase上面,咱们先经过sqoop把表中数据全量导入到hbase中,而后再经过canal定位的某个binlog的position,来实现增量同步,canal官网提供了java/go接口,直接写入到Kafka,而后经过sparkstreaming实时写入到hbase中html 一. 经过sqoop把mysql表中的数据全量导入到hba
相关文章
相关标签/搜索