Kafka分组消费的那些事儿

1Kafka消费模式 从kafka消费消息,kafka客户端提供两种模式: 分区消费,分组消费。 分区消费对应的就是我们的DirectKafkaInputDStream 分组消费对应的就是我们的KafkaInputDStream 消费者数目跟分区数目的关系: 1),一个消费者可以消费一个到全部分区数据 2),分组消费,同一个分组内所有消费者消费一份完整的数据,此时一个分区数据只能被一个消费者消费,
相关文章
相关标签/搜索