浅谈大数据里的Kafka(2)工作流程及文件存储机制

   Kafka中消息是以topic进行分类的,生产者生产消息,消费者消费消息,都是面向topic的。    topic是逻辑上的概念(可以自己定义),而partition是物理上的概念(可以将一个topic的内容分配到不同节点上的物理磁盘中),每个partition对应于一者log文件,该log文件中存储的就是producer生产的数据。Producer生产的数据会被不断追加到该log文件末端,
相关文章
相关标签/搜索