关于Kafka
Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它能够处理消费者规模的网站中的全部动做流数据。 这种动做(网页浏览,搜索和其余用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据一般是因为吞吐量的要求而经过处理日志和日志聚合来解决。 对于像Hadoop的同样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。Kafka的目的是经过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了经过集群来提供实时的消息。java
有不少人问过我要过Kafka相关的面试题,我一直懒得整理,这几天花了点时间,结合以前面试被问过的、别人咨询过的、我会问别人的进行了相关的整理,也就几十题,你们花个几分钟看看应该都会。面试题列表以下:面试
Kafka的面试题
- Kafka的用途有哪些?使用场景如何?
- Kafka中的ISR、AR又表明什么?ISR的伸缩又指什么
- Kafka中的HW、LEO、LSO、LW等分别表明什么?
- Kafka中是怎么体现消息顺序性的?
- Kafka中的分区器、序列化器、拦截器是否了解?它们之间的处理顺序是什么?
- Kafka生产者客户端的总体结构是什么样子的?
- Kafka生产者客户端中使用了几个线程来处理?分别是什么?
- Kafka的旧版Scala的消费者客户端的设计有什么缺陷?
- “消费组中的消费者个数若是超过topic的分区,那么就会有消费者消费不到数据”这句话是否正确?若是不正确,那么有没有什么hack的手段?
- 消费者提交消费位移时提交的是当前消费到的最新消息的offset仍是offset+1?
- 有哪些情形会形成重复消费?
- 那些情景下会形成消息漏消费?
- KafkaConsumer是非线程安全的,那么怎么样实现多线程消费?
- 简述消费者与消费组之间的关系
- 当你使用kafka-topics.sh建立(删除)了一个topic以后,Kafka背后会执行什么逻辑?
- topic的分区数可不能够增长?若是能够怎么增长?若是不能够,那又是为何?
- topic的分区数可不能够减小?若是能够怎么减小?若是不能够,那又是为何?
- 建立topic时如何选择合适的分区数?
- Kafka目前有那些内部topic,它们都有什么特征?各自的做用又是什么?
- 优先副本是什么?它有什么特殊的做用?
- Kafka有哪几处地方有分区分配的概念?简述大体的过程及原理
- 简述Kafka的日志目录结构
- Kafka中有那些索引文件?
- 若是我指定了一个offset,Kafka怎么查找到对应的消息?
- 若是我指定了一个timestamp,Kafka怎么查找到对应的消息?
- 聊一聊你对Kafka的Log Retention的理解
- 聊一聊你对Kafka的Log Compaction的理解
- 聊一聊你对Kafka底层存储的理解(页缓存、内核层、块层、设备层)
- 聊一聊Kafka的延时操做的原理
- 聊一聊Kafka控制器的做用
- 消费再均衡的原理是什么?(提示:消费者协调器和消费组协调器)
- Kafka中的幂等是怎么实现的
- Kafka中的事务是怎么实现的(这题我去面试6加被问4次,照着答案念也要念十几分钟,面试官简直凑不要脸。实在记不住的话...只要简历上不写精通Kafka通常不会问到,我简历上写的是“熟悉Kafka,了解RabbitMQ....”)
- Kafka中有那些地方须要选举?这些地方的选举策略又有哪些?
- 失效副本是指什么?有那些应对措施?
- 多副本下,各个副本中的HW和LEO的演变过程
- 为何Kafka不支持读写分离?
- Kafka在可靠性方面作了哪些改进?(HW, LeaderEpoch)
- Kafka中怎么实现死信队列和重试队列?
- Kafka中的延迟队列怎么实现(这题被问的比事务那题还要多!!!据说你会Kafka,那你说说延迟队列怎么实现?)
- Kafka中怎么作消息审计?
- Kafka中怎么作消息轨迹?
- Kafka中有那些配置参数比较有意思?聊一聊你的见解
- Kafka中有那些命名比较有意思?聊一聊你的见解
- Kafka有哪些指标须要着重关注?
- 怎么计算Lag?(注意read_uncommitted和read_committed状态下的不一样)
- Kafka的那些设计让它有如此高的性能?
- Kafka有什么优缺点?
- 还用过什么同质类的其它产品,与Kafka相比有什么优缺点?
- 为何选择Kafka?
- 在使用Kafka的过程当中遇到过什么困难?怎么解决的?
- 怎么样才能确保Kafka极大程度上的可靠性?
- 聊一聊你对Kafka生态的理解
通常来讲面试官关于Kafka会问的问题都是这些!若是上面的问题都能掌握,相信在面试Kafka的时候确定可以彻底应付缓存
面试答案领取方式:关注+转发+收藏加入群聊809389099便可免费获取哦!安全
关于优化的脑图,各位能够收藏一下!网络
若是对本文内容仍是不太理解的话,小编这里也整理了一套学习资料!多线程
资料领取方式:关注+转发+收藏后私信【java】便可免费获取分布式
对这篇文章有不一样的见解,欢迎在下面评论区留言!oop