面试惨败MQ?献上消息中间件解析合集:MQ+Kafka,助你吊打面试官!

前些日子有好多朋友都去投岗面试准备跳槽,面完回来跟我说碰到消息中间件一类的问题就挂了。额,有点不知所措,于是乎小编就想着做一次消息中间件的专题,归类整理了MQ(ActiveMQ/RabbitMQ/RocketMQ)+Kafka 等的纯手绘知识体系图、面试以及相关的学习笔记。

21.png

为了更好的梳理相关知识,咱们先看纯手绘知识体系图

1.1 Kafka知识体系大纲

22.png

由于我手绘这些知识体系大纲是用的xmind软件,无法上传,所以都以截图的形式展示,细节处不清楚(毕竟图片形式有限),不过可看【原图(点击获取)】!

1.2 RabbitMQ知识体系大纲

23.png

1.3 RocketMQ知识体系大纲

24.png

看完知识大纲,该刷面试了

2.1 刷刷Kafka面试

  1. Kafka的用途有哪些?使用场景如何?

  2. Kafka中的ISR、AR又代表什么?ISR的伸缩又指什么

  3. Kafka中的HW、LEO、LSO、LW等分别代表什么?

  4. Kafka中是怎么体现消息顺序性的?

  5. Kafka中的分区器、序列化器、拦截器是否了解?它们之间的处理顺序是什么?

  6. Kafka生产者客户端的整体结构是什么样子的?

  7. Kafka生产者客户端中使用了几个线程来处理?分别是什么?

  8. Kafka的旧版Scala的消费者客户端的设计有什么缺陷?

  9. “消费组中的消费者个数如果超过topic的分区,那么就会有消费者消费不到数据”这句话是否正确?如果正确,那么有没有什么hack的手段?

  10. 有哪些情形会造成重复消费?

  11. 哪些情景下会造成消息漏消费?

  12. KafkaConsumer是非线程安全的,那么怎么样实现多线程消费?

  13. 简述消费者与消费组之间的关系

  14. 当你使用kafka-topics.sh创建(删除)了一个topic之后,Kafka背后会执行什么逻辑?

  15. topic的分区数可不可以增加?如果可以怎么增加?如果不可以,那又是为什么?

  16. topic的分区数可不可以减少?如果可以怎么减少?如果不可以,那又是为什么?

  17. 创建topic时如何选择合适的分区数?

  18. Kafka目前有哪些内部topic,它们都有什么特征?各自的作用又是什么?

  19. 优先副本是什么?它有什么特殊的作用?

  20. Kafka有哪几处地方有分区分配的概念?简述大致的过程及原理

  21. 简述Kafka的日志目录结构

  22. Kafka中有哪些索引文件?

  23. 如果我指定了一个offset,Kafka怎么查找到对应的消息?

  24. 如果我指定了一个timestamp,Kafka怎么查找到对应的消息?

  25. 聊一聊你对Kafka的Log Retention的理解

  26. 聊一聊你对Kafka的Log Compaction的理解

  27. 聊一聊你对Kafka底层存储的理解

  28. 聊一聊Kafka的延时操作的原理

  29. 聊一聊Kafka控制器的作用

  30. Kafka的旧版Scala的消费者客户端的设计有什么缺陷?

  31. 消费再均衡的原理是什么?(提示:消费者协调器和消费组协调器)

  32. Kafka中的幂等是怎么实现的?

  33. Kafka中的事务是怎么实现的?

  34. 失效副本是指什么?有哪些应对措施?

  35. 多副本下,各个副本中的HW和LEO的演变过程

  36. Kafka在可靠性方面做了哪些改进?(HW, LeaderEpoch)

  37. 为什么Kafka不支持读写分离?

  38. Kafka中的延迟队列怎么实现

  39. Kafka中怎么实现死信队列和重试队列?

  40. Kafka中怎么做消息审计?

  41. Kafka中怎么做消息轨迹?

  42. 怎么计算Lag?(注意read_uncommitted和read_committed状态下的不同)

  43. Kafka有哪些指标需要着重关注?

  44. Kafka的哪些设计让它有如此高的性能?

2.2 刷刷ActiveMQ面试

  1. ActiveMQ 服务器宕机怎么办?

  2. 丢消息怎么办?

  3. 持久化消息非常慢

  4. 消息的不均匀消费

  5. 死信队列

  6. ActiveMQ 中的消息重发时间间隔和重发次数吗?

2.3 刷刷RabbitMQ面试

  1. RabbitMQ 中的 broker 是指什么?cluster 又是指什么?

  2. 什么是元数据?元数据分为哪些类型?包括哪些内容?与 cluster 相关的元数据有哪些?元数据是如何保存的?元数据在 cluster 中是如何分布的?

  3. RAM node 和 disk node 的区别?

  4. RabbitMQ 上的一个 queue 中存放的 message 是否有数量限制?

  5. RabbitMQ 概念里的 channel、exchange 和 queue 这些东东是逻辑概念,还是对应着进程实体?这些东东分别起什么作用?

  6. vhost 是什么?起什么作用?

  7. 在单 node 系统和多 node 构成的 cluster 系统中声明 queue、exchange ,以及进行 binding 会有什么不同?

  8. 客户端连接到 cluster 中的任意 node 上是否都能正常工作?

  9. 若 cluster 中拥有某个 queue 的 owner node 失效了,且该 queue 被声明具有durable 属性,是否能够成功从其他 node 上重新声明该 queue ?

  10. cluster 中 node 的失效会对 consumer 产生什么影响?若是在 cluster 中创建了mirrored queue ,这时 node 失效会对 consumer 产生什么影响?

  11. 能够在地理上分开的不同数据中心使用 RabbitMQ cluster 么?

  12. 为什么 heavy RPC 的使用场景下不建议采用 disk node ?

  13. 向不存在的 exchange 发 publish 消息会发生什么?向不存在的 queue 执行consume 动作会发生什么?

  14. routing_key 和 binding_key 的最大长度是多少?

  15. RabbitMQ 允许发送的 message 最大可达多大?

  16. 什么情况下 producer 不主动创建 queue 是安全的?

  17. “dead letter”queue 的用途?

  18. 为什么说保证 message 被可靠持久化的条件是 queue 和 exchange 具有durable 属性,同时 message 具有 persistent 属性才行?

  19. 什么情况下会出现 blackholed 问题?

  20. 如何防止出现 blackholed 问题?

  21. Consumer Cancellation Notification 机制用于什么场景?

  22. Basic.Reject 的用法是什么?

  23. 为什么不应该对所有的 message 都使用持久化机制?

  24. RabbitMQ 中的 cluster、mirrored queue,以及 warrens 机制分别用于解决什么问题?存在哪些问题?

全部刷题的答案已经整理好,如下题所示的PDF文件了


25.png

看完体系大纲+面试刷题,有知识漏洞那就继续往下看学习笔记

3.1 Kafka源码解析与实战

第1章 Kafka简介
第2章 Kafka的架构
第3章 Broker概述
第4章 Broker的基本模块
第5章 Broker的控制管理模块
第6章 Topic的管理工具
第7章 生产者
第8章 消费者
第9章 Kafka的典型应用
第10章 Kafka的综合实例

26.png
27.png

3.2 手写RocketMQ笔记

第一节:RocketMQ介绍
第二节:RocketMq中消息的发送
第三节:RocketMQ消息消费
第四节:深入消息发送
第五节:深入消息模式
第六节:顺序消息
第七节:延时消息
第八节:死信队列
第九节:消费幂等
第十节:消息过滤
第十一节:RocketMQ存储概要设计
第十二节:RocketMQ中的事务消息
第十三节:RocketMQ主从同步(HA)机制
第十四节:限时订单实战 第十五节:RocketMQ源码分析

28.png

![
30.png
31.png

一波操作猛如虎,我来总结中间件

关于消息中间件MQ(ActiveMQ/RabbitMQ/RocketMQ)+Kafka,小编从每个的知识体系大纲开始,进行知识唤醒与梳理,然后再去刷刷各大面试高频题(附有详细的答案),最后在知识出现纰漏时尽快弥补(查找学习笔记)。

32.png
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,290评论 6 491
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,107评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,872评论 0 347
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,415评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,453评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,784评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,927评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,691评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,137评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,472评论 2 326
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,622评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,289评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,887评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,741评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,977评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,316评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,490评论 2 348

推荐阅读更多精彩内容