追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神( 二 )


部分内容
07kafka的消费者7.1消费者的入门
7.1.1消费者群组7.1.2消费者配置7.2消费者中的基础概念
7.2.1消费者群组7.2.2订阅7.2.3轮询7.2.4提交和偏移量7.3消费者中的核心概念
7.4kafka中的消费安全
7.5消费者提交偏移量导致的问题
7.5.1自动提交7.5.2手动提交(同步)7.5.3异步提交7.5.4同步和异步组合7.5.5特定提交7.6分区再均衡
7.7优雅1退出
7.8反序列化
7.9独立消费者
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
08深入理解kafka8.1集群的成员关系
8.2什么是控制器
8.3复制-kafka的核心
8.3.1replication-factor8.3.2副本类型8.3.3工作机制8.4处理请求的内部机制
8.4.1生产请求8.4.2获取请求8.4.3ISR8.5物理存储机制
8.5.1分区分配8.5.2文件管理8.5.3文件格式8.5.4索引8.5.5超时数据的清理机制
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
09可靠的数据传递9.1kafka提供的可靠性保证和架构上的权衡
9.2复制
9.3Broker配置对可靠性的影响
9.3.1复制系数9.3.2不完全的首领选举9.3.3最少同步副本9.4可靠系统里的生产者
9.4.1发送确认9.4.2配置生产者的重试参数9.4.3额外的错误处理9.5可靠系统里的消费者
9.5.1消费者的可靠性配置9.5.2显式提交偏移量
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
10kafka和Spring的整合10.1与Spring集成
10.1.1pom文件10.1.2统一配置10.1.3生产者端10.1.4消费者端
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
11SpringBoot和kafka的整合
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
12kafka实战之削峰填谷13数据管道和流式处理(了解即可)13.1数据管道基本概念
13.2流式处理基本概念
追逐仰望星空|看完他的手写“Kafka笔记”,万分膜拜,公司来了位阿里P8大神
文章图片
部分内容
上面都是在说大牛的手写“Kafka笔记” , 下面来谈谈kafka面试关于kafka面试这一块 , 前阵子有收集一份面试真题(从基础[17]-进阶[15]-高阶[12] , 总共44道题)
1.Kafka的用途有哪些?使用场景如何?
2.Kafka中的ISR、AR又代表什么?ISR的伸缩又指什么
3.Kafka中的HW、LEO、LSO、LW等分别代表什么?
4.Kafka中是怎么体现消息顺序性的?
5.Kafka中的分区器、序列化器、拦截器是否了解?它们之间的处理顺序是什么?
6.Kafka生产者客户端的整体结构是什么样子的?
7.Kafka生产者客户端中使用了几个线程来处理?分别是什么?
8.Kafka的旧版Scala的消费者客户端的设计有什么缺陷?
9.“消费组中的消费者个数如果超过topic的分区 , 那么就会有消费者消费不到数据”这句话是否正确?如果正确 , 那么有没有什么hack的手段?
10.有哪些情形会造成重复消费?
11.哪些情景下会造成消息漏消费?
12.KafkaConsumer是非线程安全的 , 那么怎么样实现多线程消费?
13.简述消费者与消费组之间的关系
14.当你使用kafka-topics.sh创建(删除)了一个topic之后 , Kafka背后会执行什么逻辑?