Kafka多维度系统精讲，从入门到熟练掌握
集核心API剖析+应用实战+最优配置+面试考点于一体
本课从搭建开始，全面剖析Kafka，解读和使用核心API，将底层实现和设计原理融合贯穿，同时结合案例，把原理落地。更有凝结老师心血的Kafka最佳配置方式推荐，以及面试常问知识点梳理。
所有后端开发者
在面试或者工作中使用Kafka的同学
技术储备要求
掌握基础的java语法
了解SpringBoot+Mybatis开发
了解linux常见命令
章节目录
-
第1章 课程导学与学习指南 试看4 节 | 9分钟
本节主要进行课程的介绍，学习路线与指南，如何更好的学习本课程，为什么要学习本课程，学习本课程具体能收获什么？
收起列表
- 视频：1-1 导学 (08:27)试看
- 图文：1-2 怎么更好的使用慕课平台？
- 图文：1-3 如何提一个好问题，得到老师最大程度的帮助呢？
- 作业：1-4 【讨论题】学习中如何做总结
-
第2章 Kafka入门——开发环境准备7 节 | 34分钟
带你从0起步，在正式安装Kafka之前，先搭建好开发环境
收起列表
- 视频：2-1 环境准备 (11:15)
- 视频：2-2 VMware安装 (04:18)
- 视频：2-3 VMware添加Centos镜像 (03:16)
- 视频：2-4 CentOS7安装 (07:20)
- 视频：2-5 XShell使用介绍 (05:16)
- 视频：2-6 环境准备常见问题介绍 (02:05)
- 作业：2-7 【总结】Kafka和MQ的区别，以及设计过程如何区别
-
第3章 Kafka入门——Kafka基础操作 试看7 节 | 29分钟
带你快速的上手Kafka，了解Kafka的常见命令、基本概念。理解基本概念之间的关系，特别是Topic与Partition之间的关系。
收起列表
- 视频：3-1 章节介绍 (01:37)
- 视频：3-2 kafka自我介绍 (03:44)试看
- 视频：3-3 JDK安装 (05:13)
- 视频：3-4 Zookeeper安装启动 (02:27)
- 视频：3-5 kafka配置 (02:07)
- 视频：3-6 Kafka基本概念及使用演示 (13:04)
- 作业：3-7 列举几个Kafka在大数据的应用场景
-
第4章 Kafka核心API——Kafka客户端操作 试看11 节 | 62分钟
开始正式讲授Kafka的API，先从客户端操作开始，学会创建查看删除Topic。Topic配置信息修改和Partition增加。
收起列表
- 视频：4-1 内容概述 (01:17)
- 视频：4-2 五类Kafka客户端作用和区别 (03:54)
- 视频：4-3 学习准备-初始化工程 (05:58)
- 视频：4-4 AdminClient客户端建立 (07:53)
- 视频：4-5 创建Topic演示 (05:50)试看
- 视频：4-6 查看Topic列表及Internal杂谈 (07:01)
- 视频：4-7 删除Topic (02:44)
- 视频：4-8 Topic描述信息查看 (05:41)
- 视频：4-9 Topic配置信息查看 (06:49)
- 视频：4-10 Topic配置信息修改 (09:25)
- 视频：4-11 Partition增加 (05:10)
-
第5章 Kafka核心API——Producer生产者10 节 | 55分钟
介绍Kafka Producer的发送消息的几种方式，以及发送原理。Producer一共有三种发送模式：同步、异步、异步回调，其发送原理也分为：直接发送、负载均衡、异步发送。本章会结合实战小案例、源码与画图帮助同学理解。
收起列表
- 视频：5-1 Producer章节介绍 (01:46)
- 视频：5-2 Producer异步发送演示 (10:49)
- 视频：5-3 Producer异步阻塞发送演示 (04:37)
- 视频：5-4 Producer异步回调发送演示 (04:22)
- 视频：5-5 Producer源码讲解 (12:23)
- 视频：5-6 Producer生产者原理 (06:04)
- 视频：5-7 Producer自定义Partition负载均衡 (08:27)
- 视频：5-8 消息传递保障 (06:06)
- 图文：5-9 Producer发送数据带自定义分区情况下，打印日志发现会出现多条重复问题分析
- 作业：5-10 如果让你设计一个消息队列，你会考虑几个方面
-
第6章 实战“慕问卷”开发 —— 微信小程序部分14 节 | 108分钟
现在我们趁热打铁，对前面所学的知识做一个综合实战。这里主要锻炼Producer的使用。完成“慕问卷”的小程序后端与Kafka的交互。
收起列表
- 视频：6-1 Producer实现介绍 (02:36)
- 视频：6-2 微信小程序业务介绍 (05:27)
- 视频：6-3 基础环境准备 (08:23)
- 视频：6-4 微信模板配置创建及解析 (13:14)
- 视频：6-5 微信小程序后台逻辑层实现 (08:16)
- 视频：6-6 微信小程序表现层基础构建 (04:20)
- 视频：6-7 微信小程序表现层实现 (04:04)
- 视频：6-8 微信小程序业务测试 (02:53)
- 视频：6-9 Kafka Producer集成 (21:55)
- 视频：6-10 CA证书申请及域名绑定 (05:19)
- 视频：6-11 Springboot工程集成SSL证书 (06:05)
- 视频：6-12 阿里云部署微信小程序后端 (08:16)
- 视频：6-13 微信小程序部署准备工作 (06:15)
- 视频：6-14 微信小程序编译部署 (10:53)
-
第7章 Kafka核心API——Consumer10 节 | 80分钟
接下来介绍另一个非常重要的核心API。讲授Consumer Group、offset、Rebalance等关键概念，并手把手进行演练开发
收起列表
- 视频：7-1 Consumer介绍 (02:27)
- 视频：7-2 Consumer之HelloWorld (08:04)
- 视频：7-3 Consumer之手动提交 (07:52)
- 视频：7-4 Consumer演示观后感 (07:23)
- 视频：7-5 Consumer单Partition提交offset (11:31)
- 视频：7-6 Consumer手动控制一到多个分区 (05:42)
- 视频：7-7 Consumer多线程并发处理 (10:12)
- 视频：7-8 Consumer控制offset起始位置 (09:57)
- 视频：7-9 面试点：Consumer限流 (10:48)
- 视频：7-10 面试点：Consumer Rebalance解析 (05:15)
-
第8章 Kafka核心API——Stream7 节 | 42分钟
除了消费者与生产者，Kafka作为流处理平台，还有一个非常重要的API：Stream。本章讲授Kafka的流处理过程，了解基本概念及关键词。掌握 Kafka Stream 的高层架构。完成相关开发
收起列表
- 视频：8-1 Kafka Stream介绍 (00:58)
- 视频：8-2 Kafka Stream概念及初识高层架构图 (02:58)
- 视频：8-3 Kafka Stream 核心概念讲解 (03:16)
- 视频：8-4 Kafka Stream 演示准备 (06:03)
- 视频：8-5 Kafka Stream使用演示 (14:12)
- 视频：8-6 Kafka Stream程序解析 (09:09)
- 视频：8-7 Kafka Stream算子演示讲解 (04:38)
-
第9章 Kafka核心API——Connect6 节 | 38分钟
本章我们学习最后一个核心API：Connect，它主要用来与其他中间件建立流式通道。本章我们会逐步了解其中的基本概念和关键词。进而掌握高级架构和使用。
收起列表
- 视频：9-1 Kafka Connect章节介绍 (00:37)
- 视频：9-2 Kafka Connect基本概念介绍 (03:22)
- 视频：9-3 Kakfa Connect环境准备 (13:51)
- 视频：9-4 Kafka Connect Source和MySQL集成 (06:22)
- 视频：9-5 Kafka Connect Sink和MySQL集成 (05:30)
- 视频：9-6 Kafka Connect原理及使用场景介绍 (07:20)
-
第10章 Kafka集群部署与开发8 节 | 41分钟
本章将带领大家完成Kafka的集群部署及相应的开发，同时演示如何使用Zookeeper完成包括Broker注册、Topic注册等
收起列表
- 视频：10-1 Kafka集群篇介绍 (01:04)
- 视频：10-2 Kafka集群部署配置讲解 (04:41)
- 视频：10-3 Kafka集群部署并启动 (04:27)
- 视频：10-4 Kafka副本集-1 (03:41)
- 视频：10-5 Kafka副本集-2 (05:22)
- 视频：10-6 图解Kafka集群基本概念 (05:30)
- 视频：10-7 Kafka节点故障原因及处理方式 (06:05)
- 视频：10-8 面试点：Kafka Leader选举机制 (09:35)
-
第11章 Kafka集群监控、安全与最佳实践9 节 | 69分钟
本章节介绍了成熟的第三方管理界面 Kafka Manager的使用，Kafka的监控与安全防范措施，讲述如何在生产环境下安全使用Kafka。并且介绍了Kafka的部署及配置调优，给出经验之谈，推荐最佳实践方式
收起列表
- 视频：11-1 集群监控安全介绍 (01:20)
- 视频：11-2 Kafka监控安装 (07:51)
- 视频：11-3 Kafka监控界面讲解 (11:31)
- 视频：11-4 Kafka SSL签名库生成 (08:38)
- 视频：11-5 Kafka SSL服务端集成 (07:07)
- 视频：11-6 Kafka SSL客户端集成 (09:11)
- 视频：11-7 Kafka最佳实践介绍 (03:43)
- 视频：11-8 Kafka最佳实践配置项讲解 (11:01)
- 视频：11-9 Kafka服务器配置最佳实践讲解 (07:48)
-
第12章 实战“慕问卷”开发 —— 集成微服务12 节 | 59分钟
本章会在第6章基础上，分别介绍Spring Cloud Config和Spring Cloud Bus，搭建服务总线和消息总线。让大家体验Kafka和微服务的整合使用。完善“慕问卷”的开发。
收起列表
- 视频：12-1 SpringCloud Config内容介绍 (01:45)
- 视频：12-2 SpringCloud Config架构图介绍 (04:33)
- 视频：12-3 SpringCloud演示环境准备 (05:05)
- 视频：12-4 SpringCloud Config Server配置使用 (08:01)
- 视频：12-5 SpringCloud Client配置使用 (05:26)
- 视频：12-6 SpringCloud Config动态刷新准备 (05:57)
- 视频：12-7 SpringCloud Config 动态刷新演示 (04:47)
- 视频：12-8 SpringCloud Config配置使用环节回顾 (01:31)
- 视频：12-9 SpringCloud Bus内容介绍 (01:02)
- 视频：12-10 SpringCloud Bus架构图讲解 (06:43)
- 视频：12-11 SpringCloud Bus动态刷新使用演示 (05:18)
- 视频：12-12 SpringCloud Bus演示多服务动态刷新 (08:47)
-
第13章 Kafka面试点梳理15 节 | 135分钟
本章会对前面零散提到的面试点进行梳理，并做补充，使大家头脑中形成一个完整的Kafka体系，又能明确考察重点。帮助大家度过面试难关。
收起列表
- 视频：13-1 Kafka面试题内容介绍及面试建议 (03:50)
- 视频：13-2 Kafka概念及优劣势分析 (11:34)
- 视频：13-3 Kafka吞吐量大的原因分析 (05:15)
- 视频：13-4 Kafka日志检索底层原理 (13:03)
- 视频：13-5 Kafka 零拷贝原理分析 (05:13)
- 视频：13-6 消费者组与消费者 (03:34)
- 视频：13-7 Producer客户端 (05:13)
- 视频：13-8 Kafka消息有序性处理 (05:24)
- 视频：13-9 Kafka Topic删除背后的故事 (08:01)
- 视频：13-10 消息重复消费和漏消费原理分析 (18:01)
- 视频：13-11 消费者线程安全性分析 (07:10)
- 视频：13-12 Kafka Leader选举分析 (14:50)
- 视频：13-13 Kafka幂等性源码分析 (16:20)
- 视频：13-14 Kafka事务支持实现及原理分析 (17:18)
- 作业：13-15 总结Kafka面试问题
