〖课程介绍〗:

  •   本课从搭建开始，全面剖析Kafka，解读和使用核心API，将底层实现和设计原理融合贯穿，同时结合案例，把原理落地。更有凝结老师心血的Kafka最佳配置方式推荐，以及面试常问知识点梳理。



〖课程目录〗:

  • 第1章 课程导学与学习指南 4 节 | 9分钟


  • 本节主要进行课程的介绍，学习路线与指南，如何更好的学习本课程，为什么要学习本课程，学习本课程具体能收获什么？




    • 视频：1-1 导学 (08:27)

    • 图文：1-2 怎么更好的使用慕课平台？

    • 图文：1-3 如何提一个好问题，得到老师最大程度的帮助呢？

    • 作业：1-4 【讨论题】学习中如何做总结


  • 第2章 Kafka入门——开发环境准备7 节 | 34分钟


  • 带你从0起步，在正式安装Kafka之前，先搭建好开发环境




    • 视频：2-1 环境准备 (11:15)

    • 视频：2-2 VMware安装 (04:18)

    • 视频：2-3 VMware添加Centos镜像 (03:16)

    • 视频：2-4 CentOS7安装 (07:20)

    • 视频：2-5 XShell使用介绍 (05:16)

    • 视频：2-6 环境准备常见问题介绍 (02:05)

    • 作业：2-7 【总结】Kafka和MQ的区别，以及设计过程如何区别


  • 第3章 Kafka入门——Kafka基础操作 7 节 | 29分钟


  • 带你快速的上手Kafka，了解Kafka的常见命令、基本概念。理解基本概念之间的关系，特别是Topic与Partition之间的关系。




    • 视频：3-1 章节介绍 (01:37)

    • 视频：3-2 kafka自我介绍 (03:44)

    • 视频：3-3 JDK安装 (05:13)

    • 视频：3-4 Zookeeper安装启动 (02:27)

    • 视频：3-5 kafka配置 (02:07)

    • 视频：3-6 Kafka基本概念及使用演示 (13:04)

    • 作业：3-7 列举几个Kafka在大数据的应用场景


  • 第4章 Kafka核心API——Kafka客户端操作 11 节 | 62分钟


  • 开始正式讲授Kafka的API，先从客户端操作开始，学会创建查看删除Topic。Topic配置信息修改和Partition增加。




    • 视频：4-1 内容概述 (01:17)

    • 视频：4-2 五类Kafka客户端作用和区别 (03:54)

    • 视频：4-3 学习准备-初始化工程 (05:58)

    • 视频：4-4 AdminClient客户端建立 (07:53)

    • 视频：4-5 创建Topic演示 (05:50)

    • 视频：4-6 查看Topic列表及Internal杂谈 (07:01)

    • 视频：4-7 删除Topic (02:44)

    • 视频：4-8 Topic描述信息查看 (05:41)

    • 视频：4-9 Topic配置信息查看 (06:49)

    • 视频：4-10 Topic配置信息修改 (09:25)

    • 视频：4-11 Partition增加 (05:10)


  • 第5章 Kafka核心API——Producer生产者10 节 | 55分钟


  • 介绍Kafka Producer的发送消息的几种方式，以及发送原理。Producer一共有三种发送模式：同步、异步、异步回调，其发送原理也分为：直接发送、负载均衡、异步发送。本章会结合实战小案例、源码与画图帮助同学理解。




    • 视频：5-1 Producer章节介绍 (01:46)

    • 视频：5-2 Producer异步发送演示 (10:49)

    • 视频：5-3 Producer异步阻塞发送演示 (04:37)

    • 视频：5-4 Producer异步回调发送演示 (04:22)

    • 视频：5-5 Producer源码讲解 (12:23)

    • 视频：5-6 Producer生产者原理 (06:04)

    • 视频：5-7 Producer自定义Partition负载均衡 (08:27)

    • 视频：5-8 消息传递保障 (06:06)

    • 图文：5-9 Producer发送数据带自定义分区情况下，打印日志发现会出现多条重复问题分析

    • 作业：5-10 如果让你设计一个消息队列，你会考虑几个方面


  • 第6章 实战“慕问卷”开发 —— 微信小程序部分14 节 | 108分钟


  • 现在我们趁热打铁，对前面所学的知识做一个综合实战。这里主要锻炼Producer的使用。完成“慕问卷”的小程序后端与Kafka的交互。




    • 视频：6-1 Producer实现介绍 (02:36)

    • 视频：6-2 微信小程序业务介绍 (05:27)

    • 视频：6-3 基础环境准备 (08:23)

    • 视频：6-4 微信模板配置创建及解析 (13:14)

    • 视频：6-5 微信小程序后台逻辑层实现 (08:16)

    • 视频：6-6 微信小程序表现层基础构建 (04:20)

    • 视频：6-7 微信小程序表现层实现 (04:04)

    • 视频：6-8 微信小程序业务测试 (02:53)

    • 视频：6-9 Kafka Producer集成 (21:55)

    • 视频：6-10 CA证书申请及域名绑定 (05:19)

    • 视频：6-11 Springboot工程集成SSL证书 (06:05)

    • 视频：6-12 阿里云部署微信小程序后端 (08:16)

    • 视频：6-13 微信小程序部署准备工作 (06:15)

    • 视频：6-14 微信小程序编译部署 (10:53)


  • 第7章 Kafka核心API——Consumer10 节 | 80分钟


  • 接下来介绍另一个非常重要的核心API。讲授Consumer Group、offset、Rebalance等关键概念，并手把手进行演练开发




    • 视频：7-1 Consumer介绍 (02:27)

    • 视频：7-2 Consumer之HelloWorld (08:04)

    • 视频：7-3 Consumer之手动提交 (07:52)

    • 视频：7-4 Consumer演示观后感 (07:23)

    • 视频：7-5 Consumer单Partition提交offset (11:31)

    • 视频：7-6 Consumer手动控制一到多个分区 (05:42)

    • 视频：7-7 Consumer多线程并发处理 (10:12)

    • 视频：7-8 Consumer控制offset起始位置 (09:57)

    • 视频：7-9 面试点：Consumer限流 (10:48)

    • 视频：7-10 面试点：Consumer Rebalance解析 (05:15)


  • 第8章 Kafka核心API——Stream7 节 | 42分钟


  • 除了消费者与生产者，Kafka作为流处理平台，还有一个非常重要的API：Stream。本章讲授Kafka的流处理过程，了解基本概念及关键词。掌握 Kafka Stream 的高层架构。完成相关开发




    • 视频：8-1 Kafka Stream介绍 (00:58)

    • 视频：8-2 Kafka Stream概念及初识高层架构图 (02:58)

    • 视频：8-3 Kafka Stream 核心概念讲解 (03:16)

    • 视频：8-4 Kafka Stream 演示准备 (06:03)

    • 视频：8-5 Kafka Stream使用演示 (14:12)

    • 视频：8-6 Kafka Stream程序解析 (09:09)

    • 视频：8-7 Kafka Stream算子演示讲解 (04:38)


  • 第9章 Kafka核心API——Connect6 节 | 38分钟


  • 本章我们学习最后一个核心API：Connect，它主要用来与其他中间件建立流式通道。本章我们会逐步了解其中的基本概念和关键词。进而掌握高级架构和使用。




    • 视频：9-1 Kafka Connect章节介绍 (00:37)

    • 视频：9-2 Kafka Connect基本概念介绍 (03:22)

    • 视频：9-3 Kakfa Connect环境准备 (13:51)

    • 视频：9-4 Kafka Connect Source和MySQL集成 (06:22)

    • 视频：9-5 Kafka Connect Sink和MySQL集成 (05:30)

    • 视频：9-6 Kafka Connect原理及使用场景介绍 (07:20)


  • 第10章 Kafka集群部署与开发8 节 | 41分钟


  • 本章将带领大家完成Kafka的集群部署及相应的开发，同时演示如何使用Zookeeper完成包括Broker注册、Topic注册等




    • 视频：10-1 Kafka集群篇介绍 (01:04)

    • 视频：10-2 Kafka集群部署配置讲解 (04:41)

    • 视频：10-3 Kafka集群部署并启动 (04:27)

    • 视频：10-4 Kafka副本集-1 (03:41)

    • 视频：10-5 Kafka副本集-2 (05:22)

    • 视频：10-6 图解Kafka集群基本概念 (05:30)

    • 视频：10-7 Kafka节点故障原因及处理方式 (06:05)

    • 视频：10-8 面试点：Kafka Leader选举机制 (09:35)


  • 第11章 Kafka集群监控、安全与最佳实践9 节 | 69分钟


  • 本章节介绍了成熟的第三方管理界面 Kafka Manager的使用，Kafka的监控与安全防范措施，讲述如何在生产环境下安全使用Kafka。并且介绍了Kafka的部署及配置调优，给出经验之谈，推荐最佳实践方式




    • 视频：11-1 集群监控安全介绍 (01:20)

    • 视频：11-2 Kafka监控安装 (07:51)

    • 视频：11-3 Kafka监控界面讲解 (11:31)

    • 视频：11-4 Kafka SSL签名库生成 (08:38)

    • 视频：11-5 Kafka SSL服务端集成 (07:07)

    • 视频：11-6 Kafka SSL客户端集成 (09:11)

    • 视频：11-7 Kafka最佳实践介绍 (03:43)

    • 视频：11-8 Kafka最佳实践配置项讲解 (11:01)

    • 视频：11-9 Kafka服务器配置最佳实践讲解 (07:48)


  • 第12章 实战“慕问卷”开发 —— 集成微服务12 节 | 59分钟


  • 本章会在第6章基础上，分别介绍Spring Cloud Config和Spring Cloud Bus，搭建服务总线和消息总线。让大家体验Kafka和微服务的整合使用。完善“慕问卷”的开发。




    • 视频：12-1 SpringCloud Config内容介绍 (01:45)

    • 视频：12-2 SpringCloud Config架构图介绍 (04:33)

    • 视频：12-3 SpringCloud演示环境准备 (05:05)

    • 视频：12-4 SpringCloud Config Server配置使用 (08:01)

    • 视频：12-5 SpringCloud Client配置使用 (05:26)

    • 视频：12-6 SpringCloud Config动态刷新准备 (05:57)

    • 视频：12-7 SpringCloud Config 动态刷新演示 (04:47)

    • 视频：12-8 SpringCloud Config配置使用环节回顾 (01:31)

    • 视频：12-9 SpringCloud Bus内容介绍 (01:02)

    • 视频：12-10 SpringCloud Bus架构图讲解 (06:43)

    • 视频：12-11 SpringCloud Bus动态刷新使用演示 (05:18)

    • 视频：12-12 SpringCloud Bus演示多服务动态刷新 (08:47)


  • 第13章 Kafka面试点梳理15 节 | 135分钟


  • 本章会对前面零散提到的面试点进行梳理，并做补充，使大家头脑中形成一个完整的Kafka体系，又能明确考察重点。帮助大家度过面试难关。




    • 视频：13-1 Kafka面试题内容介绍及面试建议 (03:50)

    • 视频：13-2 Kafka概念及优劣势分析 (11:34)

    • 视频：13-3 Kafka吞吐量大的原因分析 (05:15)

    • 视频：13-4 Kafka日志检索底层原理 (13:03)

    • 视频：13-5 Kafka 零拷贝原理分析 (05:13)

    • 视频：13-6 消费者组与消费者 (03:34)

    • 视频：13-7 Producer客户端 (05:13)

    • 视频：13-8 Kafka消息有序性处理 (05:24)

    • 视频：13-9 Kafka Topic删除背后的故事 (08:01)

    • 视频：13-10 消息重复消费和漏消费原理分析 (18:01)

    • 视频：13-11 消费者线程安全性分析 (07:10)

    • 视频：13-12 Kafka Leader选举分析 (14:50)

    • 视频：13-13 Kafka幂等性源码分析 (16:20)

    • 视频：13-14 Kafka事务支持实现及原理分析 (17:18)

    • 作业：13-15 总结Kafka面试问题