kafka学习记录


尚硅谷Kafka教程,2024新版kafka视频,零基础入门到实战

【尚硅谷】Kafka3.x教程(从入门到调优,深入全面)

Kafka 3.0 基础知识 + 原理 (了解一篇就够)

windows单机版kafka

搭建步骤

在这里插入图片描述
将文件夹名改为local
在这里插入图片描述
在local文件夹下创建data目录,然后修改local下的config目录下的zookeeper.properties文件
在这里插入图片描述

启动zookeeper

在这里插入图片描述

修改config目录中的server.properties文件
在这里插入图片描述

启动kafka
在这里插入图片描述

编写zk.cmd和kafka.cmd,然后就可以双击启动zookeeper和kafka了
在这里插入图片描述

主题的增删改查操作

主题的增删改查操作(注意:删除主题会由于windows权限问题而导致kafka进程关闭。遇到问题,把data目录下的所有文件夹删掉就行了,然后重新启动zk和kafka,反正就是个本地环境而已)
在这里插入图片描述

消息的生产与消费

在这里插入图片描述

kafkatool小工具
在这里插入图片描述

Windows集群版kafka

搭建步骤

将kafka_2.12-3.6.1.tgz解压到D:\kafka\kafka-cluster目录下,并拷贝3份,一共4份,分别命名为kafka-zk、kafka-1、kafka-2、kafka-3。
在这里插入图片描述
在kafka-zk目录下创建data目录,并修改config/zookeeper.properties文件
在这里插入图片描述

在这里插入图片描述

在kafka-1中创建data目录,并修改config/server.properties文件。因为zk默认就是连本机的zk服务器,并且端口是2181所以就不用修改了。然后kafka-2、kafka-3作同样修改,注意端口、目录、broker.id分别配置即可
在这里插入图片描述
在这里插入图片描述
依次启动zk、kafka-1、kafka-2、kafka-3
在这里插入图片描述

为了方便启动,在kafka-zk下创建zk.cmd启动脚本,在kafka-{n}下创建kafka.cmd(其它2个与这个完全一样),然后在kafka-clsuter下创建cluster.cmd和cluster-clear.cmd
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

双击cluster.cmd即可启动kafka集群
在这里插入图片描述
打开kafkatool软件(连接的时候,填zookeeper的ip和端口即可),即可连接成功
在这里插入图片描述

关闭kafka命令窗口后,双击cluster.cmd即可清理各个文件夹中的data目录(当遇到错误时,可执行此操作)

prettyZoo

zookeeper的作用

  1. 在ZooKeeper软件中创建节点Node,创建一个Node时,我们会设定这个节点是持久化创建,还是临时创建。所谓的持久化创建,就是Node一旦创建后会一直存在,而临时创建,是根据当前的客户端连接创建的临时节点Node,一旦客户端连接断开,那么这个临时节点Node也会被自动删除,所以这样的节点称之为临时节点。

  2. ZooKeeper节点是不允许有重复的,所以多个客户端创建同一个节点,只能有一个创建成功。

  3. 另外一个是客户端可以在ZooKeeper的节点上增加监听器,用于监听节点的状态变化,一旦监听的节点状态发生变化,那么监听器就会触发响应,实现特定监听功能。

可以使用prettyZoo这个可视化软件查看zookeeper服务的节点,先启动kafka的zk服务,然后用prettyZoo连上去。然后再启动kafka单机版本的那个,再看prettyZoo的变化。

启动单机版的kafka,观察PrettyZoo

在这里插入图片描述
在这里插入图片描述
启动kafka服务后,发现节点变多了
在这里插入图片描述

启动集群版的kafka,观察PrettyZoo

在这里插入图片描述

相关推荐

  1. kafka3.0.0学习记录

    2024-04-14 18:16:01       51 阅读
  2. kafka hang 问题记录

    2024-04-14 18:16:01       52 阅读
  3. 学习kafka

    2024-04-14 18:16:01       65 阅读
  4. kafka学习

    2024-04-14 18:16:01       50 阅读
  5. Kafka学习

    2024-04-14 18:16:01       57 阅读
  6. Kafka学习

    2024-04-14 18:16:01       33 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-14 18:16:01       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-14 18:16:01       106 阅读
  3. 在Django里面运行非项目文件

    2024-04-14 18:16:01       87 阅读
  4. Python语言-面向对象

    2024-04-14 18:16:01       96 阅读

热门阅读

  1. 如何新建一个React前端项目?

    2024-04-14 18:16:01       34 阅读
  2. 软件包名生成参考

    2024-04-14 18:16:01       29 阅读
  3. IntelliJ IDEA 代码编辑利器:快速配置技巧精要

    2024-04-14 18:16:01       34 阅读
  4. Linux C++ 034-STL之谓词

    2024-04-14 18:16:01       34 阅读
  5. 从零学算法1702

    2024-04-14 18:16:01       35 阅读
  6. 数据结构之查找的总结

    2024-04-14 18:16:01       37 阅读
  7. 喊7游戏 python版

    2024-04-14 18:16:01       35 阅读
  8. Unity自定义框架(2)-----------事件中心

    2024-04-14 18:16:01       39 阅读
  9. ucore 实验物理内存管理篇

    2024-04-14 18:16:01       33 阅读