Ubuntu22.04下安装kafka_2.11-0.10.1.0并运行简单实例

sudo tar -zxf ~/下载/kafka_2.11-0.10.1.0.tgz -C /usr/local
cd /usr/local
sudo mv kafka_2.11-0.10.1.0/ ./kafka
sudo chown -R hadoop ./kafka    # 此处的 hadoop 为你的用户名

sudo tar -zxf ~/下载/kafka_2.11-0.10.1.0.tgz -C /usr/local：

使用 sudo 权限解压缩并解包 Kafka 压缩包文件 kafka_2.11-0.10.1.0.tgz
-zxf 参数表示使用 gzip 解压缩，并且是解包操作
~/下载/kafka_2.11-0.10.1.0.tgz 是 Kafka 压缩包的路径
-C /usr/local 指定了解压缩后的文件应该放置的目标路径为 /usr/local

cd /usr/local：

切换当前工作目录到 /usr/local

sudo mv kafka_2.11-0.10.1.0/ ./kafka：

使用 sudo 权限将 Kafka 解压后的文件夹 kafka_2.11-0.10.1.0 重命名为 kafka
./kafka 意味着将文件夹移动到当前目录下，也就是 /usr/local 目录

sudo chown -R hadoop ./kafka：

使用 sudo 权限递归地更改 kafka 文件夹及其所有子文件和子文件夹的所有者为 hadoop 用户
-R 参数表示递归地更改权限

至此，Kafka安装完成，下面在Ubuntu系统环境下测试简单的实例

三、启动Kafka并测试Kafka是否正常工作

1.启动Kafka

打开第一个终端，输入下面命令启动Zookeeper服务：

cd /usr/local/kafka
./bin/zookeeper-server-start.sh config/zookeeper.properties

千万不要关闭这个终端窗口，一旦关闭，Zookeeper服务就停止了（Kafka工作运行完毕后不再使用时再关闭）

打开第二个终端，然后输入下面命令启动Kafka服务：

cd /usr/local/kafka
bin/kafka-server-start.sh config/server.properties

千万不要关闭这个终端窗口，一旦关闭，Kafka服务就停止了（Kafka工作运行完毕后不再使用时再关闭）

2.测试Kafka是否正常工作

再打开第三个终端，然后输入下面命令创建一个自定义名称为“wordsendertest”的Topic：

cd /usr/local/kafka
./bin/kafka-topics.sh  --create  --zookeeper  localhost:2181 --replication-factor  1  --partitions  1  --topic  wordsendertest
#可以用list列出所有创建的Topic，验证是否创建成功
./bin/kafka-topics.sh  --list  --zookeeper  localhost:2181

kafka-topics.sh：Kafka 提供的命令行工具，用于管理 Kafka 主题（topics）
--create：指示命令要创建一个新的主题
--zookeeper localhost:2181：指定ZooKeeper 的连接地址，Kafka 使用 ZooKeeper 来管理集群的状态信息。在此，localhost:2181 表示 ZooKeeper 运行在本地主机上，端口号为2181
--replication-factor 1：指定主题的副本因子（replication factor），即该主题的每个分区的数据将被复制到几个副本中。这里设置为1，表示每个分区只有一个副本
--partitions 1：指定主题的分区数。分区用于将主题的数据分散存储和处理，可以提高性能和扩展性。这里设置为1，表示只有一个分区
--topic dblab：指定要创建的主题的名称，这里命名为 "dblab"。在本地主机上创建一个名为 "dblab" 的 Kafka 主题，该主题具有1个副本因子和1个分区

下面用生产者（Producer）来产生一些数据，请在当前终端（记作“数据源终端”）内继续输入下面命令：

./bin/kafka-console-producer.sh  --broker-list  localhost:9092 --topic  wordsendertest

- kafka-console-producer.sh： Kafka 提供的命令行工具，用于在控制台上向 Kafka 主题发送消息
--broker-list localhost:9092：指定Kafka 集群的 broker 地址列表，用于指定消息要发送到哪个 Kafka 集群。在此，localhost:9092 表示 Kafka 集群的一个 broker 运行在本地主机上，端口号为9092
--topic dblab：指定要发送消息的目标主题，这里是 "dblab"。在本地主机上向名为 "dblab" 的 Kafka 主题发送消息

上面命令执行后，就可以在当前终端内用键盘输入一些英文单词（也可以等消费者启用后再输入）

现在可以启动一个消费者（Consumer），来查看刚才生产者产生的数据。请另外打开第四个终端，输入下面命令：

cd /usr/local/kafka
./bin/kafka-console-consumer.sh  --zookeeper  localhost:2181 --topic  wordsendertest  --from-beginning

- kafka-console-consumer.sh：Kafka 提供的命令行工具，用于在控制台上消费 Kafka 主题的消息
--zookeeper localhost:2181：指定了 ZooKeeper 的连接地址，Kafka 使用 ZooKeeper 来管理集群的状态信息。在此，localhost:2181 表示 ZooKeeper 运行在本地主机上，端口号为2181。尽管在较新的 Kafka 版本中，已经不再需要指定 ZooKeeper 地址，而是直接连接到 Kafka broker，但是一些旧版本的命令仍然需要指定
--topic dblab：指定要消费消息的目标主题，这里是 "dblab"
--from-beginning：指示消费者从该主题的起始位置开始消费消息，而不是从当前最新的消息开始消费。从名为 "dblab" 的 Kafka 主题消费消息，并从起始位置开始消费

可以看到，屏幕上会显示出如下结果，也就是刚才在另外一个终端里面输入的内容（启动消费者后亦可在生产者中输入内容，消费者终端也可查看到）

-> 实例运行结束后可以Ctrl+Z停止进程 ~~~

原文地址:https://blog.csdn.net/qq_67822268/article/details/138547209 本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：https://www.suanlizi.com/kf/1788334116136161280.html 如若内容造成侵权/违法违规/事实不符，请联系《酸梨子》网邮箱：1419361763@qq.com进行投诉反馈，一经查实，立即删除！

阅读全部