如何在Debian 10上安装Apache Kafka
admin
2023-07-31 07:54:01
0

Apache Kafka是一个开放源代码的分布式事件流平台,成千上万的公司使用它来实现高性能数据管道,流分析,数据集成和关键任务应用程序。apache-kafka-logoapache-kafka-logo

在Debian 10 Buster上安装Apache Kafka

步骤1.在运行下面的教程之前,重要的是通过apt在终端中运行以下命令来确保系统是最新的:

sudo apt update

步骤2.安装Java。

现在,使用以下命令安装Java:

sudo apt install default-jdk

通过运行以下命令来验证Java版本:

java -version

步骤3.在Debian 10上安装Apache Kafka。

现在,我们运行以下命令从官方网站下载Apache Kafka软件包:

wget https://downloads.apache.org/kafka/2.8.0/kafka_2.12-2.8.0.tgz

然后,解压缩下载的存档文件:

tar xzf kafka_2.12-2.8.0.tgz
mv kafka_2.12-2.8.0 /usr/local/kafka

步骤4.创建系统单位文件。

现在,我们systemd为Zookeeper和Kafka服务创建单位文件。这将有助于管理Kafka服务以使用以下systemctl命令启动或停止:

nano /etc/systemd/system/zookeeper.service

添加以下文件:

[Unit]
Description=Apache Zookeeper server
Documentation=http://zookeeper.apache.org
Requires=network.target remote-fs.target
After=network.target remote-fs.target

[Service]
Type=simple
ExecStart=/usr/local/kafka/bin/zookeeper-server-start.sh /usr/local/kafka/config/zookeeper.properties
ExecStop=/usr/local/kafka/bin/zookeeper-server-stop.sh
Restart=on-abnormal

[Install]
WantedBy=multi-user.target

接下来,systemd使用以下命令创建Kafka单位文件:

nano /etc/systemd/system/kafka.service

添加以下内容:

[Unit]
Description=Apache Kafka Server
Documentation=http://kafka.apache.org/documentation.html
Requires=zookeeper.service

[Service]
Type=simple
Environment=\"JAVA_HOME=/usr/lib/jvm/java-1.11.0-openjdk-amd64\"
ExecStart=/usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties
ExecStop=/usr/local/kafka/bin/kafka-server-stop.sh

[Install]
WantedBy=multi-user.target

保存文件并重新加载systemd守护程序以应用新更改:

sudo systemctl daemon-reload
sudo systemctl start zookeeper
sudo systemctl start kafka

步骤5.在Kafka中创建主题。

首先,使用单个分区和单个副本创建一个名为“ MakeTopic”的主题:

cd /usr/local/kafka
bin/kafka-maketopics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic MakeTopic

之后,您可以通过运行以下命令在Kafka上查看创建的主题:

$ bin/kafka-maketopics.sh --list --zookeeper localhost:2181
MakeTopic

步骤6.将消息发送到Kafka。

现在我们运行生产者,然后在控制台中输入一些消息以发送到服务器:

$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic MakeTopic

>Welcome to kafka
>This is my first topic
>

第7步。使用Kafka Consumer。

Apache Kafka还具有一个命令行使用者,可以从Kafka集群中读取数据并向标准输出显示消息。

$ bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic MakeTopic --from-beginning

Welcome to kafka
This is my first topic

感谢您使用本教程在Debian系统上安装最新版本的Apache Kafka。有关其他帮助或有用信息,建议您查看Apache Kafka官方网站。

相关内容

热门资讯

Windows 11 和 10... Windows 11/10 文件夹属性中缺少共享选项卡 – 已修复 1.检查共享选项卡是否可用 右键...
事件 ID 7034:如何通过... 点击进入:ChatGPT工具插件导航大全 服务控制管理器 (SCM) 负责管理系统上运行的服务的活动...
Hive OS LOLMine... 目前不清退的交易所推荐: 1、全球第二大交易所OKX欧意 国区邀请链接: https://www.m...
Radmin VPN Wind... Radmin VPN 是一款免费且用户友好的软件,旨在牢固地连接计算机以创建一个有凝聚力的虚拟专用网...
如何修复 Steam 内容文件... Steam 内容文件锁定是当您的 Steam 文件无法自行更新时出现的错误。解决此问题的最有效方法之...
Hive OS 部署 PXE ... 目前不清退的交易所推荐: 1、全球第二大交易所OKX欧意 国区邀请链接: https://www.m...
如何在Instagram上扫描... 如何在Instagram上扫描名称标签/ QR? 总而言之,您可以通过大约四种不同的方法来扫描这些I...
在 Windows 11 中打... 什么是链路状态电源管理? 您可以在系统控制面板的电源选项中看到链接状态电源管理。它是 PCI Exp...
Hive OS 新建飞行表的方... 目前不清退的交易所推荐: 1、全球第二大交易所OKX欧意 国区邀请链接: https://www.m...
farols1.1.501.0... faro ls 1.1.501.0(64bit)可以卸载,是一款无需连接外部PC机或笔记本计算机即可...