当前位置: 首页 > news >正文

centos(或openEuler系统)安装kafka集群

安装192.168.9.60、192.168.9.61、192.168.9.62这3台kafka集群(kraft模式,不用zookeeper)

不带密码的

1.每台机器安装kafka:

cd /home/kafka

wget https://downloads.apache.org/kafka/3.3.1/kafka_2.13-3.3.1.tgz

不通就换这个: wget https://archive.apache.org/dist/kafka/3.4.0/kafka_2.13-3.4.0.tgz

tar -xzf kafka_2.13-3.4.0.tgz

cd kafka_2.13-3.4.0

2. 编辑/kraft/server.properties 文件

在每台机器上编辑 /home/kafka/kafka_2.13-3.4.0/config/kraft/server.properties 文件。

机器1 (192.168.9.60)

process.roles=broker,controller

node.id=1

controller.quorum.voters=1@192.168.9.60:9093,2@192.168.9.61:9093,3@192.168.9.62:9093

listeners=PLAINTEXT://192.168.9.60:9092,CONTROLLER://192.168.9.60:9093

advertised.listeners=PLAINTEXT://192.168.9.60:9092

log.dirs=/var/lib/kafka/logs

机器2 (192.168.9.61)

process.roles=broker,controller

node.id=2

controller.quorum.voters=1@192.168.9.60:9093,2@192.168.9.61:9093,3@192.168.9.62:9093

listeners=PLAINTEXT://192.168.9.61:9092,CONTROLLER://192.168.9.61:9093

advertised.listeners=PLAINTEXT://192.168.9.61:9092

log.dirs=/var/lib/kafka/logs

机器3 (192.168.9.62)

process.roles=broker,controller

node.id=3

controller.quorum.voters=1@192.168.9.60:9093,2@192.168.9.61:9093,3@192.168.9.62:9093

listeners=PLAINTEXT://192.168.9.62:9092,CONTROLLER://192.168.9.62:9093

advertised.listeners=PLAINTEXT://192.168.9.62:9092

log.dirs=/var/lib/kafka/logs

3.需要格式化日志目录:

在其中1台中获取uuid

./bin/kafka-storage.sh random-uuid

假如结果是:tP0gwpToQbGRypThUKq6mg

在每台机器上执行一样的命令,3台机器的格式化uuid必须一样的:

bin/kafka-storage.sh format -t tP0gwpToQbGRypThUKq6mg -c config/kraft/server.properties

4.启动和停止:

启动:nohup bin/kafka-server-start.sh config/kraft/server.properties > kafka.log 2>&1 &

tail -f kafka.log

停止:bin/kafka-server-stop.sh

查看端口:

是否有9092和9093

ss -nlpt

5.验证:

在63机器上执行60机器的创建topic:

bin/kafka-topics.sh --create --topic test --bootstrap-server 192.168.9.60:9092

新建的topic会自动出现在每个机器上

bin/kafka-topics.sh --list --bootstrap-server 192.168.9.60:9092

http://www.lryc.cn/news/403363.html

相关文章:

  • HarmonyOS根据官网写案列~ArkTs从简单地页面开始
  • GraphRAG+ollama+LM Studio+chainlit
  • 【中项第三版】系统集成项目管理工程师 | 第 5 章 软件工程② | 5.4 - 5.8
  • 6. dolphinscheduler-3.0.0伪集群部署
  • 防火墙内容安全综合实验
  • 常见的数据分析用例 —— 信用卡交易欺诈检测
  • IP地址:由电脑还是网线决定?
  • 如何定位及优化SQL语句的性能
  • SentenceTransformers (SBERT)
  • 第三届智能机械与人机交互技术学术会议(IHCIT 2024)
  • 图的访问(C++)
  • LeetCode做题记录(第二天)169. 多数元素
  • Adobe XD中文设置指南:专业设计师的现场解答
  • CentOS 7 安装Jenkins2.346.1(war方式安装)
  • 使用Java -jar运行就jar包时报异常:org.yaml.snakeyaml.error.YAMLException异常
  • golang实现的ab测试http代理工具
  • Maven学习——Maven的下载、安装与配置(详细攻略!)
  • C#知识|账号管理系统-修改账号按钮功能的实现
  • bug等级和优先级
  • 记录|C# winform布局学习
  • C/C++ json库
  • C++案例四:简易记事本程序
  • 【VUE学习】day03-过滤器filter
  • 技术成神之路:设计模式(八)责任链模式
  • 【Zynq UltraScale+ RFSoC】~~~
  • STM32之八:IIC通信协议
  • mysql的数据往hive进行上报时怎么保证数据的准确性和一致性
  • 问题:4、商业保险与政策性保险的主要不同之处是:经营主体不同、经营目标不同、承保机制不同。 #学习方法#其他#学习方法
  • Getx学习笔记之中间件鉴权
  • 介绍 Elasticsearch 中的 Learning to Tank - 学习排名