当前位置: 首页 > news >正文

Kafka系列之:深入理解Kafka集群调优

Kafka系列之:深入理解Kafka集群调优

  • 一、Kafka硬件配置选择
  • 二、Kafka内存选择
  • 三、CPU选择
  • 四、网络选择
  • 五、生产者调优
  • 六、broker调优
  • 七、消费者调优
  • 八、Kafka总体调优

一、Kafka硬件配置选择

服务器台数选择:

  • 2 * (生产者峰值生产速率 * 副本数 / 100) + 1

磁盘选择:

  • Kafka按照顺序读写,机械硬盘和固态硬盘,顺序读写速度差不多

二、Kafka内存选择

  • Kafka内存 = 堆内存(kafka内部配置) + 页缓存(服务器内存)
  • 堆内存10~15G
jstat -gc 23465 1s 10S0C    S1C    S0U    S1U      EC       EU        OC    
http://www.lryc.cn/news/44683.html

相关文章:

  • creator-泄漏检测之资源篇
  • 【DevOps】Jenkins 运行任务时遇到 FATAL:Unable to produce a script file 报错(已解决)
  • Web前端
  • 资源操作:Resources
  • GDB调试的学习
  • 熵值法综合评价分析流程
  • 使用Python Pandas库操作Excel表格的技巧
  • LeetCode练习七:动态规划上:线性动态规划
  • 基于正点原子F407开发版和SPI接口屏移植touchgfx完整教程(一)
  • Linux--进程间通信
  • hadoop伪分布式集群搭建
  • Qt 中的信息输出机制:QDebug、QInfo、QWarning、QCritical 的简单介绍和用法
  • C++读写excel文件的的第三方库
  • 【关于Linux中----多线程(一)】
  • 2023年全国最新安全员精选真题及答案34
  • 数据出境是什么意思?我国数据出境合规要求是什么?
  • Liunx——Git工具使用
  • 微软语音合成工具+基于Electron + Vue + ElementPlus + Vite 构建并能将文字转换为语音 MP3
  • Mongodb学习笔记2
  • 学习Tensorflow之基本操作
  • 《Spring系列》第2章 解析XML获取Bean
  • 小红书20230326暑假实习笔试
  • 【java】不要二、把字符串转成整数
  • 数据的质量管控工作
  • 【SpringBoot笔记29】SpringBoot集成RabbitMQ消息队列
  • 前端架构师-week2-脚手架架构设计和框架搭建
  • CMake项目实战指令详细分析
  • 【深度学习】——LSTM参数设置
  • 计算机网络高频60问 背完差不多了!!
  • 路由策略小实验