当前位置: 首页 > news >正文

Elk:filebeat 日志收集工具和logstash

Elk:filebeat 日志收集工具和logstash

Filebeat是一个轻量级的日志手机工具,所使用的系统资源比logstash部署和启动时使用的资源要小得多

Filebeat可以在非java环境使用,他可以代理logstash在非java环境上收集日志

缺点

Filebeat无法实现数据的过滤,一般是结合logstash的

Nohup 表示在后台记录执行命令的过程

./filebeat 运行文件

-e 使用标准输出的同时进行syslog文件输出

-c 指定配置文件

> 执行过程输出到filebeat.out 这个文件当中, &后台运行

Logstash 收集日志的过程

先有input从哪收集再有output输出到哪 ,中间有filter(过滤)

Logstash可以使用任意端口,只要没有被占用都可以使用,推荐1024之后使用

Logstash性能上的优化: logstash启动是在jvm虚拟机当中其中,启动一次至少500M内存

Pipeline.workers:2

logstash的工作线程,默认值就是cpu数,4 2 8 4 给一半即可2核,2个

Pipeline.batch.size:125

一次性能够批量出

http://www.lryc.cn/news/248118.html

相关文章:

  • [设计模式] 常见的设计模式
  • 报错解决:You may need an additional loader to handle the result of these loaders.
  • 配置自动化部署Jenkins和Gitea
  • VSCODE+QEMU+WSL调试RISCV代码(SBI、kernel)
  • 二叉树(判断是否为对称二叉树)
  • STM32开发学习(地址映射)
  • 证明E(X+Y) =E(X) + E(Y)
  • ClickHouse入门手册1.0
  • 10个火爆的设计素材网站推荐
  • SQL注入 - CTF常见题型
  • android keylayout键值适配
  • python读取excel自动化生成sql建表语句和java实体类字段
  • Unity求向量A在平面L上的投影向量
  • 人机交互2——任务型多轮对话的控制和生成
  • 【数据结构】八大排序 (三)
  • Redis 命令处理过程
  • python爬虫进阶教程之如何正确的使用cookie
  • 【hacker送书第4期】推荐4本Java必读书籍(各送一本)
  • [密码学]DES
  • 15个超级实用的Python操作,肯定有你意想不到的!
  • GitHub上8个强烈推荐的 Python 项目
  • 什么是依赖倒置原则
  • 异常数据检测 | Python实现oneclassSVM模型异常数据检测
  • using meta-SQL 使用元SQL (3)
  • Spinnaker 基于 docker registry 触发部署
  • 2023亚马逊云科技re:Invent,在开发者板块探究如何利用技术重塑业务
  • JAVA 使用stream流将List中的对象某一属性创建新的List
  • Elasticsearch:ES|QL 函数及操作符
  • SpringBoot——Swagger2 接口规范
  • 网络入门---网络编程预备知识