当前位置: 首页 > news >正文

Filebeat rpm方式安装及配置

一、使用服务器root用户、filebeat8.11.1版本,rpm安装方式进行安装

curl -L -O https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-8.11.1-x86_64.rpm

sudo rpm -vi filebeat-8.11.1-x86_64.rpm

二、配置核心的采集文件、使用inputs热更方式、配置filebeat本身日志

1、filebeat配置文件在目录  

cd  /etc/filebeat/

2、创建inputs.d目录并修改权限

mkdir inputs.d
chmod 755 inputs.d

3、写入核心正常采集文件  

vim filebeat-normal.yml
chmod 644 filebeat-normal.yml

YAML
- type: filestream
  enabled: true
  #采集的路径、可写多个-,并且可以应用不同的配置
  id: log-normal
  tags: ["normal"]
  paths:
    #正式采集目录
    - /data/log/*.log
  #设置要采集的日志文件时效,10天之内才采集,主要考虑的是补数的数据时间是否有效能被采集
  ignore_older: 72h  
  #当前正在采集的文件多久未更新就关闭连接
  close.on_state_change.inactive: 3m
  #close_eof: true 补数用,扫描完直接关闭
  #超过80h后,就清除偏移量记录文件中的冗余内容。很适合文件数很多场景
  clean_inactive: 75h
  #一次采集打开的文件数量,结合实际文件数量来设置,限制了filebeat的内存使用
  #排除当前目录可能存在的一些压缩包,以防万一
  prospector.scanner.exclude_files: ['\.gz$','\.txt']
  #与close_removed配套,文件移除采集目录后,就会从元数据目录清除
  clean_removed: true
  # 扫描一次目录下所有文件,默认10s
  prospector.scanner.check_interval: 30s

4、写入这台机器可能异常补数的采集文件

vim filebeat-fix.yml.bak
chmod 644 filebeat-fix.yml.bak

http://www.lryc.cn/news/321227.html

相关文章:

  • 深入挖掘C语言之——枚举
  • 【源码阅读】EVMⅢ
  • .Net Core 中间件验签
  • Elasticsearch:从 Java High Level Rest Client 切换到新的 Java API Client
  • 七:分布式
  • 1-postgresql数据库高可用脚本详解
  • 【亲测】Onlyfans年龄认证怎么办?Onlyfans需要年龄验证?
  • ASP.NET Core新特性
  • 26-Java访问者模式 ( Visitor Pattern )
  • 电子科技大学链时代工作室招新题C语言部分---题号G
  • 体育运动直播中的智能运动跟踪和动作识别系统 - 视频分析如何协助流媒体做出实时决策
  • Avalon总线学习
  • Sentinel(熔断规则)
  • Hive借助java反射解决User-agent编码乱码问题
  • Linux下安装Android Studio及创建桌面快捷方式
  • 【析】一类动态车辆路径问题模型和两阶段算法
  • 从基础入门到学穿C++
  • 代码随想录算法训练营第二十四天|leetcode78、90、93题
  • Java学习笔记NO.20
  • 关系型数据库mysql(1)基础认知和安装
  • WanAndroid(鸿蒙版)开发的第三篇
  • 全国农产品价格分析预测可视化系统设计与实现
  • 堆排序(数据结构)
  • 使用DMA方式控制串口
  • ModbusTCP转Profinet网关高低字节交换切换
  • OpenvSwitch VXLAN 隧道实验
  • GPT能复制人类的决策和直觉吗?
  • 权限设计种类【RBAC、ABAC】
  • C语言经典面试题目(十九)
  • VSCode 远程调试C++程序打开/dev/tty设备失败的问题记录