当前位置： 首页 > news >正文

搭建prometheus+grafana监控系统抓取Linux主机系统资源数据

news 2025/7/5 11:02:07

Prometheus 和 Grafana 是两个非常流行的开源工具，通常结合使用来实现监控、可视化和告警功能。它们在现代 DevOps 和云原生环境中被广泛使用。

1. Prometheus

  • 定义：Prometheus 是一个开源的系统监控和告警工具包，最初由 SoundCloud 开发，现在是 CNCF（云原生计算基金会）的毕业项目。

  • 核心功能：

    • 数据采集：通过拉取（Pull）方式从目标服务（如应用程序、服务器、数据库等）收集指标数据。

    • 数据存储：将采集到的时序数据（Time Series Data）存储在本地或远程存储中。

    • 查询语言：提供强大的查询语言 PromQL，用于分析和查询监控数据。

    • 告警功能：支持基于规则的告警，可以通过 Alertmanager 发送告警通知（如邮件、Slack、PagerDuty 等）。

  • 特点：

    • 多维数据模型（通过标签区分不同的指标）。

    • 支持服务发现，动态监控目标。

    • 高性能，适合大规模监控。

  • 适用场景：

    • 监控 Kubernetes 集群。

    • 监控微服务架构。

    • 监控基础设施（如服务器、数据库、网络设备等）。

2. Grafana

  • 定义：Grafana 是一个开源的指标分析和可视化工具，支持多种数据源（如 Prometheus、InfluxDB、Elasticsearch 等）。

  • 核心功能：

    • 数据可视化：通过丰富的图表（如折线图、柱状图、仪表盘等）展示监控数据。

    • 多数据源支持：支持 Prometheus、InfluxDB、MySQL、Elasticsearch 等多种数据源。

    • 仪表盘：用户可以创建和共享自定义的监控仪表盘。

    • 告警功能：Grafana 也支持告警功能，可以根据指标设置告警规则并发送通知。

  • 特点：

    • 界面美观，交互性强。

    • 支持插件扩展，功能丰富。

    • 社区活跃，有大量现成的仪表盘模板。

  • 适用场景：

    • 可视化 Prometheus 的监控数据。

    • 分析和展示时序数据。

    • 创建自定义的监控和运维仪表盘。

3. Prometheus + Grafana 的结合

  • Prometheus 负责数据采集和存储，而 Grafana 负责数据的可视化和展示。

  • 典型工作流程：

    1. Prometheus 从目标服务（如应用程序、服务器）拉取指标数据。

    2. Prometheus 将数据存储在其时序数据库中。

    3. Grafana 连接到 Prometheus 数据源，查询数据并展示在仪表盘上。

    4. 用户通过 Grafana 的仪表盘实时监控系统状态。

    5. 如果需要告警，可以通过 Prometheus 的 Alertmanager 或 Grafana 的告警功能发送通知。

部署环境：

OS：Rocky Linux 9.4

上传所需软件版本：

prometheus-2.40.1.linux-amd64.tar.gz

grafana-enterprise-9.2.4-1.x86_64.rpm

node_exporter-1.4.0.linux-amd64.tar.gz

初始化操作：

关闭防火墙和seLinux，这台机之前关过了，所以没啥提示

systemctl stop firewalld
systemctl disable firewalld
setenforce 0 #临时关闭，也可在/etc/selinux/config文件里永久关闭

修改一下主机名：hostnamectl set-hostname prometheus

下载prometheus安装包：
地址：https://prometheus.io/download/

解压并重命名和启动prometheus：

tar xf prometheus-2.40.1.linux-amd64.tar.gz -C /usr/local/
mv /usr/local/prometheus-2.40.1.linux-amd64/ /usr/local/prometheus
nohup /usr/local/prometheus/prometheus --config.file="/usr/local/prometheus/prometheus.yml" &

查看启动情况：

查看启动端口：

netstat -an |grep 9090

通过主机IP:端口浏览器访问：

默认可以查看到已监控本机
菜单Status -> Targets

查看监控数据：主机IP:端口/metrics

在WEB界面首页可以通过关键字搜索查询监控项


接下来安装Grafana图形化监测工具

官网：https://grafana.com/

下载安装包：
地址：
https://dl.grafana.com/enterprise/release/grafana-enterprise-9.2.4-1.x86_64.rpm

上传grafana的rpm包之后，先安装两个依赖

yum install fontconfig urw-fonts

如果安装grafana报了这个问题：

我这里直接强制跳过了这个chkconfig依赖

rpm -ivh --nodeps grafana-enterprise-9.2.4-1.x86_64.rpm

接着启动grafana并查看端口号是否正在监听

systemctl start grafana-server
systemctl enable grafana-server
netstat -an |grep 3000

浏览使用主机ip:端口访问默认账号密码：admin/admin

登录后把prometheus服务器收集的数据作为一个数据源添加到grafana，让grafana可以得到prometheus的数据

（1）从左侧导航栏找到Data sources菜单

url填上PrometheusIP地址加端口

2.2配置Grafana仪表板

配置完数据源后，grafana接收到prometheus的数据需要使用仪表板展示，仪表板可自定义或导入模板，grafana官网也有非常多类型的模板供下载

Grafana dashboards | Grafana Labs

（1）从左侧导航栏找到导入仪表板，选择添加一个面板我选了官网的3662面板

接下来采集Linux主机系统资源

下载安装包：

地址：Download | Prometheus

上传采集器node_exporter-1.4.0.linux-amd64.tar.gz

解压文件

移动文件到/usr/local/目录下并重命名为node_exporter

启动采集器并修改默认端口

tar -zxf  node_exporter-1.4.0.linux-amd64.tar.gz
mv node_exporter-1.4.0.linux-amd64 /usr/local/node_exporter
nohup /usr/local/node_exporter/node_exporter --web.listen-address=":9900" &

接下来配置prometheus

编辑prometheus.yml文件，配置监控项

[root@prometheus prometheus]# cat  prometheus.yml
# my global config
global:scrape_interval: 15s # Set the scrape interval to every 15 seconds. Default is every 1 minute.evaluation_interval: 15s # Evaluate rules every 15 seconds. The default is every 1 minute.# scrape_timeout is set to the global default (10s).# Alertmanager configuration
alerting:alertmanagers:- static_configs:- targets:# - alertmanager:9093# Load rules once and periodically evaluate them according to the global 'evaluation_interval'.
rule_files:#- "/usr/local/prometheus/rules.yml"# - "first_rules.yml"# - "second_rules.yml"# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:# The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.- job_name: "prometheus"# metrics_path defaults to '/metrics'# scheme defaults to 'http'.static_configs:- targets: ["192.168.158.183:9090"]- job_name: 'linux'file_sd_configs:- files:- /usr/local/prometheus/node_exporter_targets.json

如果有大批量的机器要监控的话，为了方便维护，可以把所有主机信息单独存放到一个文件中

标签名：beijing代表这台机是北京区域的，、prod代表是生产环境的，可自行修改。

[root@prometheus prometheus]# cat  /usr/local/prometheus/node_exporter_targets.json
[{"targets": ["192.168.158.183:9900"],"labels": {"project": "beijing","env": "prod"}}
]

接下来执行

ps -ef |grep prometheus |grep -v grep |awk '{print $2}' |xargs kill -9

停止prometheus进程并启动。

nohup /usr/local/prometheus/prometheus --config.file=/usr/local/prometheus/prometheus.yml &

接下来在grafana导入linux主机详情监控面板

我选择了这个面板

修改面板添加env变量并修改这两个查询语句

此时可以直观看到这台机的资源使用率，后续将继续完善监控系统添加报警功能。

http://www.lryc.cn/news/519612.html

相关文章：

  • uni-app无限级树形组件简单实现
  • 基于华为ENSP的OSPF状态机、工作过程、配置保姆级别详解（2）
  • 请求方式(基于注解实现)
  • day38 tcp 并发 ，linux下的IO模型----IO多路复用
  • 更新Office后，LabVIEW 可执行程序生成失败
  • 重塑视频创作的格局！ComfyUI-Mochi本地部署教程
  • 如何理解机器学习中的非线性模型 ？
  • Web 品质样式表
  • 计算机网络 笔记 数据链路层3（局域网，广域网，网桥，交换机）
  • centos7.6 安装nginx 1.21.3与配置ssl
  • redis 内存管理和持久化机制
  • python-42-使用selenium-wire爬取微信公众号下的所有文章列表
  • 机器人碳钢去毛刺，用大扭去毛刺主轴可轻松去除
  • day05_Spark SQL
  • Java线程的异常处理：确保线程安全运行
  • nvim 打造成可用的IDE(2)
  • 如何当前正在运行的 Elasticsearch 集群信息
  • PHP Filesystem：深入解析与实战应用
  • pdf提取文本，表格以及转图片：spire.pdf
  • jQuery UI 主题
  • C# GDI+的DrawString无法绘制Tab键的现象
  • C# GID+绘制不透明和半透明的线条
  • L4-Prompt-Delta
  • Qt 自定义控件(Qt绘图)
  • electron 上怎么用node 调用 c++ 提供的方法
  • Chromium 132 编译指南 Windows 篇 - Git 初始化设置 (四)
  • day03-前端Web-Vue3.0基础
  • Windows 下Mamba2 / Vim / Vmamba 环境安装问题记录及解决方法终极版（无需绕过triton）
  • GitLab本地服务器配置ssh和克隆项目
  • Win10和11 git/Android Studio遇到filename too long问题的解决