当前位置: 首页 > news >正文

Apache Ignite 2.8 引入的新指标系统(New Metrics System)的完整说明

这段文档是关于 Apache Ignite 2.8 引入的“新指标系统(New Metrics System)” 的完整说明。这是 Ignite 监控体系的一次重大升级,相比旧的、分散的统计方式,新系统更统一、灵活、可扩展。

我们来逐层拆解、通俗易懂地理解这个新指标系统的架构和使用方法。


🌟 一、为什么要“新指标系统”?

在 Ignite 2.8 之前:

  • 指标分散在 JMX、缓存配置、数据区配置中
  • 难以统一查看
  • 扩展性差

Ignite 2.8 开始,引入了统一的 Metrics System(指标系统),目标是:

统一收集、集中管理、多通道导出


🧱 二、新指标系统的核心概念

1. Metrics(指标)

  • 每个指标是一个“名字 + 值”的组合。
  • 值可以是:
    • 简单类型:long, double, String
    • 复杂对象:比如直方图(Histogram)
  • 示例:
    • io.datastorage.StorageSize → 当前存储大小(单位字节)
    • cache.myCache.CacheHits → 缓存命中次数

2. Registers(指标注册表 / 分组)

  • 指标不是杂乱无章的,而是按功能分组管理,这种分组叫 Register(注册表)
  • 每个 Register 有名字,比如:
    • io.datastorage → 存储相关指标
    • cache.myCache → 名为 myCache 的缓存指标
  • 指标全名 = 注册表名.指标名
    • 例如:cache.myCache.CacheHits

💡 类比:就像文件夹结构

cache.myCache/├── CacheHits├── CacheMisses└── OffHeapEntries

3. Exporters(导出器)—— 指标“出口”

这是新系统最强大的地方:同一个指标,可以通过多种方式“输出”

Ignite 内置了 4 种导出方式(Exporters):

导出器类名作用适用场景
JMXJmxMetricExporterSpi通过 JMX 暴露指标Java 监控工具(如 JConsole)
SQL ViewSqlViewMetricExporterSpi指标变成一张 SQL 表 SYS.METRICS用 SQL 查询指标
LogLogExporterSpi定期打印指标到日志文件简单日志分析
OpenCensusOpenCensusMetricExporterSpi接入 OpenCensus 生态(如 Prometheus、Zipkin)云原生监控

关键点:你可以在一个节点上同时启用多个 Exporter,实现“一份指标,多端输出”。


⚙️ 三、如何配置?—— 启用 Exporter

你需要在节点配置中指定使用哪些 Exporter:

XML 配置示例

<bean class="org.apache.ignite.configuration.IgniteConfiguration"><property name="metricExporterSpi"><list><!-- 通过 JMX 查看 --><bean class="org.apache.ignite.spi.metric.jmx.JmxMetricExporterSpi"/><!-- 通过 SQL 查看 --><bean class="org.apache.ignite.spi.metric.sql.SqlViewMetricExporterSpi"/><!-- 写入日志 --><bean class="org.apache.ignite.spi.metric.log.LogExporterSpi"/></list></property>
</bean>

📌 注意:这是节点级配置,只对当前节点生效。


🔍 四、四种 Exporter 详解

1. JMX Exporter(最传统,功能最全)

  • 所有指标都可通过 JMX 访问。
  • Histogram(直方图)指标仅支持 JMX
  • 支持过滤:只导出某些 Register 的指标
JmxMetricExporterSpi jmxExporter = new JmxMetricExporterSpi();
// 只导出缓存相关的指标
jmxExporter.setExportFilter(mreg -> mreg.name().startsWith("cache."));
cfg.setMetricExporterSpi(jmxExporter);

💡 适合:Java 运维人员用 JConsole、VisualVM 查看。


2. SQL View Exporter(最方便!)

  • 指标被映射为一张系统视图:SYS.METRICS
  • 你可以用任何 SQL 工具查询!
SELECT name, value 
FROM SYS.METRICS 
WHERE name LIKE 'cache.myCache.%';

输出示例:

NAMEVALUE
cache.myCache.CacheHits12345
cache.myCache.CacheMisses678
cache.myCache.OffHeapEntries9000

✅ 优势:

  • 不用懂 JMX,会 SQL 就能查
  • 可集成到 BI 工具(如 Grafana、Tableau)
  • 适合开发、DBA 快速排查

3. Log Exporter(最简单)

  • 每分钟(默认)将所有指标打印到日志文件
  • 日志级别:INFO
[INFO] Metrics: cache.myCache.CacheHits=12345io.datastorage.StorageSize=1073741824thread.pool.size=20

✅ 适合:

  • 快速调试
  • 无监控系统时临时分析
  • 日志审计

4. OpenCensus Exporter(最现代)

  • 集成 OpenCensus(现为 OpenTelemetry 前身)
  • 可将指标发送到:
    • Prometheus
    • Stackdriver
    • Zipkin
    • Jaeger
    • 等支持 OpenCensus 的后端
使用步骤:
  1. 加载 ignite-opencensus 模块
  2. 配置 Exporter
  3. 设置 OpenCensus 的 StatsCollector 将数据发往目标系统
支持的配置参数:
参数说明
filter过滤要导出的指标
period导出周期(如 10s)
sendInstanceName是否添加实例名标签
sendNodeId是否添加节点 ID 标签
sendConsistentId是否添加节点一致 ID 标签

✅ 适合:

  • 云原生环境
  • 已有 Prometheus + Grafana 监控栈
  • 需要与微服务链路追踪集成

📊 五、Histogram(直方图)指标详解

某些性能指标是分布式的,比如“SQL 查询耗时”,不能只看平均值,要看分布。

Ignite 支持 Histogram(直方图) 指标,仅通过 JMX 提供

示例:一个耗时直方图

假设边界为 [10ms, 100ms],则生成以下 JMX 属性:

JMX 属性名含义
queryTime_0_10耗时 < 10ms 的次数
queryTime_10_100耗时 10~100ms 的次数
queryTime_100_inf耗时 > 100ms 的次数

💡 你可以据此绘制响应时间分布图,判断是否存在慢查询。


✅ 六、新 vs 旧 指标系统对比

特性旧系统新系统(2.8+)
统一性分散在各处统一注册与管理
可扩展性支持自定义 Exporter
多通道输出支持 JMX/SQL/Log/OpenCensus
SQL 查询支持SYS.METRICS
云原生集成✅ OpenCensus
配置方式各自为政统一在 metricExporterSpi

🛠️ 七、最佳实践建议

  1. 生产环境推荐组合

    <property name="metricExporterSpi"><list><bean class="org.apache.ignite.spi.metric.sql.SqlViewMetricExporterSpi"/><bean class="org.apache.ignite.spi.metric.opencensus.OpenCensusMetricExporterSpi"/></list>
    </property>
    
    • 用 SQL 做日常查询
    • 用 OpenCensus 接入 Prometheus + Grafana
  2. 开发/测试环境

    • 加上 LogExporterSpi,方便看日志
  3. 避免过度收集

    • 如果不需要 Histogram,不要开启
    • 使用 filter 减少不必要的指标输出
  4. 自定义 Exporter

    • 实现 MetricExporterSpi 接口
    • 可对接 Kafka、Elasticsearch、InfluxDB 等

✅ 一句话总结

Ignite 新指标系统是一个“统一采集、多路分发”的监控中枢:它把所有指标按组(Register)管理,并允许你通过 JMX、SQL、日志或 OpenCensus 等多种方式实时查看,特别适合现代监控体系(如 Prometheus + Grafana)。


📌 类比记忆:

比喻解释
Metrics水滴(一个个数据点)
Registers水桶(分类装水)
Exporters水管(把水引到不同地方)
Node Config水泵控制面板(决定开哪几根水管)

如果你想,我可以帮你:

  • 写一个完整的 SYS.METRICS 常用查询清单
  • 生成一份 Prometheus + Grafana 的监控面板配置
  • 提供自定义 Exporter 的代码模板

需要吗?😊

http://www.lryc.cn/news/604817.html

相关文章:

  • 如何通过项目管理系统提升交付率
  • 【ip】IP地址能否直接填写255?
  • Ubuntu22.04中搭建GN编译环境
  • 用Python+MySQL实战解锁企业财务数据分析
  • 深入浅出:C++ STL简介与学习指南
  • 文件加密工具(勒索病毒加密方式)
  • Dify 从入门到精通(第 4/100 篇):快速上手 Dify 云端:5 分钟创建第一个应用
  • VS2022 libtorch-win-shared-with-deps-2.7.1+cu126 配置记录
  • 程序开发中常用的 Emoji 符号
  • Python爬虫04_Requests豆瓣电影爬取
  • 生成模型实战 | GLOW详解与实现
  • JavaFX CSS @font-face 错误全面分析 loadStylesheetUnPrivileged / reportException
  • 快速删除Word和WPS文字中的空白行
  • Redis实现数据传输简介
  • Kubernetes高级调度02
  • Elasticsearch 索引管理 API 实战:涵盖创建、查看、修改、删除及别名
  • Redis 面试全解析:从数据结构到集群架构(含实战解决方案)
  • 设计模式之单例模式及其在多线程下的使用
  • 【C#】DevExpress.XtraEditors.MemoEdit memoEditLog控件讲解
  • Rabbitmq中常见7种模式介绍
  • pytorch小记(三十三):PyTorch 使用 TensorBoard 可视化训练过程(含完整示例)
  • 用 Go Typed Client 快速上手 Elasticsearch —— 从建索引到聚合的完整实战
  • 8.Linux : 日志的管理与时钟同步的配置
  • Rabbit MQ的消息模式-Java原生代码
  • YOLO-01目标检测基础
  • 02 基于sklearn的机械学习-特征降维(特征选择、PCA)、KNN算法、模型选择与调优(交叉验证、朴素贝叶斯算法、拉普拉斯平滑)
  • Android调用python库和方法的实现
  • YOLOv5u:无锚点检测的革命性进步
  • android-PMS-创建新用户流程
  • 舆情监测专员需要哪些常用软件工具?