百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

Spring Boot 整合 Prometheus 实现资源监控

wptr33 2024-12-07 17:44 30 浏览

引言

在微服务架构流行的今天,服务的监控和管理变得尤为重要。Prometheus 作为一个开源的监控和告警工具,以其强大的数据采集、存储和查询能力,受到了众多开发者的青睐。Spring Boot 作为 Java 领域快速构建微服务的框架,与 Prometheus 的结合可以实现对 Spring Boot 应用的实时监控。本文将介绍如何使用 Prometheus 监控 Spring Boot 应用。

一、Prometheus 简介

Prometheus 是一个开源的系统监控和警报工具包,它通过采集和存储指标(metrics),提供了强大的数据查询语言,可以帮助我们分析和理解应用程序的行为。Prometheus 的核心组件是 Prometheus Server,它负责采集监控指标并提供查询接口。

二、Spring Boot Actuator

Spring Boot Actuator 是 Spring Boot 提供的一系列用于监控和管理 Spring Boot 应用的工具。它提供了许多端点(endpoints),例如 /health、/info、/metrics 等,这些端点可以公开应用的内部信息,如健康状态、配置信息和度量指标。

三、集成 Prometheus 和 Spring Boot

要将 Prometheus 与 Spring Boot 应用集成,我们需要执行以下步骤:

3.1 添加依赖

首先,将 Spring Boot Actuator 和 Micrometer Prometheus Registry 添加到项目的依赖中。Actuator 提供了一系列内置端点,用于显示运行应用的性能信息,如健康状况、指标等。Micrometer Prometheus registry 会将这些指标格式化为 Prometheus 可读格式。

xml
<dependencies>
    <!-- Spring Boot Actuator -->
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-actuator</artifactId>
        <version>2.7.15</version>
    </dependency>
    <!-- Micrometer Prometheus Registry -->
    <dependency>
        <groupId>io.micrometer</groupId>
        <artifactId>micrometer-registry-prometheus</artifactId>
        <version>1.9.14</version>
    </dependency>
</dependencies>

3.2 配置 Actuator

在 application.yml 或 application.properties 文件中配置 Actuator 以暴露 Prometheus 端点。例如,在 application.yml 中:

yaml
management:
  endpoints:
    web:
      exposure:
        include: '*'
    metrics:
      export:
        prometheus:
          enabled: true
  endpoints:
    web:
      base-path: "/status" # 将/actuator/xxx修改为/status/xxx,防止被猜到
      server:
        request:
          metric-name: "application:request" # 自定义接口指标名
      client:
        request:
          metric-name: "application:client_request" # 自定义http客户端指标名
  server:
    port: 10111 # 指定端口,默认跟server.port一样,可以防止被猜到

3.3 配置 Prometheus

下载并运行 Prometheus Server,然后从 Prometheus 官网或 GitHub 仓库获取适用于您操作系统的版本。启动 Prometheus Server 后,需要修改其配置文件 prometheus.yml,以便添加 Spring Boot 应用作为监控目标。

yaml
global:
  scrape_interval: 15s
scrape_configs:
  - job_name: "prometheus"
    static_configs:
      - targets: ["localhost:9090"]
  - job_name: 'prometheusapp'
    metrics_path: '/actuator/prometheus'
    static_configs:
      - targets: ['localhost:8080']

四、监控落地

基于 Prometheus + Grafana 的监控落地,包括安装 Prometheus + Grafana、导入依赖、配置 Prometheus 拉取数据以及配置 Grafana 监控面板。

五、总结

通过上述步骤,我们可以成功地将 Prometheus 与 Spring Boot 应用集成,实现对应用的实时监控。

监控结果与可观察的指标

在Spring Boot应用中整合Prometheus后,我们可以监控到一系列关键的性能指标,这些指标对于理解应用的行为和健康状况至关重要。以下是一些主要的监控结果和可观察的指标:

1. 系统和JVM指标

  • CPU使用率:监控系统CPU的使用情况,可以通过PromQL查询rate(process_cpu_seconds_total[5m])来获取。
  • 内存使用情况:包括堆内存和非堆内存的使用情况,可以通过jvm_memory_used_bytes等指标来监控。
  • 垃圾回收(GC):监控JVM的垃圾回收情况,包括GC次数和耗时,可以通过jvm_gc_collection_seconds_sum等指标来监控。

2. 应用性能指标

  • 请求处理时间:监控接口的响应时间,可以通过http_server_requests_seconds等指标来获取。
  • 请求量:监控接口的请求次数,可以通过http_server_requests_total等指标来监控。
  • 错误率:监控接口的错误请求次数,可以通过http_server_requests_seconds_count等指标来监控。

3. 业务指标

  • 订单总额:模拟订单系统的实时订单总额,可以通过自定义指标order_amount_sum来监控。
  • 下单失败率:监控10分钟内的下单失败率,可以通过自定义指标来实现监控。
  • 请求失败数:监控请求失败的次数,可以通过自定义指标来实现监控。

4. 容器和部署指标

  • 容器启动时间:监控容器的启动时间,可以通过自定义脚本和Prometheus的pushgateway来实现。
  • 容器运行时指标:监控容器的运行时指标,如资源使用情况等。

5. 自定义指标

  • 接口调用次数和耗时:通过自定义指标来监控特定接口的调用次数和耗时,可以通过method_rt等指标来监控。
  • 订单请求次数:通过自定义指标metrics_request_count来监控订单请求的次数。

通过这些指标,我们可以对Spring Boot应用的性能和健康状况有一个全面的了解。这些数据不仅可以帮助我们及时发现和解决问题,还可以用于性能优化和故障排查。通过Grafana等可视化工具,我们可以将这些指标以图表的形式展示出来,使得监控结果更加直观和易于理解。

如何通过Prometheus监控分布式系统的指标?


要通过Prometheus监控分布式系统的指标,可以遵循以下步骤和最佳实践:

1. 选择合适的监控指标

根据Google的分布式监控经验,推荐的四个黄金指标包括[1]:

  • 延迟:服务请求的时间,反映用户体验和系统核心性能。
  • 通讯量:监控当前系统的流量,用于衡量服务的容量需求。
  • 错误:监控当前系统所有发生的错误请求,衡量当前系统错误发生的速率。
  • 饱和度:衡量当前服务的饱和度,主要强调最能影响服务状态的受限制的资源,如内存状态。

2. 使用Exporter收集数据

Prometheus通过Exporter来收集分布式系统中的数据。常见的Exporter包括[11]:

  • NodeExporter:收集主机的CPU、内存、磁盘等信息。
  • 其他Exporter:根据需要监控的具体服务或组件,可能需要使用特定的Exporter。

3. 配置Prometheus

配置Prometheus的prometheus.yml文件,定义如何拉取不同Exporter的数据[11]:

yaml
scrape_configs:
  - job_name: 'node'
    static_configs:
      - targets: ['localhost:8080']

这将配置Prometheus从NodeExporter的:8080端口拉取数据。

4. 多集群监控方案

在分布式云场景下,可以采用TMP+TDCC方案,通过在中心账号下创建TMP监控实例,并在该账号下开启TDCC HUB集群,将其他账号下的集群统一注册到TDCC HUB集群中,实现一套监控系统采集所有集群的指标[9]。

5. 聚合查询与指标数据量

对于多集群数据存放在一起的情况,可以进行预聚合以减少查询时Prometheus的压力和反馈耗时[9]。同时,需要注意监控数据的总量,建议所有集群总的数据量不超过450w。

6. 可视化与告警

使用Grafana与Prometheus结合,实现数据的可视化展示[12]。同时,可以设置告警规则,当特定指标超过阈值时触发告警。

7. 监控指标的类型

Prometheus主要有四种类型的监控指标[10]:

  1. Counter:只增不减的计数器,如HTTP访问量。
  2. Gauge:反映系统的当前状态,可增可减,如CPU使用率。
  3. Histogram:用于统计和分析样本的分布情况。
  4. Summary:与Histogram类似,但提供了分位数统计。

通过上述步骤和实践,可以有效地通过Prometheus监控分布式系统的指标,确保系统的稳定性和性能。

相关推荐

MySQL进阶五之自动读写分离mysql-proxy

自动读写分离目前,大量现网用户的业务场景中存在读多写少、业务负载无法预测等情况,在有大量读请求的应用场景下,单个实例可能无法承受读取压力,甚至会对业务产生影响。为了实现读取能力的弹性扩展,分担数据库压...

Postgres vs MySQL_vs2022连接mysql数据库

...

3分钟短文 | Laravel SQL筛选两个日期之间的记录,怎么写?

引言今天说一个细分的需求,在模型中,或者使用laravel提供的EloquentORM功能,构造查询语句时,返回位于两个指定的日期之间的条目。应该怎么写?本文通过几个例子,为大家梳理一下。学习时...

一文由浅入深带你完全掌握MySQL的锁机制原理与应用

本文将跟大家聊聊InnoDB的锁。本文比较长,包括一条SQL是如何加锁的,一些加锁规则、如何分析和解决死锁问题等内容,建议耐心读完,肯定对大家有帮助的。为什么需要加锁呢?...

验证Mysql中联合索引的最左匹配原则

后端面试中一定是必问mysql的,在以往的面试中好几个面试官都反馈我Mysql基础不行,今天来着重复习一下自己的弱点知识。在Mysql调优中索引优化又是非常重要的方法,不管公司的大小只要后端项目中用到...

MySQL索引解析(联合索引/最左前缀/覆盖索引/索引下推)

目录1.索引基础...

你会看 MySQL 的执行计划(EXPLAIN)吗?

SQL执行太慢怎么办?我们通常会使用EXPLAIN命令来查看SQL的执行计划,然后根据执行计划找出问题所在并进行优化。用法简介...

MySQL 从入门到精通(四)之索引结构

索引概述索引(index),是帮助MySQL高效获取数据的数据结构(有序),在数据之外,数据库系统还维护者满足特定查询算法的数据结构,这些数据结构以某种方式引用(指向)数据,这样就可以在这些数据结构...

mysql总结——面试中最常问到的知识点

mysql作为开源数据库中的榜一大哥,一直是面试官们考察的重中之重。今天,我们来总结一下mysql的知识点,供大家复习参照,看完这些知识点,再加上一些边角细节,基本上能够应付大多mysql相关面试了(...

mysql总结——面试中最常问到的知识点(2)

首先我们回顾一下上篇内容,主要复习了索引,事务,锁,以及SQL优化的工具。本篇文章接着写后面的内容。性能优化索引优化,SQL中索引的相关优化主要有以下几个方面:最好是全匹配。如果是联合索引的话,遵循最...

MySQL基础全知全解!超详细无废话!轻松上手~

本期内容提醒:全篇2300+字,篇幅较长,可搭配饭菜一同“食”用,全篇无废话(除了这句),干货满满,可收藏供后期反复观看。注:MySQL中语法不区分大小写,本篇中...

深入剖析 MySQL 中的锁机制原理_mysql 锁详解

在互联网软件开发领域,MySQL作为一款广泛应用的关系型数据库管理系统,其锁机制在保障数据一致性和实现并发控制方面扮演着举足轻重的角色。对于互联网软件开发人员而言,深入理解MySQL的锁机制原理...

Java 与 MySQL 性能优化:MySQL分区表设计与性能优化全解析

引言在数据库管理领域,随着数据量的不断增长,如何高效地管理和操作数据成为了一个关键问题。MySQL分区表作为一种有效的数据管理技术,能够将大型表划分为多个更小、更易管理的分区,从而提升数据库的性能和可...

MySQL基础篇:DQL数据查询操作_mysql 查

一、基础查询DQL基础查询语法SELECT字段列表FROM表名列表WHERE条件列表GROUPBY分组字段列表HAVING分组后条件列表ORDERBY排序字段列表LIMIT...

MySql:索引的基本使用_mysql索引的使用和原理

一、索引基础概念1.什么是索引?索引是数据库表的特殊数据结构(通常是B+树),用于...