云原生系列之使用prometheus监控nginx

news/2024/5/18 22:43:47 标签: nginx, 云原生, prometheus, 运维

前言

大家好，又见面了，我是沐风晓月，本文主要讲解云原生系列之使用prometheus监控nginx

文章收录到 csdn 我是沐风晓月的博客【prometheus监控系列】专栏，此专栏是沐风晓月对云原生prometheus的的总结，希望能够加深自己的印象，以及帮助到其他的小伙伴😉😉。

如果文章有什么需要改进的地方还请大佬不吝赐教👏👏。

🏠个人主页：我是沐风晓月
🧑个人简介：大家好，我是沐风晓月，双一流院校计算机专业，阿里云社区专家博主😉😉
💕 座右铭： 先努力成长自己，再帮助更多的人 ，一起加油进步🍺🍺🍺
💕欢迎大家：这里是CSDN，我总结知识的地方，喜欢的话请三连，有问题请私信😘

文章目录

  • 前言
  • 一. 实验环境
  • 二. nginx-vts-exporter简介
    • 2.1 如何获取nginx exporter
    • 2.2 nginx-vts-exporter简介
    • 2.3 nginx-module-vts简介
  • 三. 安装nginx1.22
    • 3.1 下载nginx源码
    • 3.2 下载nginx-module-vts模块
    • 3.3 解压所有源码
    • 3.4 安装编译nginx需要的依赖
    • 3.5 编译安装nginx
    • 3.6 修改nginx配置文件
    • 3.7 检查nginx配置文件语法
    • 3.8 启动nginx
    • 3.9 查看nginx启动情况
    • 3.10 登录网页验证模块
      • 3.10.1 使用“nginx-module-vts”默认模式查看nginx状态
      • 3.10.2 使用“nginx-module-vts”其他模式查看nginx状态
  • 四. 安装nginx-vts-exporter
    • 4.1 下载nginx_vts_exporter
    • 4.2 解压nginx_vts_exporter
    • 4.3 查看帮助文档
    • 4.4 启动nginx-vts-exporter
    • 4.5 查看nginx-vts-exporter启动状态
    • 4.6 查看nginx-vts-exporter采集的数据
  • 五. 配置prometheus拉取数据
  • 六.查看prometheus的监控数据
  • 七、grafana导入模板
    • 7.1 导入模板
    • 7.2 查看模板效果![请添加图片描述](https://img-blog.csdnimg.cn/ffb5e71d08024346be9b294f2237dace.png)
  • 八、Nginx常见监控指标
    • 8.1 基本活跃指标
    • 8.2 nginx的QPS
    • 8.3 nginx错误率
  • 九、总结

一. 实验环境

本次实验环境见下表：

操作系统服务器IPhostname
centos7.910.0.0.7mufengrow7
  • 查看操作系统
[root@mufengrow ~]# cat /etc/redhat-release 
CentOS Linux release 7.9.2009 (Core)
  • 查看hostname
# 修改hostname
[root@mufengrow ~]# hostname mufengrow7
[root@mufengrow ~]# bash

# 查看hostname
[root@mufengrow7 ~]# hostname
mufengrow7
  • 查看ip
[root@mufengrow7 ~]# ifconfig |grep inet |awk 'NR==1{print $2}'
10.0.0.7

本文中的prometheus监控软件已经安装好了，如果你还没安装，可以参考上一篇文章：prometheus安装及使用入门

更多内容关注csdn 【我是沐风晓月】

nginxvtsexporter_53">二. nginx-vts-exporter简介

nginx_exporter_55">2.1 如何获取nginx exporter

我们可以从prometheus官方的下载页面上看到，prometheus官方并没有提供官方对nginx的监控exporter。

那我们要怎么通过prometheus监控nginx呢？

在prometheus官方的下载页面，里面有提供一些比较好的第三方开源的exporter供我们使用。

prometheus官方下载页面：https://prometheus.io/download/

请添加图片描述
请添加图片描述

nginxvtsexporter_66">2.2 nginx-vts-exporter简介

我们都知道，nginx可以通过“ngx_http_stub_status_module”模块来显示自身的状态信息。但是状态页面显示的出来的结果又比较的简单，而且不符合prometheus采集数据的规范。所以就有人针对nginx开源了一款prometheus监控nginx的exproter——“nginx-vts-exporter”。

nginx-vts-exporter的github地址：https://github.com/hnlq715/nginx-vts-exporter

通过查看github介绍可以知道该exproter不像官方提供的exporter一样简单的安装上了就可以采集数据。它需要nginx在编译安装的时候加上一个第三方的模块“nginx-module-vts”。通过这个第三方模块，将nginx更加详细的数据展示出来，然后通过“nginx-vts-exporter”进行采集展示，最后由prometheus进行采集汇总。

第三方模块的github地址：https://github.com/vozlt/nginx-module-vts

nginxmodulevts_76">2.3 nginx-module-vts简介

“nginx-module-vts”是一个第三方的nginx模块，提供了对nginx状态信息的访问。

“nginx-module-vts”模块提供了几种方式展示自己的状态，这个之后会说明。

但是“nginx-module-vts”模块对nginx的版本的支持是有要求的，在nginx1.4.x之前的版本都不支持。使用的时候需要注意。请添加图片描述

nginx122_83">三. 安装nginx1.22

nginx_85">3.1 下载nginx源码

下载nginx-1.22的源码

[root@mufengrow7 ~]# cd /usr/local/src/
[root@mufengrow7 ~]# wget http://nginx.org/download/nginx-1.22.1.tar.gz

nginxmodulevts_94">3.2 下载nginx-module-vts模块

下载nginx-module-vts用于之后的nginx编译安装

[root@mufengrow7 src]# wget https://github.com/vozlt/nginx-module-vts/archive/refs/tags/v0.2.1.tar.gz

3.3 解压所有源码

解压nginx1.22的源码和解压nginx-module-vts模块的源码

#解压nginx1.22源码
[root@mufengrow7 src]# tar zxf nginx-1.22.1.tar.gz 
#解压nginx-module-vts模块源码
[root@mufengrow7 src]# tar zxf v0.2.1.tar.gz

代码注释：

z：指定解压的文件有gzip属性

x：从归档文件中解压出文件。

f：使用指定使用哪个归档文件。

nginx_121">3.4 安装编译nginx需要的依赖

编译安装nginx需要解决openssl和pcre的依赖，所以要提前将这两个包安装上

[root@mufengrow7 src]# yum install -y openssl-devel pcre-devel

nginx_129">3.5 编译安装nginx

编译安装nginx1.22，但是要注意的是我们需要在编译的参数里加上添加模块的参数“–add-module”，然后指向“nginx-module-vts”模块的源码路径

#进入nginx源码目录
[root@mufengrow7 src]# cd nginx-1.22.1/
#指定编译安装的参数，并进行检查，生成Makefile文件
[root@mufengrow7 nginx-1.22.1]# ./configure --prefix=/apps/nginx \
> --with-http_ssl_module \
> --with-http_v2_module \
> --with-http_realip_module \
> --with-http_stub_status_module \
> --with-http_gzip_static_module \
> --with-pcre \
> --with-file-aio \
> --with-stream \
> --with-stream_ssl_module \
> --with-stream_realip_module \
> --add-module=/usr/local/src/nginx-module-vts-0.2.1/ #指向“nginx-module-vts”模块源码的目录
#编译安装nginx
[root@mufengrow7 nginx-1.22.1]# make && make install
#查看nginx安装信息
[root@mufengrow7 nginx-1.22.1]# /apps/nginx/sbin/nginx -V
nginx version: nginx/1.22.1
built by gcc 4.8.5 20150623 (Red Hat 4.8.5-44) (GCC) 
built with OpenSSL 1.0.2k-fips  26 Jan 2017
TLS SNI support enabled
configure arguments: --prefix=/apps/nginx --with-http_ssl_module --with-http_v2_module --with-http_realip_module --with-http_stub_status_module --with-http_gzip_static_module --with-pcre --with-file-aio --with-stream --with-stream_ssl_module --with-stream_realip_module --add-module=/usr/local/src/nginx-module-vts-0.2.1/ #可以看到“nginx-module-vts”模块已经安装到nginx里了

代码注释：

-V：显示nginx版本和安装的配置

nginx_164">3.6 修改nginx配置文件

有人在想，如何修改nginx的配置文件才能让nginx的状态显示出来？

“nginx-module-vts”的github网页已经给出配置了请添加图片描述
根据“nginx-module-vts”官方给除的配置修改nginx的配置文件，让nginx能展示出自己的状态。

nginx">#进入nginx的安装目录
[root@mufengrow7 nginx]# cd /apps/nginx/
#修改nginx的配置
[root@mufengrow7 nginx]# vim conf/nginx.conf
......
http {
    ......;
    vhost_traffic_status_zone;
    ......;
    server{
        ......;
        location /status {
            vhost_traffic_status_display;
            vhost_traffic_status_display_format html;
        }
    }
}

nginx_191">3.7 检查nginx配置文件语法

修改配置文件后，需要检查nginx配置文件语法，查看是否出现语法上的错误

[root@mufengrow7 nginx]# ./sbin/nginx -t
nginx: the configuration file /apps/nginx/conf/nginx.conf syntax is ok #这里显示ok就证明语法没问题，可以启动nginx
nginx: configuration file /apps/nginx/conf/nginx.conf test is successful

代码注释：

-t：检查配置文件。

nginx_205">3.8 启动nginx

启动nginx

[root@mufengrow7 nginx]# ./sbin/nginx

nginx_213">3.9 查看nginx启动情况

[root@mufengrow7 nginx]# ps -ef | grep nginx | grep -v grep
root       5358      1  0 12:00 ?        00:00:00 nginx: master process ./sbin/nginx
nobody     5359   5358  0 12:00 ?        00:00:00 nginx: worker process

代码注释：

  • -ef：在-ef里可以分出两个选项-e和-f

  • -e：显示所有执行程序的进程（除会话领导者与终端关联的进程）

  • -f：显示UID,PPIP,C与STIME栏位

  • -v：选择不匹配的行

3.10 登录网页验证模块

nginxmodulevtsnginx_232">3.10.1 使用“nginx-module-vts”默认模式查看nginx状态

浏览器访问：

10.0.0.7/status

进入网页后，我们能看到模块给我们现实的结果

请添加图片描述

nginxmodulevtsnginx_243">3.10.2 使用“nginx-module-vts”其他模式查看nginx状态

“nginx-module-vts”内置了4种查看nginx状态的格式，我们上一点已经展示过使用html格式来展示nginx的状态，接下来我们会用“json”、“jsonp”、“prometheus”来展示nginx的状态。

  • “json”格式

浏览器访问：http://10.0.0.7/status/format/json

请添加图片描述

请添加图片描述

nginxvtsexporter_254">四. 安装nginx-vts-exporter

nginx_vts_exporter_256">4.1 下载nginx_vts_exporter

下载nginx_vts_exporter二进制包

#进入安装目录
[root@mufengrow7 nginx]# cd /apps
#下载nginx_vts_exporter二进制包
[root@mufengrow7 apps]# wget https://github.com/hnlq715/nginx-vts-exporter/releases/download/v0.10.3/nginx-vts-exporter-0.10.3.linux-amd64.tar.gz

nginx_vts_exporter_267">4.2 解压nginx_vts_exporter

对nginx_vts_exporter二进制包进行解压

[root@mufengrow7 apps]# tar xf nginx-vts-exporter-0.10.3.linux-amd64.tar.gz
[root@mufengrow7 apps]# cd nginx-vts-exporter-0.10.3.linux-amd64/

解压后可以看到里面之后一个可执行文件

[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# ls
LICENSE  nginx-vts-exporter

4.3 查看帮助文档

[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# ./nginx-vts-exporter --help
Usage of ./nginx-vts-exporter:
  -insecure
    	Ignore server certificate if using https (default true)
  -metrics.namespace string
    	Prometheus metrics namespace. (default "nginx")
  -nginx.scrape_timeout int
    	The number of seconds to wait for an HTTP response from the nginx.scrape_uri (default 2)
  -nginx.scrape_uri string
    	URI to nginx stub status page (default "http://localhost/status")
  -telemetry.address string
    	Address on which to expose metrics. (default ":9913")
  -telemetry.endpoint string
    	Path under which to expose metrics. (default "/metrics")
  -version
    	Print version information.

为了更直观一些，我们把参数用表格来展示：

参数描述
-insecure如果使用https，忽略服务器证书(默认为true)
-metrics.namespaceprometheus的metrics的命名空间（默认是nginx）
-nginx.scrape_timeout等待来自nginx的HTTP相应的秒数（默认是2秒）
-nginx.scrape_uri指定nginx状态页面的URI（默认是"http://localhost/status"）
-telemetry.addressexporter暴露的端口（默认是9913）
-telemetry.endpoint公开的metrics路径（默认是“/metrics”）
-version显示版本信息

nginxvtsexporter_316">4.4 启动nginx-vts-exporter

这里添加选项，让nginx-vts-exporter从nginx-module-vts的json格式下采集数据

[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# nohup /apps/nginx-vts-exporter-0.10.3.linux-amd64/nginx-vts-exporter -nginx.scrape_uri http://localhost/status/format/json &
[1] 5440
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# nohup: ignoring input and appending output to ‘nohup.out’ #出现日志文件路径信息，继续按回车
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# #回到标准输入的状态

nginxvtsexporter_327">4.5 查看nginx-vts-exporter启动状态

我们可以通过查看pid、端口和查看日志的方式确实“nginx-vts-exporter”的启动状态，通过下面的结果，我们可以看出“nginx-vts-exporter”已经在正常运行。

#查看pid
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# ps -ef | grep nginx-vts-exporter | grep -v grep
root       5440   1680  0 12:36 pts/0    00:00:00 /apps/nginx-vts-exporter-0.10.3.linux-amd64/nginx-vts-exporter
#查看端口
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# ss -tnl | grep 9913 | grep -v grep
LISTEN     0      128       [::]:9913                  [::]:*
#查看日志
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# tail -f nohup.out 
2023/03/07 12:36:37 Starting nginx_vts_exporter (version=0.10.3, branch=HEAD, revision=8aa2881c7050d9b28f2312d7ce99d93458611d04)
2023/03/07 12:36:37 Build context (go=go1.10, user=root@56ca8763ee48, date=20180328-05:47:47)
2023/03/07 12:36:37 Starting Server at : :9913
2023/03/07 12:36:37 Metrics endpoint: /metrics
2023/03/07 12:36:37 Metrics namespace: nginx
2023/03/07 12:36:37 Scraping information from : http://localhost/status

nginxvtsexporter_348">4.6 查看nginx-vts-exporter采集的数据

浏览器访问

10.0.0.7:9913/metrics

请添加图片描述

prometheus_355">五. 配置prometheus拉取数据

prometheus_357">5.1 修改prometheus的配置文件

修改的方式如图：

其中job_name、prometheus读取配置文件的方式、目标的ip和端口都可以根据需求自行修改。
请添加图片描述

prometheus_365">5.2 让prometheus重新读取配置文件

#进入prometheus安装目录
[root@mufengrow7 nginx-vts-exporter-0.10.3.linux-amd64]# cd /apps/prometheus
#执行命令检查语法
[root@mufengrow7 prometheus]# ./promtool check config prometheus.yml 
Checking prometheus.yml
 SUCCESS: prometheus.yml is valid prometheus config file syntax

通过重启，让prometheus重新读取配置文件

[root@mufengrow7 prometheus]# systemctl restart prometheus

prometheus_386">六.查看prometheus的监控数据

prometheus_388">6.1 到网页端查看prometheus监控目标

我们到prometheus的网页端，查看prometheus采集数据的目标是否有有nginx，通过下图，我们知道prometheus已经有采集nginx的数据了。请添加图片描述

prometheus_391">6.2 在prometheus网页查询结果

接下来我们到prometheus的查询面板查看prometheus有没有采集到nginx的数据

在这里插入图片描述

  • 查看nginx出现“4XX”的次数

请添加图片描述

  • 查看nginx的requests的次数
    请添加图片描述
  • 计算nginx在一分钟内的QPS

如果通过prometheus内置函数计算QPS，可以参考文章：prometheus常用的内置函数

请添加图片描述
通过以上的查询，我们也知道了prometheus有采集到nginx-vts-exproter的数据

七、grafana导入模板

本文中的grafana已经安装好了，如果你还未安装，可以参考文章：promehtheus整合grafana实现可视化监控实战

7.1 导入模板

grafana模板推荐编号：2949

导入模板：

  • 输入模板编号，点击Load
    请添加图片描述

  • 点击import

请添加图片描述

  • 修改数据源，点击Import
    请添加图片描述

7.2 查看模板效果请添加图片描述

思考：

既然“nginx-module-vts”有专门给prometheus采集的格式，那么是否可以直接通过prometheus采集“nginx-module-vts”的数据，而不必添加一个“nginx-vts-module”的中间件呢？

答案：prometheus可以直接采集“nginx-module-vts”的数据

  • 修改配置文件，如下图：
    请添加图片描述
  • Prometheus重启后，查看target
    请添加图片描述
  • 查询数据nginx的连接数

注意：对应的查询语句也要跟着改变，如果不知道查询语句的可以到“http://10.0.0.7/status/format/prometheus”进行查询

请添加图片描述

八、Nginx常见监控指标

8.1 基本活跃指标

nginx的基本活跃指标是可以通过“ngx_http_stub_status_module”模块来获取的。

名称描述
Accepts（接受）nginx接受客户端的连接数
Handled（已处理）成功处理客户端连接数
Active（活跃）当前活跃的客户端连接数
Requests（请求数）客户端请求书
Waiting（等待）正在等待的连接数
Reading（读）正在读操作的连接数
Writing（写）正在写操作的连接书

nginxQPS_464">8.2 nginx的QPS

我们可以使用Prometheus的PromQL的内置函数进行计算。

通过nginx计算的QPS，我们可以看出nginx服务的请求情况，通过QPS监控，可以了解是否有恶意攻击和对nginx的可行性进行判断。

nginx_470">8.3 nginx错误率

通过对错误代码的监控，可以知道客户端收到的结果是否正确。如果某段时间内错误结果不断飙升，证明网站可能出现物体

错误代码为：4XX（表示客户端错误代码） 5XX（表示服务端错误代码）

九、总结

Prometheus监控nginx的步骤为：

  1. 安装Prometheus
  2. 编译安装nginx，注意nginx需要安装“nginx-moudle-vts”模块
  3. 安装“nginx-vts-exporter”，在设置对应的参数后启动
  4. 修改Prometheus的配置文件，添加监控ngxin的实例，并重新读取配置文件
  5. 进入Prometheus的WEB页面进行查看

我是沐风晓月，文章首发于csdn，你的支持就是我的动力。

💕💕💕 好啦，这就是今天要分享给大家的全部内容了，我们下期再见！✨ ✨ ✨
🍻🍻🍻如果你喜欢的话，就不要吝惜你的一键三连了~


http://www.niftyadmin.cn/n/129247.html

相关文章

unity ECS简介

unity ECS简介

什么是Unity ECSUnity ECS是Unity引擎中的一种高性能游戏开发架构，它采用了基于数据的设计思路，与传统的面向对象编程不同。它的目标是提高游戏的性能和可伸缩性。Unity ECS通过实体（Entity）、组件（Component&#xff…
阅读更多...
LeetCode·每日一题·1096. 花括号展开 II·DFS+HASH

LeetCode·每日一题·1096. 花括号展开 II·DFS+HASH

作者：Guang链接：https://leetcode.cn/problems/brace-expansion-ii/solutions/997719/xss1096-hua-gua-hao-zhan-kai-iiby-zgh-by-vumf/来源：力扣（LeetCode）著作权归作者所有。商业转载请联系作者获得授权，…
阅读更多...
CF756div3 vp

CF756div3 vp

又被薄纱了，rk就不放了，好丢人QwQDashboard - Codeforces Round 756 (Div. 3) - CodeforcesA. Make Even小分类讨论题意：给定一个数，每次操作可以选取其前缀然后翻转其前缀，问你最少操作几次可以把该数变为偶数思路&am…
阅读更多...
14 nuxt3学习（布局 渲染模式 插件plugin 生命周期）

14 nuxt3学习（布局 渲染模式 插件plugin 生命周期）

布局 布局是围绕包含多个页面的公共用户界面的页面的包装器，例如页眉和页脚显示。 布局是使用slot 组件显示页面内容的Vue文件。 默认情况下使用layouts/default.vue文件。 自定义布局可以设置为页面元数据的一部分。 方式一：默认布局 在layouts目录下…
阅读更多...
质量指标——什么是增量覆盖率？它有啥用途？

质量指标——什么是增量覆盖率？它有啥用途？

目录 引言 什么是增量覆盖率 增量覆盖率有啥用途 1、对不同角色同学的用途 2、对不同规模的业务需求的用途 增量覆盖率的适用人员 增量覆盖率不太适用的情况 引言 有些质量团队，有时会拿「增量覆盖率」做出测试的准出卡点。 但在实际的使用过程中，…
阅读更多...
SpringBoot中Jackson序列化处理自定义注解

SpringBoot中Jackson序列化处理自定义注解

文章目录背景实现步骤自定义注解自定义处理注解的序列化器自定义注解内省器Jackson序列化配置测试思考如何找到处理自定义注解的序列化器如何向序列化器传递自定义注解中的参数如何不影响已有的Jackson序列化配置背景 上篇文章 Jackson序列化带有注解的字段的原理浅析 里已经简…
阅读更多...
项目实战典型案例27——单表的更新接口有9个之多

项目实战典型案例27——单表的更新接口有9个之多

单表的更新接口有9个之多一：背景介绍环境准备引入pom依赖配置数据库连接mybatis配置文件Mybatis的配置类编写通用的更新语句可以覆盖的更新接口暂时无法覆盖的接口测试四：总结五：升华一：背景介绍 本篇博客是对项目开发中出现的单…
阅读更多...
【阿里云】Apsara Clouder云计算专项技能认证-云服务器ECS入门，考试真题分享

【阿里云】Apsara Clouder云计算专项技能认证-云服务器ECS入门，考试真题分享

以下是阿里云Apsara Clouder云计算专项技能认证-云服务器ECS入门真题汇总篇分享： 1.下列哪一个不是重置ECS密码的步骤? A. 查看实例详情 B.进入控制台 C.远程连接ECS D.点击控制台“概览” 2.针对云服务器ECS安全组说法正确的是 A.是一种物理防火墙 B.仅用于控制…
阅读更多...
最新文章

Copyright @ 2022~2023