如何通过Prometheus实现对Nginx的全面长尾词监控?
- 内容介绍
- 文章标签
- 相关推荐
本文共计657个文字,预计阅读时间需要3分钟。
由nginx的快速与高效,生产中的大部分应用都会选择使用nginx进行反向代理。此时,对nginx的监控就显得尤为重要,需要能够直观地显示出nginx的实时流量、访问量、响应时间等HTTP状态。
由于nginx的快速和高效,生产中的大部分应用都会选择使用nginx来做反向代理,这时对于nginx的监控就显得非常有必要,需要能够直观的显示出nginx实时的流量,访问量,响应时间,github.com/vozlt/nginx-module-vts #获取vts源码wget nginx.org/download/nginx-1.14.2.tar.gz #获取nginx源码tar -zxvf nginx.org/download/nginx-1.14.2.tar.gzcd nginx-1.14.2./configure --add-module=/root/nginx-module-vts --prefix=/etc/nginx --sbin-path=/usr/sbin/nginx --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --github.com/hnlq715/nginx-vts-exporterchmod +x nginx-vts-exporter
nginx-vts-exporter -nginx.scrape_uri=localhost:8088/status/format/json
启动后默认端口为 : 9913/metrics
4、通过VTS获取其它指标
通过以上部署只能拿到默认的指标,生产中可能还会需要监控uri的请求量,监控IP访问情况(同一个IP出现大量访问时可能被攻击),获取不同agent请求量用于分析等,通过vts模块的vhost_traffic_status_filter_by_set_key功能可以自定义需要获取的指标。 此处的指标需要加到对应的server配置中
server { listen 80; server_name nginx.test.com; vhost_traffic_status_filter_by_set_key $uri uri::$server_name; #每个uri访问量 vhost_traffic_status_filter_by_set_key $geoip_country_code country::$server_name; #不同国家/区域请求量 vhost_traffic_status_filter_by_set_key $filter_user_agent agent::$server_name; #获取用户所使用的agent vhost_traffic_status_filter_by_set_key $status $server_name; #http code统计 vhost_traffic_status_filter_by_set_key $upstream_addr upstream::backend; #后端转发统计 vhost_traffic_status_filter_by_set_key $remote_port client::ports::$server_name; #请求端口统计 vhost_traffic_status_filter_by_set_key $remote_addr client::addr::$server_name; #请求IP统计 location ~ ^/storage/(.+)/.*$ { set $volume $1; vhost_traffic_status_filter_by_set_key $volume storage::$server_name; #请求路径统计 } ......}
prometheus部署及相应配置
1、部署prometheus
prometheus server采用 go 语言编写,下载后解压可直接运行
tar xvfz prometheus-2.7.2.linux-amd64.tar.gzcd prometheus-2.7.2.linux-amd64
/usr/local/prometheus-2.7.2.linux-amd64/prometheus --storage.tsdb.path=/data/prometheus --web.enable-lifecycle >> /data/prometheus/prometheus.log 2>&1 &
#–storage.tsdb.path参数指定数据存储路径
#--web.enable-lifecycle参数允许热加载,设置该参数后可以通过 curl XPOST localhost: 9090/-/reload 快速加载配置
2、 nginx-vts-exporte接入
修改prometheus.yml配置文件,将nginx-vts-exporter对应端口接入prometheus,采用文件发现的方式
编辑 ./file_sd_configs/file_sd_configs_nginx.json,nginx数量比较多的情况下,可以利用自定义labels对Nginx进行分组,便于后续图像展示
[ { "targets": [ "10.21.141.25:9913" ], "labels": { "group": "ops-test" } }, { "targets": [ "10.21.141.26:9913" ], "labels": { "group": "ops-test" } }]grafana接入prometheus
在grafana数据源设置中将部署好的prometheus加入,就可以对获取到的数据使用图像展示了
导入nginx-vts-exporter的示例图
https: //grafana.com/dashboards/2949
根据监控需求进行标签分组,增删图像。 最终效果如下:
精 选推荐
01
openvpn—实现双网互通
02
Google ARCore
03
Android - 性能优化
本文共计657个文字,预计阅读时间需要3分钟。
由nginx的快速与高效,生产中的大部分应用都会选择使用nginx进行反向代理。此时,对nginx的监控就显得尤为重要,需要能够直观地显示出nginx的实时流量、访问量、响应时间等HTTP状态。
由于nginx的快速和高效,生产中的大部分应用都会选择使用nginx来做反向代理,这时对于nginx的监控就显得非常有必要,需要能够直观的显示出nginx实时的流量,访问量,响应时间,github.com/vozlt/nginx-module-vts #获取vts源码wget nginx.org/download/nginx-1.14.2.tar.gz #获取nginx源码tar -zxvf nginx.org/download/nginx-1.14.2.tar.gzcd nginx-1.14.2./configure --add-module=/root/nginx-module-vts --prefix=/etc/nginx --sbin-path=/usr/sbin/nginx --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --github.com/hnlq715/nginx-vts-exporterchmod +x nginx-vts-exporter
nginx-vts-exporter -nginx.scrape_uri=localhost:8088/status/format/json
启动后默认端口为 : 9913/metrics
4、通过VTS获取其它指标
通过以上部署只能拿到默认的指标,生产中可能还会需要监控uri的请求量,监控IP访问情况(同一个IP出现大量访问时可能被攻击),获取不同agent请求量用于分析等,通过vts模块的vhost_traffic_status_filter_by_set_key功能可以自定义需要获取的指标。 此处的指标需要加到对应的server配置中
server { listen 80; server_name nginx.test.com; vhost_traffic_status_filter_by_set_key $uri uri::$server_name; #每个uri访问量 vhost_traffic_status_filter_by_set_key $geoip_country_code country::$server_name; #不同国家/区域请求量 vhost_traffic_status_filter_by_set_key $filter_user_agent agent::$server_name; #获取用户所使用的agent vhost_traffic_status_filter_by_set_key $status $server_name; #http code统计 vhost_traffic_status_filter_by_set_key $upstream_addr upstream::backend; #后端转发统计 vhost_traffic_status_filter_by_set_key $remote_port client::ports::$server_name; #请求端口统计 vhost_traffic_status_filter_by_set_key $remote_addr client::addr::$server_name; #请求IP统计 location ~ ^/storage/(.+)/.*$ { set $volume $1; vhost_traffic_status_filter_by_set_key $volume storage::$server_name; #请求路径统计 } ......}
prometheus部署及相应配置
1、部署prometheus
prometheus server采用 go 语言编写,下载后解压可直接运行
tar xvfz prometheus-2.7.2.linux-amd64.tar.gzcd prometheus-2.7.2.linux-amd64
/usr/local/prometheus-2.7.2.linux-amd64/prometheus --storage.tsdb.path=/data/prometheus --web.enable-lifecycle >> /data/prometheus/prometheus.log 2>&1 &
#–storage.tsdb.path参数指定数据存储路径
#--web.enable-lifecycle参数允许热加载,设置该参数后可以通过 curl XPOST localhost: 9090/-/reload 快速加载配置
2、 nginx-vts-exporte接入
修改prometheus.yml配置文件,将nginx-vts-exporter对应端口接入prometheus,采用文件发现的方式
编辑 ./file_sd_configs/file_sd_configs_nginx.json,nginx数量比较多的情况下,可以利用自定义labels对Nginx进行分组,便于后续图像展示
[ { "targets": [ "10.21.141.25:9913" ], "labels": { "group": "ops-test" } }, { "targets": [ "10.21.141.26:9913" ], "labels": { "group": "ops-test" } }]grafana接入prometheus
在grafana数据源设置中将部署好的prometheus加入,就可以对获取到的数据使用图像展示了
导入nginx-vts-exporter的示例图
https: //grafana.com/dashboards/2949
根据监控需求进行标签分组,增删图像。 最终效果如下:
精 选推荐
01
openvpn—实现双网互通
02
Google ARCore
03
Android - 性能优化

