服务器之家:专注于服务器技术及软件下载分享
分类导航

云服务器|WEB服务器|FTP服务器|邮件服务器|虚拟主机|服务器安全|DNS服务器|服务器知识|Nginx|IIS|Tomcat|

服务器之家 - 服务器技术 - Nginx - Prometheus监控实战篇Nginx、Hbase操作详解

Prometheus监控实战篇Nginx、Hbase操作详解

2022-02-28 23:27袁胜的博客 Nginx

这篇文章主要介绍了Prometheus监控实战篇Nginx、Hbase,本文通过图文并茂的形式给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下

 

一、Prometheus监控Nginx

 

1、监控Nginx相关插件下载地址

nginx_exporter下载地址
Nginx_module-vts下载地址
nginx-release下载地址

Prometheus(8.3.3)和grafana(2.32.1)我使用的是官网最新版

 

2、编译Nginx

注意:我这边是使用rpm安装的Nginx。所以要进行编译一下,可以根据自己的实际情况进行操作

 

2.1 下载 nginx-release 并解压

如果有这两个目录将其删除掉

rm -rf Makefile objs

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.2 解压 Nginx-module-vts,到/opt/nginx/

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.3 执行以下命令,进行编译Nginx

./configure --prefix=/usr/share/nginx --sbin-path=/usr/sbin/nginx --modules-path=/usr/lib64/nginx/modules --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --http-client-body-temp-path=/var/lib/nginx/tmp/client_body --http-proxy-temp-path=/var/lib/nginx/tmp/proxy --http-fastcgi-temp-path=/var/lib/nginx/tmp/fastcgi --http-uwsgi-temp-path=/var/lib/nginx/tmp/uwsgi --http-scgi-temp-path=/var/lib/nginx/tmp/scgi --pid-path=/run/nginx.pid --lock-path=/run/lock/subsys/nginx --user=nginx --group=nginx --with-compat --with-debug --with-file-aio --with-http_addition_module --with-http_auth_request_module --with-http_dav_module --with-http_degradation_module --with-http_flv_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_image_filter_module=dynamic --with-http_mp4_module --with-http_perl_module=dynamic --with-http_random_index_module --with-http_realip_module --with-http_secure_link_module --with-http_slice_module --with-http_ssl_module --with-http_stub_status_module --with-http_sub_module --with-http_v2_module --with-http_xslt_module=dynamic --with-mail=dynamic --with-mail_ssl_module --with-pcre --with-pcre-jit --with-stream=dynamic --with-stream_ssl_module --with-stream_ssl_preread_module --with-threads --with-cc-opt="-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector-strong --param=ssp-buffer-size=4 -grecord-gcc-switches -specs=/usr/lib/rpm/redhat/redhat-hardened-cc1 -m64 -mtune=generic" --with-ld-opt="-Wl,-z,relro -specs=/usr/lib/rpm/redhat/redhat-hardened-ld -Wl,-E" --add-module=/opt/nginx/nginx-module-vts-0.1.18

 

2.4 再执行 make 命令

注意: 不要执行make install

make

2.5 将编译后的二进制文件以及模块放到对应的目录下,并将原来的做备份

Prometheus监控实战篇Nginx、Hbase操作详解

Prometheus监控实战篇Nginx、Hbase操作详解

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.6 在Nginx 添加以下内容到Nginx配置文件中

location /status {
    vhost_traffic_status_display;
    vhost_traffic_status_display_format html;
}

 

2.7 重新启动Nginx,并检查服务是否正常

http://127.0.0.1:80/status/

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.8 解压Nginx-vts-exporter,并启动

Prometheus监控实战篇Nginx、Hbase操作详解

启动nginx-vts-exporter(默认端口为9913)

nohup ./nginx-vts-exporter -nginx.scrape_uri=http://127.0.0.1:80/status/format/json &

 

2.9 在Prometheus中添加Nginx-vts-exporter,并重启Prometheus

vim promethues.yml
  - job_name: "nginx_exporter"
    static_configs:
      - targets: ["localhost:9913"]

 

2.10 在grafana 中添加模块 使用的模块是2949,也可以自己定义

Prometheus监控实战篇Nginx、Hbase操作详解

Prometheus监控实战篇Nginx、Hbase操作详解

数据展示

Prometheus监控实战篇Nginx、Hbase操作详解

 

二、Prometheus监控hbase

 

1. 监控hbase插件下载地址

jmx_prometheus_javaagent
grafana模块

 

2. 部署

 

2.1 将下载好的jmx_prometheus_javaagent 移动到hbase的lib下

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.2 配置 hbase_jmx_config.yaml

vim /usr/hbase/conf/ hbase_jmx_config.yaml

---
lowercaseOutputName: true
lowercaseOutputLabelNames: true
rules:
- pattern: Hadoop<service=HBase, name=RegionServer, sub=Regions><>Namespace_([^W_]+)_table_([^W_]+)_region_([^W_]+)_metric_(w+)
  name: HBase_metric_$4
  labels:
    namespace: "$1"
    table: "$2"
    region: "$3"
- pattern: Hadoop<service=(w+), name=(w+), sub=(w+)><>([w._]+)
  name: hadoop_$1_$4
  labels:
    "name": "$2"
    "sub": "$3"
- pattern: .+

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.3 在hbase-env.sh 中添加以下参数,并重启hbase

注意:分别在master和regionserver 都要添加,但是要注意端口不可以相同。(每台服务都做以上操作)

master

-javaagent:$HBASE_HOME/lib/jmx_prometheus_javaagent-0.16.1.jar=17000:$HBASE_HOME/conf/hbase_jmx_config.yaml

regionserver

-javaagent:$HBASE_HOME/lib/jmx_prometheus_javaagent-0.16.1.jar=18000:$HBASE_HOME/conf/hbase_jmx_config.yaml

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.4 查看是否采集数据

http://127.0.0.1:17000/metrics

Prometheus监控实战篇Nginx、Hbase操作详解

 

2.5 配置Prometheus server,并重启服务

IP地址根据实际情况改写

vim prometheus.yml
  - job_name: "hbase_exporter"
    static_configs:
      - targets: ["127.0.0.1:17000"]
      - targets: ["127.0.0.1:18000"]
      - targets: ["127.0.0.1:18000"]
      - targets: ["127.0.0.1:18000"]
      - targets: ["127.0.0.1:18000"]

 

2.6 在granfan中添加模块

grafana模块

Prometheus监控实战篇Nginx、Hbase操作详解

Prometheus监控实战篇Nginx、Hbase操作详解

数据展示

Prometheus监控实战篇Nginx、Hbase操作详解

到此这篇关于Prometheus监控实战篇Nginx、Hbase的文章就介绍到这了,更多相关Prometheus监控Nginx、Hbase内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文地址:https://blog.csdn.net/yuansheng730/article/details/123114061

延伸 · 阅读

精彩推荐
  • NginxNginx Rewrite使用场景及代码案例详解

    Nginx Rewrite使用场景及代码案例详解

    这篇文章主要介绍了Nginx Rewrite使用场景及代码案例详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可...

    盗哥泡茶去了11862020-09-27
  • Nginx利用nginx和腾讯云免费证书制作https的方法

    利用nginx和腾讯云免费证书制作https的方法

    这篇文章主要介绍了利用nginx和腾讯云免费证书制作https的方法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧 ...

    dalaoyang5992019-12-30
  • NginxNginx location 和 proxy_pass路径配置问题小结

    Nginx location 和 proxy_pass路径配置问题小结

    本文是基于 location 的匹配末尾是否配置 / 和 proxy_pass 末尾是否配置 / ,进行测试,完全还原了整个测试过程,本文给大家介绍Nginx location 基本配置及相关配...

    自由早晚乱余生18742021-09-24
  • Nginx通过Nginx规则重写URL去掉index.php不显示index.php

    通过Nginx规则重写URL去掉index.php不显示index.php

    Nginx不仅占用内存少,并发能力强,而且拓展功能丰富,可以通过安装模板来强化功能,也能通过规则优化,优化服务器并发处理能力,是建站的不二之选...

    Genius日记5872020-10-16
  • Nginxnginx ssl免密码重启教程详解

    nginx ssl免密码重启教程详解

    这篇文章给大家介绍了nginx 如何启动以及nginx ssl 免密码重启 的方法,非常不错,具有参考借鉴价值,需要的朋友参考下吧 ...

    mrr4272019-11-19
  • Nginx如何优化Nginx的处理性能

    如何优化Nginx的处理性能

    Nginx是一个很强大的高性能Web和反向代理服务,它具有很多非常优越的特性,在连接高并发的情况下,Nginx是Apache服务不错的替代品。其特点是占有内存少,...

    Dockone.io5142020-12-11
  • NginxNginx动静分离实现案例代码解析

    Nginx动静分离实现案例代码解析

    这篇文章主要介绍了Nginx动静分离实现案例代码解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参...

    盗哥泡茶去了3382020-09-27
  • Nginxnginx rewrite 伪静态配置参数和使用例子

    nginx rewrite 伪静态配置参数和使用例子

    nginx下伪静态配置参数详细说明,使用nginx的朋友,nginx rewrite 伪静态配置参数和使用例子 附正则使用说明 ...

    服务器之家3102019-10-08