Pormetheus - Pushgateway创建方法(实例:每10秒统计TCP_WAIT状态连接数)

本文主要是介绍Pormetheus - Pushgateway创建方法(实例:每10秒统计TCP_WAIT状态连接数),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Pormetheus - Pushgateway(

    • 介绍
      • 一、Pushgateway 安装
      • 二、prometheus 命令行格式
        • 1、命令行使用
        • 2、命令行过滤
        • 3、数值过滤
      • 三、自定义编写脚本的方法,pushgateway 采集数据
      • 四、结合crontab 反复执行

介绍

pushgateway 是一种采用被动推送的方式(而不是 exporter主动获取)获取监控数据的 prometheus 插件

一、Pushgateway 安装

官网地址:https://prometheus.io/download/#pushgateway

github地址:https://github.com/prometheus/pushgateway

daemonize 后台运行

daemonize -c /root/pushgateway-1.2.0.linux-amd64 /root/pushgateway-1.2.0.linux-amd64/pushgateway

配置文件: /usr/local/prometheus/prometheus.yml
在这里插入图片描述

放行数据端口:

firewall-cmd --add-port=9090/tcp
firewall-cmd --add-port=9100/tcp
firewall-cmd --add-port=9091/tcp
firewall-cmd --add-port=9092/tcp

访问 Pushgateway: 正常 Metrics 里面是没有数据的,下图是两个节点提交过 数据之后的显示结果

http://192.168.168.11:9091/
在这里插入图片描述


二、prometheus 命令行格式

1、命令行使用

选用一个 新的Key 来做讲解

count_netstat_wait_connections (TCP 等待连接数)

自行编写的脚本 + pushgateway的方法,推送到 prometheus server 采集。是一个 guage 类型的数据。

在这里插入图片描述

gauge 类型的数据只输入 key 键名,就会直接形成人性化监控图。

gauge 类型的数据,相对于counter类型的数据,使用起来相对容器的多。需要很多函数来进行修饰,如:rate()、increase() 进行计算之后,才能获取人性化监控图。


2、命令行过滤

在这里插入图片描述

如图所示,{ } 当中的部分属于: "标签"

  • 标签主要用于采集数据,可以自定义标签的键值对,也可以使用默认的 exporter 提供的标签项。
  • 上图标签中最重要的 exported_instance="log" 指定被监控主机名为 “log”。
  • 在命令行上如果想要在基础之上进行过滤,就可以使用{ } 做第一步的过滤。
    count_netstat_wait_connections{exported_instance="log"}

标签精确过滤 =

例:匹配 log 主机名 exported_instance='log'

标签模糊过滤 =~

例:匹配 web. 开头的主机名 exported_instance=~"web."

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-d1zebVQT-1594101780396)(C:\Users\86156\Pictures\prometheus\批注 2020-07-06 192424.png)]


3、数值过滤

想要找出 wait_connection 数量 大于400

count_netstat_wait_connections{exported_instance=~"web.*"} > 400
在这里插入图片描述


三、自定义编写脚本的方法,pushgateway 采集数据

pushgateway 本身是没有任何抓取监控数据的功能的,它只是被动的等待推送。

实例:抓取 TCP waiting_connection 等待连接数量

vim /usr/local/pushgateway/shell/waiting_connection.sh


#!/bin/bash
instance_name=`hostname -f` # instance_name 取出主机名if [ $instance_name == "localhost" ];   #要求主机名不能是 localhost,没法区分
then
echo "Mush FQDN hostname"
exit 1
fi#For waitting connectionslabel="count_netstat_wait_connections"  # 定义 prometheus 命令行标签count_netstat_wait_connections=`netstat -anpt | grep -i wait | wc -l`   #定义一个新的数值,统计 TCP_WAIT 的连接数echo "$label:$count_netstat_wait_connections" # 输出格式:key/value(标签:取出的数值)echo "$label  $count_netstat_wait_connections" | curl --data-binary @-  http://192.168.168.11:9091/metrics/job/pushgateway/instance/$instance_name#最后把 key/value 推送给 pushgateway
#curl --data-binary : 将 HTTP POST请求中的数据发送给 pushgateway 服务器,与用户提交HTML表单时浏览的行为完全一样。
#HTTP POST 请求中的数据为纯 二进制数据。


以上脚本中最重要的是:

1、count_netstat_wait_connections=`netstat -anpt | grep -i wait | wc -l`

提取通过 linux 命令行获取到的 监控 TCP_WAIT 的数据

2、curl --data-binary @- http://192.168.168.11:9091/metrics/job/pushgateway/instance/$instance_name

  • 用 POST 方式 把 key/value 推送给 pushgateway的URL地址
  • curl --data-binary:将 HTTP POST请求中的数据发送给 pushgateway 服务器
  • http://192.168.168.11:9091/metrics/job/pushgateway:pushgateway URL的主 location
  • job/pushgateway:第二部分第一个标签,推送到哪一个 prometheus.yml 定义的job里
  • instance/$instance_name:第二个标签,推送后显示的 机器名是什么


四、结合crontab 反复执行

重点:重启 prometheus 服务,能够在 prometheus:9090/targets 当中看到 pushgateway
在这里插入图片描述

测试提交数据,查看是否成功

[root@node1 ~]# sh waiting_connection.sh
count_netstat_wait_connections:2 只显示结果,不出现报错为 真

结合 Crontab -e ,每分钟执行一次检测,并将结果提交到 pushgateway。

crontab -e

* * * * * sh /usr/local/pushgateway/waiting_connection.sh #每分钟执行一次

#如果想要按照秒钟来执行,按照以下来写

* * * * * sh /usr/local/pushgateway/waiting_connection.sh
* * * * * sleep 10;sh /usr/local/pushgateway/waiting_connection.sh
* * * * * sleep 20;sh /usr/local/pushgateway/waiting_connection.sh
* * * * * sleep 30;sh /usr/local/pushgateway/waiting_connection.sh
* * * * * sleep 40;sh /usr/local/pushgateway/waiting_connection.sh
* * * * * sleep 50;sh /usr/local/pushgateway/waiting_connection.sh

在这里插入图片描述

在这里插入图片描述

这篇关于Pormetheus - Pushgateway创建方法(实例:每10秒统计TCP_WAIT状态连接数)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/468361

相关文章

Conda与Python venv虚拟环境的区别与使用方法详解

《Conda与Pythonvenv虚拟环境的区别与使用方法详解》随着Python社区的成长,虚拟环境的概念和技术也在不断发展,:本文主要介绍Conda与Pythonvenv虚拟环境的区别与使用... 目录前言一、Conda 与 python venv 的核心区别1. Conda 的特点2. Python v

Spring Boot中WebSocket常用使用方法详解

《SpringBoot中WebSocket常用使用方法详解》本文从WebSocket的基础概念出发,详细介绍了SpringBoot集成WebSocket的步骤,并重点讲解了常用的使用方法,包括简单消... 目录一、WebSocket基础概念1.1 什么是WebSocket1.2 WebSocket与HTTP

SQL Server配置管理器无法打开的四种解决方法

《SQLServer配置管理器无法打开的四种解决方法》本文总结了SQLServer配置管理器无法打开的四种解决方法,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录方法一:桌面图标进入方法二:运行窗口进入检查版本号对照表php方法三:查找文件路径方法四:检查 S

MyBatis-Plus 中 nested() 与 and() 方法详解(最佳实践场景)

《MyBatis-Plus中nested()与and()方法详解(最佳实践场景)》在MyBatis-Plus的条件构造器中,nested()和and()都是用于构建复杂查询条件的关键方法,但... 目录MyBATis-Plus 中nested()与and()方法详解一、核心区别对比二、方法详解1.and()

golang中reflect包的常用方法

《golang中reflect包的常用方法》Go反射reflect包提供类型和值方法,用于获取类型信息、访问字段、调用方法等,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录reflect包方法总结类型 (Type) 方法值 (Value) 方法reflect包方法总结

C# 比较两个list 之间元素差异的常用方法

《C#比较两个list之间元素差异的常用方法》:本文主要介绍C#比较两个list之间元素差异,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1. 使用Except方法2. 使用Except的逆操作3. 使用LINQ的Join,GroupJoin

MySQL查询JSON数组字段包含特定字符串的方法

《MySQL查询JSON数组字段包含特定字符串的方法》在MySQL数据库中,当某个字段存储的是JSON数组,需要查询数组中包含特定字符串的记录时传统的LIKE语句无法直接使用,下面小编就为大家介绍两种... 目录问题背景解决方案对比1. 精确匹配方案(推荐)2. 模糊匹配方案参数化查询示例使用场景建议性能优

关于集合与数组转换实现方法

《关于集合与数组转换实现方法》:本文主要介绍关于集合与数组转换实现方法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、Arrays.asList()1.1、方法作用1.2、内部实现1.3、修改元素的影响1.4、注意事项2、list.toArray()2.1、方

Python中注释使用方法举例详解

《Python中注释使用方法举例详解》在Python编程语言中注释是必不可少的一部分,它有助于提高代码的可读性和维护性,:本文主要介绍Python中注释使用方法的相关资料,需要的朋友可以参考下... 目录一、前言二、什么是注释?示例:三、单行注释语法:以 China编程# 开头,后面的内容为注释内容示例:示例:四

一文详解Git中分支本地和远程删除的方法

《一文详解Git中分支本地和远程删除的方法》在使用Git进行版本控制的过程中,我们会创建多个分支来进行不同功能的开发,这就容易涉及到如何正确地删除本地分支和远程分支,下面我们就来看看相关的实现方法吧... 目录技术背景实现步骤删除本地分支删除远程www.chinasem.cn分支同步删除信息到其他机器示例步骤