【博客708】victoriametrics如何处理counter跳变

2024-03-31 15:04

本文主要是介绍【博客708】victoriametrics如何处理counter跳变,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

victoriametrics如何处理counter跳变

背景

监控中我们经常会使用一些counter类型的metrics来计算速率,比如:rate(https_request_total)
但是如果我们的服务突然由于异常导致重启了,那么这时候counter会重新从0开始计算,那么这时候就会有问题,假设我们原来https_request_total是计数到500,然后服务异常重启,启动后https_request_total是0,那么此时如果没有counter跳变的处理,那么rate(https_request_total)就会变成负数,我们期待的是当异常重启后,能够在原来基础上,从500继续计数,但是我们服务又不会记得上一次的值(不是不能处理,其实存下来每次启动读取也能实现,只是不应该把这部分基建层的逻辑侵入到业务里面去),所以就依赖于监控方案来处理!

victoriametrics对counter跳变的处理

counter重置会补上前面的值,同时如果跳变只是一小下,那么补上差值即可,不需要直接加上前一个值:

更多细节的相关issue:https://github.com/VictoriaMetrics/VictoriaMetrics/issues/2787

func removeCounterResets(values []float64) {// There is no need in handling NaNs here, since they are impossible// on values from vmstorage.if len(values) == 0 {return}var correction float64prevValue := values[0]for i, v := range values {d := v - prevValueif d < 0 {if (-d * 8) < prevValue {// This is likely a partial counter reset.// See https://github.com/VictoriaMetrics/VictoriaMetrics/issues/2787// 这里做了部分reset的优化correction += prevValue - v} else {// 这里叠加了上一个值,也是就在原来基础上继续计算counter// 这就是为什么服务重启后,明明counter变小了,但是对counter进行计算却不会出错的原因 correction += prevValue}}prevValue = vvalues[i] = v + correction}
}

类似的,victoriametrics会自动处理counter的函数:

// rollupFuncsRemoveCounterResets contains functions, which need to call removeCounterResets
// over input samples before calling the corresponding rollup functions.
var rollupFuncsRemoveCounterResets = map[string]bool{"increase":            true,"increase_prometheus": true,"increase_pure":       true,"irate":               true,"rate":                true,"rollup_increase":     true,"rollup_rate":         true,
}

这篇关于【博客708】victoriametrics如何处理counter跳变的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/864619

相关文章

Python自动化处理手机验证码

《Python自动化处理手机验证码》手机验证码是一种常见的身份验证手段,广泛应用于用户注册、登录、交易确认等场景,下面我们来看看如何使用Python自动化处理手机验证码吧... 目录一、获取手机验证码1.1 通过短信接收验证码1.2 使用第三方短信接收服务1.3 使用ADB读取手机短信1.4 通过API获取

Python自动化Office文档处理全攻略

《Python自动化Office文档处理全攻略》在日常办公中,处理Word、Excel和PDF等Office文档是再常见不过的任务,手动操作这些文档不仅耗时耗力,还容易出错,幸运的是,Python提供... 目录一、自动化处理Word文档1. 安装python-docx库2. 读取Word文档内容3. 修改

使用C++将处理后的信号保存为PNG和TIFF格式

《使用C++将处理后的信号保存为PNG和TIFF格式》在信号处理领域,我们常常需要将处理结果以图像的形式保存下来,方便后续分析和展示,C++提供了多种库来处理图像数据,本文将介绍如何使用stb_ima... 目录1. PNG格式保存使用stb_imagephp_write库1.1 安装和包含库1.2 代码解

C#使用DeepSeek API实现自然语言处理,文本分类和情感分析

《C#使用DeepSeekAPI实现自然语言处理,文本分类和情感分析》在C#中使用DeepSeekAPI可以实现多种功能,例如自然语言处理、文本分类、情感分析等,本文主要为大家介绍了具体实现步骤,... 目录准备工作文本生成文本分类问答系统代码生成翻译功能文本摘要文本校对图像描述生成总结在C#中使用Deep

Spring Boot 整合 ShedLock 处理定时任务重复执行的问题小结

《SpringBoot整合ShedLock处理定时任务重复执行的问题小结》ShedLock是解决分布式系统中定时任务重复执行问题的Java库,通过在数据库中加锁,确保只有一个节点在指定时间执行... 目录前言什么是 ShedLock?ShedLock 的工作原理:定时任务重复执行China编程的问题使用 Shed

Redis如何使用zset处理排行榜和计数问题

《Redis如何使用zset处理排行榜和计数问题》Redis的ZSET数据结构非常适合处理排行榜和计数问题,它可以在高并发的点赞业务中高效地管理点赞的排名,并且由于ZSET的排序特性,可以轻松实现根据... 目录Redis使用zset处理排行榜和计数业务逻辑ZSET 数据结构优化高并发的点赞操作ZSET 结

微服务架构之使用RabbitMQ进行异步处理方式

《微服务架构之使用RabbitMQ进行异步处理方式》本文介绍了RabbitMQ的基本概念、异步调用处理逻辑、RabbitMQ的基本使用方法以及在SpringBoot项目中使用RabbitMQ解决高并发... 目录一.什么是RabbitMQ?二.异步调用处理逻辑:三.RabbitMQ的基本使用1.安装2.架构

一文详解Python中数据清洗与处理的常用方法

《一文详解Python中数据清洗与处理的常用方法》在数据处理与分析过程中,缺失值、重复值、异常值等问题是常见的挑战,本文总结了多种数据清洗与处理方法,文中的示例代码简洁易懂,有需要的小伙伴可以参考下... 目录缺失值处理重复值处理异常值处理数据类型转换文本清洗数据分组统计数据分箱数据标准化在数据处理与分析过

mysql外键创建不成功/失效如何处理

《mysql外键创建不成功/失效如何处理》文章介绍了在MySQL5.5.40版本中,创建带有外键约束的`stu`和`grade`表时遇到的问题,发现`grade`表的`id`字段没有随着`studen... 当前mysql版本:SELECT VERSION();结果为:5.5.40。在复习mysql外键约

Python中使用defaultdict和Counter的方法

《Python中使用defaultdict和Counter的方法》本文深入探讨了Python中的两个强大工具——defaultdict和Counter,并详细介绍了它们的工作原理、应用场景以及在实际编... 目录引言defaultdict的深入应用什么是defaultdictdefaultdict的工作原理