流量复制工具--GoReplay使用笔记

2024-01-27 17:48

本文主要是介绍流量复制工具--GoReplay使用笔记,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

GoReplay简介

GoReplay是一款开源的用来进行http流量录制与回放的工具,因此可以通过它来进行线上真实流量录制然后将录制的流量回放到测试环境用来确认新开发的功能是否有问题,这样可以极大的提高新功能发布的信心,不得不说是一款神器。

它的Github主页如下:https://github.com/buger/goreplay

GoReplay安装

#下载包wget https://github.com/buger/goreplay/releases/download/v1.0.0/gor_1.0.0_x64.tar.gz#解压tar xvf gor_1.0.0_x64.tar.gz

流量捕获

运行如下命令:

sudo ./gor --input-raw :8000 --output-stdout

这命令表示: 监听所有活跃于开放的端口 8000, 并且将它 log 到标准输出。
这时, 你就可以在浏览器中访问 http://localhost:8000 , 或使用 curl http://localhost:8000 就可以看到它的输出了。
注意: 默认情况下, GoReplay 不会跟踪响应, 你可以这样子开启这个功能: --output-http-track-response。

回放

sudo ./gor --input-raw :8000 --output-http="http://localhost:8001"

就可以将 8000 端口的流量, 重放到 8001 端口的服务了.

保存到文件,然后再回放
保存到文件:
sudo ./gor --input-raw :8000 --output-file=requests.gor
回放
./gor --input-file requests.gor --output-http="http://localhost:8001"
回放到多个站点
sudo ./gor --input-tcp :28020 --output-http "http://staging.com"  --output-http "http://dev.com"
分割流量
按轮询方式
sudo ./gor --input-raw :80 --output-http "http://staging.com"  --output-http "http://dev.com" --split-output true

跟踪重定向

gor --input-tcp replay.local:28020 --output-http http://staging.com --output-http-redirects 2

–output-http-redirects 2 表示最多跟踪2层的重定向

HTTP 超时设置

gor --input-tcp replay.local:28020 --output-http http://staging.com --output-http-timeout 30s

性能测试

gor --input-file "requests.gor|200%" --output-http "staging.com"

表示放大2倍速度来回放.

查看统计信息

--stats --output-http-stats
循环重放
--input-file-loop

速率限制

绝对值
gor --input-tcp :28020 --output-http "http://staging.com|10"

表示最大不超过 10 QPS

百分比
gor --input-raw :80 --output-tcp "replay.local:28020|10%"

不超过原流量的 10%

过滤请求

url 正则
# 表示只允许 /api 的请求
gor --input-raw :8080 --output-http staging.com --http-allow-url /api
# 除 /api 之外的请求
gor --input-raw :8080 --output-http staging.com --http-disallow-url /api

–http-allow-url 表示允许的url
–http-disallow-url 表示禁止

基于方法
gor --input-raw :80 --output-http "http://staging.server" --http-allow-method GET --http-allow-method OPTIONS

表示只允许 GET , OPTIONS 的请求

基于请求头
gor --input-raw :8080 --output-http staging.com --http-allow-header api-version:^1\.0\d
gor --input-raw :8080 --output-http staging.com --http-disallow-header "User-Agent: Replayed by Gor"
重写请求
gor --input-raw :8080 --output-http staging.com --http-rewrite-url /v1/user/([^\\/]+)/ping:/v2/user/$1/ping
url 参数过滤
gor --input-raw :8080 --output-http staging.com --http-set-param api_key=1
设置 HEADER
gor --input-raw :80 --output-http "http://staging.server" --http-header "User-Agent: Replayed by Gor" --http-header "Enable-Feature-X: true"
导出到 ES
./gor --input-raw :8000 --output-http http://staging.com  --output-http-elasticsearch localhost:9200/gor

Es的格式

type ESRequestResponse struct {ReqURL               string `json:"Req_URL"`ReqMethod            string `json:"Req_Method"`ReqUserAgent         string `json:"Req_User-Agent"`ReqAcceptLanguage    string `json:"Req_Accept-Language,omitempty"`ReqAccept            string `json:"Req_Accept,omitempty"`ReqAcceptEncoding    string `json:"Req_Accept-Encoding,omitempty"`ReqIfModifiedSince   string `json:"Req_If-Modified-Since,omitempty"`ReqConnection        string `json:"Req_Connection,omitempty"`ReqCookies           string `json:"Req_Cookies,omitempty"`RespStatus           string `json:"Resp_Status"`RespStatusCode       string `json:"Resp_Status-Code"`RespProto            string `json:"Resp_Proto,omitempty"`RespContentLength    string `json:"Resp_Content-Length,omitempty"`RespContentType      string `json:"Resp_Content-Type,omitempty"`RespTransferEncoding string `json:"Resp_Transfer-Encoding,omitempty"`RespContentEncoding  string `json:"Resp_Content-Encoding,omitempty"`RespExpires          string `json:"Resp_Expires,omitempty"`RespCacheControl     string `json:"Resp_Cache-Control,omitempty"`RespVary             string `json:"Resp_Vary,omitempty"`RespSetCookie        string `json:"Resp_Set-Cookie,omitempty"`Rtt                  int64  `json:"RTT"`Timestamp            time.Time
}

HTTPS 的支持

--input-tcp-secure --input-tcp-certificate ./cert.pem --input-tcp-certificate-key ./key.pem --output-tcp-secure

常用命令

-input-raw 抓取指定端口的流量 gor --input-raw :8080
-output-stdout 打印到控制台
-output-file 将请求写到文件中 gor --input-raw :80 --output-file ./requests.gor
-input-file 从文件中读取请求,与上一条命令呼应 gor --input-file ./requests.gor
-exit-after 5s 持续时间
-http-allow-url url白名单,其他请求将会被丢弃
-http-allow-method 根据请求方式过滤
-http-disallow-url 遇上一个url相反,黑名单,其他的请求会被捕获到

要 0.16.1 及以上版本

更多参考官方文档:https://github.com/buger/goreplay/wiki/Getting-Started
http://www.likecs.com/show-18920.html

这篇关于流量复制工具--GoReplay使用笔记的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/651026

相关文章

C++使用栈实现括号匹配的代码详解

《C++使用栈实现括号匹配的代码详解》在编程中,括号匹配是一个常见问题,尤其是在处理数学表达式、编译器解析等任务时,栈是一种非常适合处理此类问题的数据结构,能够精确地管理括号的匹配问题,本文将通过C+... 目录引言问题描述代码讲解代码解析栈的状态表示测试总结引言在编程中,括号匹配是一个常见问题,尤其是在

Java中String字符串使用避坑指南

《Java中String字符串使用避坑指南》Java中的String字符串是我们日常编程中用得最多的类之一,看似简单的String使用,却隐藏着不少“坑”,如果不注意,可能会导致性能问题、意外的错误容... 目录8个避坑点如下:1. 字符串的不可变性:每次修改都创建新对象2. 使用 == 比较字符串,陷阱满

Python使用国内镜像加速pip安装的方法讲解

《Python使用国内镜像加速pip安装的方法讲解》在Python开发中,pip是一个非常重要的工具,用于安装和管理Python的第三方库,然而,在国内使用pip安装依赖时,往往会因为网络问题而导致速... 目录一、pip 工具简介1. 什么是 pip?2. 什么是 -i 参数?二、国内镜像源的选择三、如何

使用C++实现链表元素的反转

《使用C++实现链表元素的反转》反转链表是链表操作中一个经典的问题,也是面试中常见的考题,本文将从思路到实现一步步地讲解如何实现链表的反转,帮助初学者理解这一操作,我们将使用C++代码演示具体实现,同... 目录问题定义思路分析代码实现带头节点的链表代码讲解其他实现方式时间和空间复杂度分析总结问题定义给定

Linux使用nload监控网络流量的方法

《Linux使用nload监控网络流量的方法》Linux中的nload命令是一个用于实时监控网络流量的工具,它提供了传入和传出流量的可视化表示,帮助用户一目了然地了解网络活动,本文给大家介绍了Linu... 目录简介安装示例用法基础用法指定网络接口限制显示特定流量类型指定刷新率设置流量速率的显示单位监控多个

JavaScript中的reduce方法执行过程、使用场景及进阶用法

《JavaScript中的reduce方法执行过程、使用场景及进阶用法》:本文主要介绍JavaScript中的reduce方法执行过程、使用场景及进阶用法的相关资料,reduce是JavaScri... 目录1. 什么是reduce2. reduce语法2.1 语法2.2 参数说明3. reduce执行过程

如何使用Java实现请求deepseek

《如何使用Java实现请求deepseek》这篇文章主要为大家详细介绍了如何使用Java实现请求deepseek功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1.deepseek的api创建2.Java实现请求deepseek2.1 pom文件2.2 json转化文件2.2

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

C++ Primer 多维数组的使用

《C++Primer多维数组的使用》本文主要介绍了多维数组在C++语言中的定义、初始化、下标引用以及使用范围for语句处理多维数组的方法,具有一定的参考价值,感兴趣的可以了解一下... 目录多维数组多维数组的初始化多维数组的下标引用使用范围for语句处理多维数组指针和多维数组多维数组严格来说,C++语言没

在 Spring Boot 中使用 @Autowired和 @Bean注解的示例详解

《在SpringBoot中使用@Autowired和@Bean注解的示例详解》本文通过一个示例演示了如何在SpringBoot中使用@Autowired和@Bean注解进行依赖注入和Bean... 目录在 Spring Boot 中使用 @Autowired 和 @Bean 注解示例背景1. 定义 Stud