web api性能测试使用wrk

2023-12-10 00:45
文章标签 使用 性能 web 测试 api wrk

本文主要是介绍web api性能测试使用wrk,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

web api性能测试

这边简单的给出shell脚本

注意先安装:wrk和gnuplot

#!/bin/bash# Copyright 2020 Lingfei Kong <colin404@foxmail.com>. All rights reserved.
# Use of this source code is governed by a MIT style
# license that can be found in the LICENSE file.: << EOF
API 性能测试脚本,会自动执行 wrk 命令,采集数据、分析数据并调用 gnuplot 画图使用方式 ( 测试 API 性能):
1. 启动 iam-apiserver(8080端口)
2. 执行测试脚本: ./wrktest.sh脚本会生成 .dat 的数据文件,每列含义为:并发数 QPS 平均响应时间 成功率使用方式 (对比2次测试结果)
1. 性能测试:./wrktest.sh iam-apiserver http://127.0.0.1:8080/healthz
2. 执行命令: ./wrktest.sh diff apiserver.dat http.dat> Note: 需要确保系统安装了 wrk 和 gnuplot 工具
EOFiamroot="$(cd "$(dirname "${BASH_SOURCE[0]}")/.." && pwd -P)"
wrkdir="${iamroot}/_output/wrk"
jobname="apiserver"
duration="300s"
threads=$((3 * `grep -c processor /proc/cpuinfo`))source "${iamroot}/scripts/lib/color.sh"# Set wrk options
iam::wrk::setup() {#concurrent="200 500 1000 3000 5000 10000 15000 20000 25000 50000 100000 200000 500000 1000000"concurrent="200 500 1000 3000 5000 10000 15000 20000 25000 50000"cmd="wrk -t${threads} -d${duration} -T30s --latency"
}# Print usage infomation
iam::wrk::usage()
{cat << EOFUsage: $0 [OPTION] [diff] URL
Performance automation test script.URL                    HTTP request url, like: http://127.0.0.1:8080/healthzdiff                   Compare two performance test resultsOPTIONS:-h                     Usage information-n                     Performance test task name, default: apiserver-d                     Directory used to store performance data and gnuplot graphic, default: _output/wrkReprot bugs to <colin404@foxmail.com>.
EOF
}# Convert plot data to useable data
function iam::wrk::convert_plot_data()
{echo "$1" | awk -v datfile="${wrkdir}/${datfile}" ' {if ($0 ~ "Running") {common_time=$2}
if ($0 ~ "connections") {connections=$4common_threads=$1
}
if ($0 ~ "Latency   ") {avg_latency=convertLatency($2)
}
if ($0 ~ "50%") {p50=convertLatency($2)
}
if ($0 ~ "75%") {p75=convertLatency($2)
}
if ($0 ~ "90%") {p90=convertLatency($2)
}
if ($0 ~ "99%") {p99=convertLatency($2)
}
if ($0 ~ "Requests/sec") {qps=$2
}
if ($0 ~ "requests in") {allrequest=$1
}
if ($0 ~ "Socket errors") {err=$4+$6+$8+$10
}
}
END {
rate=sprintf("%.2f", (allrequest-err)*100/allrequest)
print connections,qps,avg_latency,rate >> datfile
}function convertLatency(s) {if (s ~ "us") {sub("us", "", s)return s/1000}
if (s ~ "ms") {sub("ms", "", s)return s
}
if (s ~ "s") {sub("s", "", s)return s * 1000
}
}'
}# Remove existing data file
function iam::wrk::prepare()
{rm -f ${wrkdir}/${datfile}
}# Plot according to gunplot data file
function iam::wrk::plot() {gnuplot <<  EOF
set terminal png enhanced #输出格式为png文件
set ylabel 'QPS'
set xlabel 'Concurrent'
set y2label 'Average Latency (ms)'
set key top left vertical noreverse spacing 1.2 box
set tics out nomirror
set border 3 front
set style line 1 linecolor rgb '#00ff00' linewidth 2 linetype 3 pointtype 2
set style line 2 linecolor rgb '#ff0000' linewidth 1 linetype 3 pointtype 2
set style data linespointsset grid #显示网格
set xtics nomirror rotate #by 90#只需要一个x轴
set mxtics 5
set mytics 5 #可以增加分刻度
set ytics nomirror
set y2ticsset autoscale  y
set autoscale y2set output "${wrkdir}/${qpsttlb}"  #指定数据文件名称
set title "QPS & TTLB\nRunning: ${duration}\nThreads: ${threads}"
plot "${wrkdir}/${datfile}" using 2:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#EE0000" axis x1y1 t "QPS","${wrkdir}/${datfile}" using 3:xticlabels(1) w lp pt 5 ps 1 lc rgbcolor "#0000CD" axis x2y2 t "Avg Latency (ms)"unset y2tics
unset y2label
set ytics nomirror
set yrange[0:100]
set output "${wrkdir}/${successrate}"  #指定数据文件名称
set title "Success Rate\nRunning: ${duration}\nThreads: ${threads}"
plot "${wrkdir}/${datfile}" using 4:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#F62817" t "Success Rate"
EOF
}# Plot diff graphic
function iam::wrk::plot_diff()
{gnuplot <<  EOF
set terminal png enhanced #输出格式为png文件
set xlabel 'Concurrent'
set ylabel 'QPS'
set y2label 'Average Latency (ms)'
set key below left vertical noreverse spacing 1.2 box autotitle columnheader
set tics out nomirror
set border 3 front
set style line 1 linecolor rgb '#00ff00' linewidth 2 linetype 3 pointtype 2
set style line 2 linecolor rgb '#ff0000' linewidth 1 linetype 3 pointtype 2
set style data linespoints#set border 3 lt 3 lw 2   #这会让你的坐标图的border更好看
set grid #显示网格
set xtics nomirror rotate #by 90#只需要一个x轴
set mxtics 5
set mytics 5 #可以增加分刻度
set ytics nomirror
set y2tics#set pointsize 0.4 #点的像素大小
#set datafile separator '\t' #数据文件的字段用\t分开set autoscale  y
set autoscale y2#设置图像的大小 为标准大小的2倍
#set size 2.3,2set output "${wrkdir}/${t1}_${t2}.qps.ttlb.diff.png"  #指定数据文件名称
set title "QPS & TTLB\nRunning: ${duration}\nThreads: ${threads}"
plot "/tmp/plot_diff.dat" using 2:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#EE0000" axis x1y1 t "${t1} QPS","/tmp/plot_diff.dat" using 5:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#EE82EE" axis x1y1 t "${t2} QPS","/tmp/plot_diff.dat" using 3:xticlabels(1) w lp pt 5 ps 1 lc rgbcolor "#0000CD" axis x2y2 t "${t1} Avg Latency (ms)", "/tmp/plot_diff.dat" using 6:xticlabels(1) w lp pt 5 ps 1 lc rgbcolor "#6495ED" axis x2y2 t "${t2} Avg Latency (ms)"unset y2tics
unset y2label
set ytics nomirror
set yrange[0:100]
set output "${wrkdir}/${t1}_${t2}.successrate.diff.png"  #指定数据文件名称
set title "Success Rate\nRunning: ${duration}\nThreads: ${threads}"
plot "/tmp/plot_diff.dat" using 4:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#EE0000" t "${t1} Success Rate","/tmp/plot_diff.dat" using 7:xticlabels(1) w lp pt 7 ps 1 lc rgbcolor "#EE82EE" t "${t2} Success Rate"
EOF
}# Start API performance testing
iam::wrk::start_performance_test() {iam::wrk::preparefor c in ${concurrent}dowrkcmd="${cmd} -c ${c} $1"echo "Running wrk command: ${wrkcmd}"result=`eval ${wrkcmd}`iam::wrk::convert_plot_data "${result}"doneecho -e "\nNow plot according to ${COLOR_MAGENTA}${wrkdir}/${datfile}${COLOR_NORMAL}"iam::wrk::plot &> /dev/nullecho -e "QPS graphic file is: ${COLOR_MAGENTA}${wrkdir}/${qpsttlb}${COLOR_NORMAL}
Success rate graphic file is: ${COLOR_MAGENTA}${wrkdir}/${successrate}${COLOR_NORMAL}"
}while getopts "hd:n:" opt;docase ${opt} ind)wrkdir=${OPTARG};;n)jobname=${OPTARG};;?)iam::wrk::usageexit 0;;esac
doneshift $(($OPTIND-1))mkdir -p ${wrkdir}
case $1 in"diff")if [ "$#" -lt 3 ];theniam::wrk::usageexit 0fit1=$(basename $2|sed 's/.dat//g') # 对比图中红色线条名称t2=$(basename $3|sed 's/.dat//g') # 对比图中粉色线条名称join $2 $3 > /tmp/plot_diff.datiam::wrk::plot_diff `basename $2` `basename $3`exit 0;;*)if [ "$#" -lt 1 ];theniam::wrk::usageexit 0fiurl="$1"qpsttlb="${jobname}_qps_ttlb.png"successrate="${jobname}_successrate.png"datfile="${jobname}.dat"iam::wrk::setupiam::wrk::start_performance_test "${url}";;
esac

直接使用wrk命令

wrk -t144 -c3000 -d30s -T30s --latency 你的url

这篇关于web api性能测试使用wrk的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/475572

相关文章

Vue3 的 shallowRef 和 shallowReactive:优化性能

大家对 Vue3 的 ref 和 reactive 都很熟悉,那么对 shallowRef 和 shallowReactive 是否了解呢? 在编程和数据结构中,“shallow”(浅层)通常指对数据结构的最外层进行操作,而不递归地处理其内部或嵌套的数据。这种处理方式关注的是数据结构的第一层属性或元素,而忽略更深层次的嵌套内容。 1. 浅层与深层的对比 1.1 浅层(Shallow) 定义

性能测试介绍

性能测试是一种测试方法,旨在评估系统、应用程序或组件在现实场景中的性能表现和可靠性。它通常用于衡量系统在不同负载条件下的响应时间、吞吐量、资源利用率、稳定性和可扩展性等关键指标。 为什么要进行性能测试 通过性能测试,可以确定系统是否能够满足预期的性能要求,找出性能瓶颈和潜在的问题,并进行优化和调整。 发现性能瓶颈:性能测试可以帮助发现系统的性能瓶颈,即系统在高负载或高并发情况下可能出现的问题

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

使用SecondaryNameNode恢复NameNode的数据

1)需求: NameNode进程挂了并且存储的数据也丢失了,如何恢复NameNode 此种方式恢复的数据可能存在小部分数据的丢失。 2)故障模拟 (1)kill -9 NameNode进程 [lytfly@hadoop102 current]$ kill -9 19886 (2)删除NameNode存储的数据(/opt/module/hadoop-3.1.4/data/tmp/dfs/na

Hadoop数据压缩使用介绍

一、压缩原则 (1)运算密集型的Job,少用压缩 (2)IO密集型的Job,多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1)为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器 2)要在Hadoop中启用压缩,可以配置如下参数

Makefile简明使用教程

文章目录 规则makefile文件的基本语法:加在命令前的特殊符号:.PHONY伪目标: Makefilev1 直观写法v2 加上中间过程v3 伪目标v4 变量 make 选项-f-n-C Make 是一种流行的构建工具,常用于将源代码转换成可执行文件或者其他形式的输出文件(如库文件、文档等)。Make 可以自动化地执行编译、链接等一系列操作。 规则 makefile文件

字节面试 | 如何测试RocketMQ、RocketMQ?

字节面试:RocketMQ是怎么测试的呢? 答: 首先保证消息的消费正确、设计逆向用例,在验证消息内容为空等情况时的消费正确性; 推送大批量MQ,通过Admin控制台查看MQ消费的情况,是否出现消费假死、TPS是否正常等等问题。(上述都是临场发挥,但是RocketMQ真正的测试点,还真的需要探讨) 01 先了解RocketMQ 作为测试也是要简单了解RocketMQ。简单来说,就是一个分

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置

使用opencv优化图片(画面变清晰)

文章目录 需求影响照片清晰度的因素 实现降噪测试代码 锐化空间锐化Unsharp Masking频率域锐化对比测试 对比度增强常用算法对比测试 需求 对图像进行优化,使其看起来更清晰,同时保持尺寸不变,通常涉及到图像处理技术如锐化、降噪、对比度增强等 影响照片清晰度的因素 影响照片清晰度的因素有很多,主要可以从以下几个方面来分析 1. 拍摄设备 相机传感器:相机传

pdfmake生成pdf的使用

实际项目中有时会有根据填写的表单数据或者其他格式的数据,将数据自动填充到pdf文件中根据固定模板生成pdf文件的需求 文章目录 利用pdfmake生成pdf文件1.下载安装pdfmake第三方包2.封装生成pdf文件的共用配置3.生成pdf文件的文件模板内容4.调用方法生成pdf 利用pdfmake生成pdf文件 1.下载安装pdfmake第三方包 npm i pdfma