【ceph学习】rados bench性能测试工具介绍

2024-08-29 04:44

本文主要是介绍【ceph学习】rados bench性能测试工具介绍,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

rados bench性能测试工具介绍

  1. radosbench介绍
    Ceph 包含 rados bench 命令,用于在 RADOS 存储群集上执行性能基准测试。命令将执行写入测试,以及两种类型的读测试。在测试读取和写入性能时,–no-cleanup 选项非常重要。默认情况下,rados bench 命令会删除它写入存储池的对象。保留这些对象后,可以使用两个读取测试来测量顺序读取和随机读取的性能。

  2. 命令及参数

  • 读写命令
rados bench -p <pool_name> <run_time> <mode> [options]
  • 必选参数定义

    • pool_name:测试操作的池名字。
    • run_time:测试持续时长(单位为秒)。
    • mode:测试模式。取值有 write、seq 和 rand。其中 write 是写(Rados 没有顺序写或随机写之分),seq 和 rand 分别表示顺序读和随机读。
  • options其他参数

    • -c:Ceph 配置文件路径。如果使用的不是默认的 Ceph 配置文件 /etc/ceph/ceph.conf,则需要指定。
    • -b:write 模式中操作的块大小(block size),单位字节。默认为 4194304(4 MB)。
    • -O:write 模式中操作的对象大小(object size),单位字节。默认等于 -b。
    • –max-objects:write 模式中的最大的对象数量。设定此参数后,写到最大数量测试就会停止(可能会超出一些),否则会继续执行直到达到 seconds 时间。
    • -t:并发操作数。默认为 16。
    • –no-cleanup:write 模式中,在写入测试完成后删除不测试数据。不加此参数时,write 测试完成后测试数据会被删除,如果后面还要进行读测试的话,需要加这个参数保留数据。
    • -f:执行输出的格式。取值有 plain(默认)、json 和 json-pretty。
    • –run-name:本次测试的名字,这个名字和测试时拼接的 key 名字有关。默认为 “benchmark_last_metadata”。
    • –reuse-bench:write 模式中复用上一次的测试对象。不同的测试会有不同的对象前缀,加这个参数以后还用上一次的前缀,但前提是上一次测试加了 --no-cleanup 参数。
    • –show-time:在每一条输出前都加上日期/时间 data/time 前缀。
    • –no-verify:读对象的时候不验证内容。
    • –write-object:指定向对象中写入的内容。
    • –write-omap:指定向 omap 中写入的内容。
    • –write-xattr:指定向 extended attributes 中写入的内容。
  • 清理数据

如果我们在写测试中添加了 --no-cleanup 参数不清理数据,那么后面当我们不需要的时候,还需要使用子命令 cleanup 来删除这些数据:

rados cleanup [--run-name run_name] [--prefix prefix]
  • –run-name :写入测试时如果添加了这个参数,这里要添加一样的。默认也是 “benchmark_last_metadata”。
  • –prefix:要清理对象的前缀。

每次进行写入测试的时候,写入的对象都会有一个前缀,例如 benchmark_data_myhostname_3742558,前面是固定的 benchmark_data_,中间是机器的 host 名字,末尾是一串数字(看着应该是跟时间有关,因为可以排序),这个前缀会在 write 测试时会打印出来。

当多次执行带有 --no-cleanup 的写入测试后,池里就会存在很多个不同的前缀的对象。可以通过指定前缀,清理特定某一次测试写入的数据。如果不指定前缀,则默认清理最后一次写入测试的数据。

  1. 结果分析
  • 命令执行情况
ceph@node2:/$ rados bench -p rbd  1200  write -b 40960 -t 16  --no-cleanup
/*参数说明*/
hints = 1
Maintaining 16 concurrent writes of 40960 bytes to objects of size 40960 for up to 1200 seconds or 0 objects
/*对象前缀*/
Object prefix: benchmark_data_node2_139690
/*实时打印性能数据*/sec Cur ops   started  finished  avg MB/s  cur MB/s last lat(s)  avg lat(s)0       0         0         0         0         0           -           01      16      1844      1828   71.4017   71.4062  0.00784974  0.008717872      16      3701      3685   71.9665   72.5391  0.00709388  0.008662393      16      5441      5425   70.6316   67.9688   0.0146895  0.008833164      16      7007      6991   68.2651   61.1719   0.0136184  0.009131085      16      8538      8522   66.5717   59.8047  0.00318715  0.009355576      16      9344      9328   60.7231   31.4844   0.0190202   0.01023987      16      9977      9961   55.5803   24.7266    0.010927   0.01120538      16     10518     10502   51.2741   21.1328   0.0439235   0.01216249      16     11280     11264   48.8839   29.7656   0.0717894   0.012730310      16     12045     12029   46.9835   29.8828  0.00995933   0.013281111      16     12918     12902    45.812   34.1016   0.0134464    0.01362412      16     13815     13799   44.9139   35.0391  0.00909432   0.013899113      16     14640     14624   43.9377   32.2266  0.00318153   0.014142114      16     15278     15262   42.5792   24.9219   0.0183044   0.0146673

示例中是写数据的bench数据结果。每列的含义如下:

  • sec:当前执行的秒数。

  • Cur ops:当前的并发操作数。这个值一般就是 -t 的值,可能小一点(跟执行情况有关)。

  • started:截至当前的已经开始写入的对象数。

  • finished:截至当前的已经完成写入的对象数。

  • avg MB/s:平均带宽。单位 MB/s。

  • cur MB/s:当前带宽。单位 MB/s。

  • last lat(s):当前延迟。单位秒。

  • avg lat(s):平均延迟。单位秒。

  • 最终性能结果:

Total time run:         1200.02
Total writes made:      1443431
Write size:             40960
Object size:            40960
Bandwidth (MB/sec):     46.9861
Stddev Bandwidth:       15.8027
Max bandwidth (MB/sec): 73.4375
Min bandwidth (MB/sec): 0
Average IOPS:           1202
Stddev IOPS:            404.55
Max IOPS:               1880
Min IOPS:               0
Average Latency(s):     0.0132992
Stddev Latency(s):      0.0341294
Max latency(s):         4.61661
Min latency(s):         0.00265286
  • Total time run:总测试运行时间。
  • Total writes made:总测试写入对象数。
  • Write size:写入时的 block 大小。单位字节。
  • Object size:写入时的对象大小。单位字节。
  • Bandwidth (MB/sec):平均带宽。单位 MB/sec。
  • Stddev Bandwidth:带宽标准差。
  • Max bandwidth (MB/sec):最大带宽。单位 MB/sec。
  • Min bandwidth (MB/sec):最小带宽。单位 MB/sec。
  • Average IOPS:平均 IOPS。
  • Stddev IOPS:IOPS 标准差。
  • Max IOPS:最大 IOPS。
  • Min IOPS:最小 IOPS。
  • Average Latency(s):平均延迟。单位秒。
  • Stddev Latency(s):延迟标准差。单位秒。
  • Max latency(s):最大延迟。单位秒。
  • Min latency(s):最小延迟。单位秒。
  1. 总结
    radosbench是一个可以直接往存储池进行压测数据的工具,绕过了前段的文件、对象、块等协议层的处理。适用于预埋数据,以及测试osd性能等场景。

这篇关于【ceph学习】rados bench性能测试工具介绍的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1116877

相关文章

Python如何使用__slots__实现节省内存和性能优化

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的... 目录背景:内存吃得满满的类__slots__:你的内存管理小助手举个大概的例子:看看效果如何?1.

MySQL中慢SQL优化的不同方式介绍

《MySQL中慢SQL优化的不同方式介绍》慢SQL的优化,主要从两个方面考虑,SQL语句本身的优化,以及数据库设计的优化,下面小编就来给大家介绍一下有哪些方式可以优化慢SQL吧... 目录避免不必要的列分页优化索引优化JOIN 的优化排序优化UNION 优化慢 SQL 的优化,主要从两个方面考虑,SQL 语

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、

C++中函数模板与类模板的简单使用及区别介绍

《C++中函数模板与类模板的简单使用及区别介绍》这篇文章介绍了C++中的模板机制,包括函数模板和类模板的概念、语法和实际应用,函数模板通过类型参数实现泛型操作,而类模板允许创建可处理多种数据类型的类,... 目录一、函数模板定义语法真实示例二、类模板三、关键区别四、注意事项 ‌在C++中,模板是实现泛型编程

Python实现html转png的完美方案介绍

《Python实现html转png的完美方案介绍》这篇文章主要为大家详细介绍了如何使用Python实现html转png功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 1.增强稳定性与错误处理建议使用三层异常捕获结构:try: with sync_playwright(

Java使用多线程处理未知任务数的方案介绍

《Java使用多线程处理未知任务数的方案介绍》这篇文章主要为大家详细介绍了Java如何使用多线程实现处理未知任务数,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 知道任务个数,你可以定义好线程数规则,生成线程数去跑代码说明:1.虚拟线程池:使用 Executors.newVir

Java进阶学习之如何开启远程调式

《Java进阶学习之如何开启远程调式》Java开发中的远程调试是一项至关重要的技能,特别是在处理生产环境的问题或者协作开发时,:本文主要介绍Java进阶学习之如何开启远程调式的相关资料,需要的朋友... 目录概述Java远程调试的开启与底层原理开启Java远程调试底层原理JVM参数总结&nbsMbKKXJx

Golang中拼接字符串的6种方式性能对比

《Golang中拼接字符串的6种方式性能对比》golang的string类型是不可修改的,对于拼接字符串来说,本质上还是创建一个新的对象将数据放进去,主要有6种拼接方式,下面小编就来为大家详细讲讲吧... 目录拼接方式介绍性能对比测试代码测试结果源码分析golang的string类型是不可修改的,对于拼接字

JAVA SE包装类和泛型详细介绍及说明方法

《JAVASE包装类和泛型详细介绍及说明方法》:本文主要介绍JAVASE包装类和泛型的相关资料,包括基本数据类型与包装类的对应关系,以及装箱和拆箱的概念,并重点讲解了自动装箱和自动拆箱的机制,文... 目录1. 包装类1.1 基本数据类型和对应的包装类1.2 装箱和拆箱1.3 自动装箱和自动拆箱2. 泛型2

mysql线上查询之前要性能调优的技巧及示例

《mysql线上查询之前要性能调优的技巧及示例》文章介绍了查询优化的几种方法,包括使用索引、避免不必要的列和行、有效的JOIN策略、子查询和派生表的优化、查询提示和优化器提示等,这些方法可以帮助提高数... 目录避免不必要的列和行使用有效的JOIN策略使用子查询和派生表时要小心使用查询提示和优化器提示其他常