centos 压力测试工具 centos镜像下载

实用工具 | PostgreSQL 数据库压力测试工具 pgbench 使用示例

pgbench是一个轻量级的PostgreSQL数据库压力测试工具,它是一个编译好的扩展性可执行文件。本文将展示如何使用pgbench进行压力测试。

测试环境为CentOS 5.7虚拟机,使用的PG版本为9.1.2。数据库默认参数为max_connection=100,注意:本文主要说明pgbench的使用方法,因此没有进行数据库参数的优化。

为了安装pgbench,需要进入源码安装包,进行编译和安装。安装完成后,在bin文件夹中会看到新生成的pgbench文件。

pgbench的参数丰富,以下部分参数的中文含义:

1.初始化测试数据:在开始压力测试前,通常需要先初始化测试数据。这可以通过pgbench命令来完成。测试数据量可以通过-s参数指定,测试脚本可以通过-f参数指定。

2.测试数据量:初始化数据后,可以使用pgbench进行压力测试。测试中要确保在生产库之外进行,以避免对现有数据库造成影响。新建一个测试库,确保库名与生产库不同,避免测试数据覆盖。

压力测试分为以下三个阶段:

1.单个session测试:使用pgbench进行压力测试,观察系统的性能表现。

2. 50个session测试:增加会话数到50,再次进行压力测试,以评估系统的并发性能。

3. 100个session测试:达到最大设置的100个会话数,进行压力测试。请注意,超过这个数量后,系统可能会报错,因为数据库当前设置的最大会话数量为100。

参考文档可以查看postgresql.org网站的相关资料。

推荐一款运维&测试工程师应知必会的压力测试工具!

运维&测试工程师必备的压力测试工具推荐——stress-ng

stress-ng是一款强大的压力测试工具,适用于系统资源的多方位测试,包括CPU、磁盘、网络、内存、进程和文件系统等。它提供了灵活的负载模式选择,用户可自定义测试强度和时长。例如,CPU压力测试通过不断调用进程和计算,内存测试通过频繁malloc和free,磁盘I/O则通过sync()中断来模拟。

在Linux系统中,CentOS 7的EPEL源有两个压力测试工具,stress-ng是升级版,更全面且带源码,兼容标准stress功能,并支持复杂压力生成。

安装stress-ng有yum和源码两种方式,推荐使用源码安装以获取最新版本。源码安装步骤包括下载、解压、编译并安装,安装成功后可以通过查看版本信息确认。

stress-ng的命令用法和常见参数丰富,可用于实战。例如,CPU负载测试可通过矩阵乘法运行4个进程600秒,内存测试则通过分配和保持大内存块。IO负载和磁盘测试则涉及监控系统负载变化。

在实际测试中,你可以根据需要调整参数,如CPU负载占用比例,以模拟不同场景。总的来说,stress-ng以其丰富的功能和可调性,能有效提升运维和测试工作的效率。

【fio】CentOS.x上磁盘性能测试工具fio的安装和使用

Summary: Multithreaded IO generation tool

Description: fio is an I/O tool that will spawn a number of threads or processes doing a particular type of io action as specified by the user.  fio takes a number of global parameters, each inherited by the thread unless otherwise parameters given to them overriding that setting is given.

The typical use of fio is to write a job file matching the io load one wants to simulate.

多线程IO生成工具

fio是一个I/ O工具,它将产生许多线程或正在执行的进程,由用户指定的特定类型的io操作。 

fio需要一个全局参数的数量,每个参数都由线程继承,否则给他们的参数将覆盖该设置。 

fio的典型用法是编写与io负载匹配的需要模拟的作业文件。

官网地址:

# yum-y install libaio gtk2 libaio-devel gtk2-devel

# yum-y install fio

# yum info fio

# rpm-ql fio| grep"bin"

应用使用IO通常有二种方式:同步和异步。 

同步的IO一次只能发出一个IO请求,等待内核完成才返回,这样对于单个线程iodepth总是小于1,但是可以透过多个线程并发执行来解决,通常我们会用16-32根线程同时工作把iodepth塞满。

异步的话就是用类似libaio这样的Linux native aio一次提交一批,然后等待一批的完成,减少交互的次数,会更有效率。

注意:性能测试建议直接通过写裸盘的方式进行测试,会得到较为真实的数据,但直接测试裸盘会破坏文件系统结构,导致数据丢失,请在测试前确认磁盘中数据已备份。

# fio  -direct=1 -iodepth=64 -rw=read -ioengine=libaio -bs=4k -size=10G -numjobs=1 -name=./fio.test

"-direct=1",代表采用非 buffered I/O文件读写的方式,避免文件读写过程中内存缓冲对性能的影响

"-iodepth=64"和"-ioengine=libaio"这两个参数,这里指文件读写采用异步 I/O(Async I/O)的方式,也就是进程可以发起多个 I/O请求,并且不用阻塞地等待 I/O的完成。稍后等 I/O完成之后,进程会收到通知。这种异步 I/O很重要,因为它可以极大地提高文件读写的性能。在这里我们设置了同时发出 64个 I/O请求

"-rw=read,-bs=4k,-size=10G",这几个参数指这个测试是个读文件测试,每次读 4KB大小数块,总共读 10GB的数据。最后一个参数是"-numjobs=1",指只有一个进程/线程在运行。所以,这条 fio命令表示我们通过异步方式读取了 10GB的磁盘文件,用来计算文件的读取性能。

我们看到在上图中测试中, I/O性能是 15.9MB/s的带宽,IOPS(I/O per second)是 4076左右。

fio压测工具和io队列深度理解和误区

fio– IO压力测试工具

fio安装使用方法

fio模拟MySQL服务器IO压力脚本

fio使用详解

Fio Output Explained

阅读剩余
THE END