Инструменты | Тест ввода-вывода для подробного объяснения
Инструменты | Тест ввода-вывода для подробного объяснения

один Введение

FIO имеет открытый исходный код I/O Инструменты стресс-тестирования в основном используются для проверки производительности дисков ввода-вывода. Он может поддерживать множество различных механизмов ввода-вывода.

Адрес официального сайта фио: http://freshmeat.net/projects/fio/

документация по фио: https://fio.readthedocs.io/en/latest/index.html.

2. Установка

Установить пакеты зависимостей

yum install libaio-devel

Разархивируйте архив Тогда сделай && make install

Три варианта использования

Режимы чтения и записи, поддерживаемые fio, включают последовательное чтение, случайное чтение, последовательную запись, произвольную запись, смешанное случайное чтение и запись, а также смешанное последовательное чтение и запись. Обычно используемые параметры включают механизм, глубину очереди, поток, блок, является ли это необработанным устройством, метод чтения и записи, размер/затраты времени, пропуск кэша и т. д. Ниже приводится краткое описание этих параметров:

Язык кода:javascript
копировать
filename=/dev/sdc     Поддержка файловой системы или необработанного устройства, стресс-тестирование нескольких дисков --filename=/dev/sda:/dev/sdb
direct=1                 Процесс тестирования обходит собственный буфер машины, что делает результаты тестирования более реалистичными.
rw=randwread             Тестирование ввода-вывода произвольного чтения
rw=randwrite             Тестирование ввода-вывода произвольной записи
rw=randrw                Тестирование случайного смешанного ввода-вывода записи и чтения
rw=read                  Тестирование последовательного чтения ввода-вывода
rw=write                 Тестирование последовательно записываемого ввода-вывода
rw=rw                    Тест последовательной смешанной записи и чтения ввода-вывода
bs=4k                    Размер блочного файла одного ввода-вывода составляет 4 КБ.
bsrange=512-2048         Как и выше, укажите диапазон размеров блока данных.
size=50g                  Размер тестового файла на этот раз составляет 50 г, каждый раз тестировался с 4k io.
numjobs=30               Тестовый поток на этот раз — 30
runtime=1000             Время теста 1000 секунд Если не писать, то будете делить файл 5г на файлы по 4к до тех пор, пока он не будет записываться каждый раз.
ioengine=psync           io engine, используйте режим pync, если вы хотите использовать движок libaio, вам нужно yum install пакет libaio-devel
rwmixwrite=30            В смешанном режиме чтения и письма на запись приходится 30%
group_reporting          Что касается результатов отображения, суммируйте информацию о каждом процессе.
Кроме других параметров
lockmem=1g               Только 1 г памяти для тестирования
zero_buffers               Инициализировать системный буфер значением 0
nrfiles=8                    Количество файлов, созданных каждым процессом

При выполнении нескольких тестов из-за влияния слишком большого количества параметров командной строки это не интуитивно понятно. Вы можете записать параметры в файл конфигурации, записать глобальные переменные и протестировать измененные параметры в разных блоках и, наконец, запустить его. , мы Чтобы протестировать несколько сценариев чтения и записи rw, вы можете написать файл конфигурации fio_yace.cfg.

Язык кода:javascript
копировать
[global]
filename=/dev/vdb
direct=1
iodepth=128
thread
ioengine=libaio
numjobs=30
size=10g
numjobs=30
runtime=600
group_reporting
bs=4k
[4k-write]
rw=write
stonewall
[4k-randwrite]
rw=randwrite
stonewall

Обратите внимание, что если [4k-write] и [4k-randwrite] Два теста необходимо выполнять последовательно и добавлять под соответствующими блоками. stonewall . Наконец запустите командную строку

fio fio_yace.cfg

То есть выполнить тест. В результатах тестов много данных, в основном по пропускной способности и IOPS. Конечно, задержки также необходимо соблюдать.

4. Интерпретация результатов испытаний под давлением

Язык кода:javascript
копировать
[root@dbm-01 data]# fio  fio.cfg
4k-write: (g=0): rw=write, bs=(R) 4096B-4096B, (W) 4096B-4096B, (T) 4096B-4096B, ioengine=libaio, iodepth=1
...
4k-randwrite: (g=1): rw=randwrite, bs=(R) 4096B-4096B, (W) 4096B-4096B, (T) 4096B-4096B, ioengine=libaio, iodepth=1
...
fio-3.7
Starting 60 threads
Jobs: 30 (f=30): [_(30),w(30)][11.9%][r=0KiB/s,w=192MiB/s][r=0,w=49.3k IOPS][eta 24m:37s]
4k-write: (groupid=0, jobs=30): err= 0: pid=14529: Tue Nov 23 20:12:08 2021
  write: IOPS=106k, BW=415MiB/s (435MB/s)(40.5GiB/100002msec)
    slat (usec): min=3, max=14296, avg=23.86, stdev=34.22
    clat (nsec): min=993, max=20735k, avg=257999.15, stdev=63006.92
     lat (usec): min=30, max=20773, avg=281.97, stdev=70.00
    clat percentiles (usec):
     |  1.00th=[  227],  5.00th=[  237], 10.00th=[  239], 20.00th=[  243],
     | 30.00th=[  247], 40.00th=[  251], 50.00th=[  255], 60.00th=[  260],
     | 70.00th=[  265], 80.00th=[  269], 90.00th=[  273], 95.00th=[  277],
     | 99.00th=[  293], 99.50th=[  363], 99.90th=[ 1270], 99.95th=[ 1467],
     | 99.99th=[ 1762]
   bw (  KiB/s): min= 9835, max=13978, per=2.62%, avg=11137.60, stdev=415.24, samples=5970
   iops        : min= 2458, max= 3494, avg=2784.02, stdev=103.82, samples=5970
  lat (nsec)   : 1000=0.01%
  lat (usec)   : 2=0.01%, 4=0.01%, 10=0.01%, 20=0.01%, 50=0.03%
  lat (usec)   : 100=0.17%, 250=36.97%, 500=62.44%, 750=0.20%, 1000=0.03%
  lat (msec)   : 2=0.15%, 4=0.01%, 10=0.01%, 20=0.01%, 50=0.01%
  cpu          : usr=0.93%, sys=11.32%, ctx=10740093, majf=0, minf=2817
  IO depths    : 1=100.0%, 2=0.0%, 4=0.0%, 8=0.0%, 16=0.0%, 32=0.0%, >=64=0.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     issued rwts: total=0,10614582,0,0 short=0,0,0,0 dropped=0,0,0,0
     latency   : target=0, window=0, percentile=100.00%, depth=1
4k-randwrite: (groupid=1, jobs=30): err= 0: pid=17275: Tue Nov 23 20:12:08 2021
  write: IOPS=50.2k, BW=196MiB/s (205MB/s)(19.1GiB/100002msec)
    slat (usec): min=3, max=10742, avg=23.21, stdev=21.85
    clat (nsec): min=825, max=21466k, avg=573943.92, stdev=468815.81
     lat (usec): min=50, max=22154, avg=597.26, stdev=469.11
    clat percentiles (usec):
     |  1.00th=[  289],  5.00th=[  302], 10.00th=[  306], 20.00th=[  318],
     | 30.00th=[  322], 40.00th=[  334], 50.00th=[  347], 60.00th=[  553],
     | 70.00th=[  603], 80.00th=[  627], 90.00th=[  693], 95.00th=[ 1926],
     | 99.00th=[ 2073], 99.50th=[ 2114], 99.90th=[ 2180], 99.95th=[ 2245],
     | 99.99th=[ 3228]
   bw (  KiB/s): min= 5408, max=10163, per=3.33%, avg=6685.70, stdev=288.97, samples=5977
   iops        : min= 1352, max= 2540, avg=1671.39, stdev=72.24, samples=5977
  lat (nsec)   : 1000=0.01%
  lat (usec)   : 2=0.01%, 4=0.01%, 10=0.01%, 20=0.01%, 50=0.01%
  lat (usec)   : 100=0.03%, 250=0.18%, 500=57.83%, 750=32.05%, 1000=0.23%
  lat (msec)   : 2=6.91%, 4=2.76%, 10=0.01%, 20=0.01%, 50=0.01%
  cpu          : usr=0.46%, sys=4.98%, ctx=5064328, majf=0, minf=55804
  IO depths    : 1=100.0%, 2=0.0%, 4=0.0%, 8=0.0%, 16=0.0%, 32=0.0%, >=64=0.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     issued rwts: total=0,5015251,0,0 short=0,0,0,0 dropped=0,0,0,0
     latency   : target=0, window=0, percentile=100.00%, depth=1

Run status group 0 (all jobs):
  WRITE: bw=415MiB/s (435MB/s), 415MiB/s-415MiB/s (435MB/s-435MB/s), io=40.5GiB (43.5GB), run=100002-100002msec

Run status group 1 (all jobs):
  WRITE: bw=196MiB/s (205MB/s), 196MiB/s-196MiB/s (205MB/s-205MB/s), io=19.1GiB (20.5GB), run=100002-100002msec

Disk stats (read/write):
  sdb: ios=66/15648881, merge=0/23534, ticks=17/5617878, in_queue=5613375, util=99.94%
[root@dbm-01 data]#

Объяснение параметров отчета, обычно мы фокусируемся на io, iops, clat

bw Указывает среднюю пропускную способность, достигнутую в тесте. Задержка завершения — это время между отправкой запроса и завершением запроса. Статистические значения соответственно наименьшие、максимум、среднее и стандартное отклонение.

Данные строки ЦП показывают влияние нагрузки ввода-вывода на ЦП.

Параграф «Глубина ввода-вывода» очень важен для тестирования нагрузок ввода-вывода с несколькими запросами — поскольку все приведенные выше тесты представляют собой одиночные запросы ввода-вывода, глубина ввода-вывода всегда равна 100% 1.

Три строки lat показывают обзор завершения каждого запроса ввода-вывода. Например, указанная выше задержка составляет 68,84% при 2 мс и 21,36% при 1 мс (1000 мкс).

Строка READ показывает скорость чтения.

Подробное объяснение следующее:

Язык кода:javascript
копировать
io=Сколько M операций ввода-вывода было выполнено
bw = средняя пропускная способность ввода-вывода
iops=IOPS
runt = время работы потока
планка = задержка подачи
clat=задержка завершения
широта = время ответа
bw=пропускная способность
процессор = использование
IO глубины = ioqueue
IO submit=Количество операций ввода-вывода, которые необходимо отправить для одной отправки ввода-вывода
IO complete=Like the above submit number, but for completions instead.
IO issued=The number of read/write requests issued, and how many of them were short.
IO задержки = распределение задержек завершения ввода-вывода

io=Сколько всего было выполнено операций ввода-вывода?
aggrb=общая пропускная способность группы
minb=минимальная.средняя пропускная способность.
maxb = максимальная средняя пропускная способность.
mint=Минимальное время работы потоков в группе.
maxt=Максимальное время работы потоков в группе.
ios=Общее количество операций ввода-вывода, выполненных всеми группами.
merge = Общее количество произошедших слияний ввода-вывода.
ticks=Number of ticks we kept the disk busy.
io_queue=Общее время, проведенное в очереди.
util=использование диска

Пять ссылок

https://www.cnblogs.com/raykuan/p/6914748.html

https://huataihuang.gitbooks.io/cloud-atlas/content/performance/utilities/fio.html

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose