Всем привет, мы снова встретились, я ваш друг Цюаньчжаньцзюнь.

1. Введение в vdbench

vdbench - это I/O генератор рабочей нагрузки, используется для Проверкачисло По целостностии Измерение прямого подключенияиз Сетевого подключенияиз Хранилищаиз Производительности. Это бесплатный инструмент, который прост в использовании и которым легко пользоваться часто. длятестиэталонтест。

Вы можете использовать vdbench для проверки производительности чтения и записи дисков и файловых систем.

Объяснение некоторых часто используемых терминов в vdbench:

• Определение хоста HD
• Определение SD-хранилища
• Определение рабочей нагрузки WD
• Определение запуска RD
• Определение хранилища файловой системы FSD
• Определение рабочей нагрузки файла FWD

2. Установка и настройка vdbench

1. Настройте vdbench под Linux (1) Загрузите Vdbench

Разархивируйте после скачивания;

(2) Затем установите Java (работа vdbench зависит от Java)

apt-get update
apt-get install java
java -version

(3) Установите csh или скопируйте csh из другой установленной системы в каталог /bin. Для работы vdbench в Linux требуется поддержка csh.

CSH — это команда Linux и Unix на компьютерах, используемая для вызова оболочки C.

C shell это одининдивидуальныйинтерактивная командаустный переводчикикомандный язык программирования,Использование синтаксиса, аналогичного C язык программирования. оболочка Выполняйте команды в интерактивном режиме с клавиатуры терминала или из файла. этот csh Команда называлась C оболочка. при звонке csh Команда будет выполнена путем нахождения корневого каталога и выполнения команды из .cshrc В файле (используемом для хранения пользовательской информации) условием выполнения является наличие команды. если csh команда в качестве логина shell запустить, он начнется с .cshrc и .login Выполнение команд в файле.

Установка: apt-get install csh
Просмотр: лс /bin/ |grep csh

(4) Введите соответствующий каталог vdbench./vdbench -t, чтобы проверить доступность vdbench. Если все в порядке, в нем автоматически будет создан выходной каталог.

root@node1:/home/vdbench/vdbench50406# ./vdbench -t

Отображается следующая информация:

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.
Vdbench distribution: vdbench50406 Wed July 20 15:49:52 MDT 2016
For documentation, see 'vdbench.pdf'.

00:06:57.521 input argument scanned: '-f/tmp/parmfile'
00:06:57.572 Starting slave: /home/vdbench/vdbench50406/vdbench SlaveJvm -m localhost -n localhost-10-180813-00.06.57.396 -l localhost-0 -p 5570   
00:06:58.012 All slaves are now connected
00:06:59.001 Starting RD=rd1; I/O rate: 100; elapsed=5; For loops: None

Aug 13, 2018  interval        i/o   MB/sec   bytes   read     resp     read    write     resp     resp queue  cpu%  cpu%
                             rate  1024**2     i/o    pct     time     resp     resp      max   stddev depth sys+u   sys
00:07:00.046         1      49.00     0.05    1024  46.94    2.487    1.616    3.257   45.206    9.831   0.5  15.4   4.4
00:07:01.043         2     112.00     0.11    1024  52.68    3.808    2.381    5.397  103.290   17.076   0.1   4.6   0.5
00:07:02.044         3      92.00     0.09    1024  51.09   11.979    3.486   20.849  172.867   40.460   1.1   1.0   0.5
00:07:03.043         4      98.00     0.10    1024  53.06    1.574    1.413    1.757   43.221    7.044   0.2   3.0   0.0
00:07:04.053         5     106.00     0.10    1024  55.66    1.795    1.340    2.367   51.104    8.163   0.2   2.5   0.0
00:07:04.077   avg_2-5      91.40     0.09    1024  52.52    4.366    2.059    6.917  172.867   21.192   0.4   6.9   1.6
00:07:05.275 Vdbench execution completed successfully. Output directory: /home/vdbench/vdbench50406/output 

Если сообщается об ошибке, вам необходимо изменить разрешения vdbench:

root@node03:/home/vdbench/vdbench50406# chmod 777 vdbench

2. Настроить vdbench под Windows; (1) Разархивируйте пакет vdbench (версия vdbench из Linux из пакета и Windows одинакова), после распаковки загрузите 32-битную версию Java, установите Java, настройте переменные среды Javaиз в Windows (Примечание: vdbench в настоящее время поддерживает 32-битную версию Java; на окнах) (2) Откройте окно DOS, перейдите в каталог vdbench и выполните команду vdbench -t для проверки удобства использования vdbench

3. Использование vdbench

Насколько я понимаю, использование vdbench заключается в том, чтобы сначала написать скрипт, а затем запустить его непосредственно в каталоге установки vdbench.

1. Написание сценариев

Для этой части вы можете обратиться к сценариям в распакованной папке примеров, например create_files, вы также можете обратиться к parmfile.html в выходном каталоге;

root@node1:/home/vdbench/vdbench50406/examples/filesys# cat create_files 

*
пропускать
*

fsd=fsd1,anchor=/dir,depth=1,width=1,files=10000,size=8k

fwd=fwd1,fsd=fsd1,operation=read,threads=16

rd=rd1,fwd=fwd*,fwdrate=100,format=yes,elapsed=5,interval=1

Примечание:（1）anchor=/dir Для этого необходимо изменить путь на путь, по которому вы монтируете ceph. Мой файл —nchor=/home/baymax/cephfs.

2. тест файловой системы vdbench

Для файловой системы настройте следующие параметры:

(1) HD: Определение хоста. То же, что и виртуальное блочное устройство.

(2) FSD: определение файловой системы.

• fsd= идентифицирует имя определения файловой системы
• якорь = Каталог, в котором будет создана структура каталогов
• ширина = количество каталогов, которые будут созданы под локатором
• глубина = количество уровней, которые нужно создать под локатором
• files = количество файлов, которые нужно создать на самом низком уровне
• size= (размер,размер,…) Размер файла, который будет создан.
• distribution= внизу (если вы хотите, чтобы файл создавался только на самом нижнем уровне) и все (если вы хотите, чтобы файлы создавались во всех каталогах)
• openflags= используется для открывает отдельную файловую систему (Solaris) из flag_list

(3) FWD: определение рабочей нагрузки файловой системы.

• fwd= Файловая система идентификации рабочей нагрузкиизимя。
• fsd= Чтобы использовать определение файловой системы из ID。
• host= хотетьиспользуется для этой рабочей нагрузкииз хоста ID。
• fileio= random или последовательный, указывающий файл I/O из режима будет выполнен.
• fileselect= random или последовательный, определяет метод выбора файла.
• xfersizes= Число Передача данных (операции чтения и записи) обрабатывает различный размер данных.
• operation= mkdir、rmdir、create、delete、open、close、read、write、getattr и setattr. Выберите операцию с файлом, которую хотите выполнить.
• rdpct= (Только) операции чтения и записи и проценты.
• threads= Эта рабочая нагрузка измеряется числом одновременных потоков. Для каждого потока требуется как минимум 1 индивидуальныйдокумент。

(4) RD: определение хода

• fwd= К файловой системе рабочей нагрузкииз ID。
• fwdrate= Количество операций с файловой системой, выполняемых в секунду.
• format= yes / no / only / restart / clean / каталоги. Перед началом операции выполните операцию ИЗ.
• Operations= переопределяет операции вперед. Варианты те же.

vdbenchдокументсистемаtestПример:
fsd=fsd1,anchor=/mnt/cephfs02,length=3,width=10,files=20,size(512,50,4k,50),openflags=o-direct
fwd=fwd1,fsd=fsd1,operation=write,xfersize=(4k,15,8k,35,1M,50),fileio=random,fileselect=random,threads=32
rd=rd1,fwd=fwd1,fwdrate=max,format=yes,elapsed=20,interval=1

3. Запустите скрипт

root@node1:/home/vdbench/vdbench50406# ./vdbench -f examples/filesys/create_files -jn

в-jn для проверки данных,Я пока не совсем понимаю.

4. Вывод результатов

Много чего будет записано и выведено. Если ошибок не возникнет, в конце появится следующее:

 Vdbench execution completed successfully. Output directory: /home/vdbench/vdbench50406/output

После каждого запуска vdbench создает выходную папку, содержащую следующие файлы:

（1）errorlog.html——кактествключеночислопроверено（-jn）час,В блоке данных он может содержать некоторую информацию, связанную с ошибками:

• Неверное чтение ключа
• Неверный lba Чтение (отдельный сектор из адреса логического байта)
• Неверный SD или FSD чтение имени
• число По данным коррупции, даже ошибка inuse из lba или Ключевое время
• Повреждение данных
• плохие сектора

（2）flatfile.html——Включать vdbench Столбец за столбцом ASCII информация о формате.

（3）histogram.html——одиндобрый Включать Гистограмма отчетаизответчасмежду、Текстовый формат файла.

（4）logfile.html——Включать Java Код записывает копию каждой строки информации в окно консоли. файл журнала.html В основном используется для целей отладки

（5）parmfile.html——Отображается Включатьиспользуется длятестиз Каждый контентиз Окончательные результаты

（6）resourceN-M.html、resourceN.html、resourceN.var_adm_msgs.html

Сводный отчет, отчет stdout/stderr, сводный отчет для хоста N

наконец “nn” строковый файл /var/adm/messages и /вар/адм/сообщения. каждый M индивидуальный JVM/Slave целевой хост N и Хост N Выше 0。

（7）sdN.histogram.html、sdN.html——Каждыйиндивидуальный N определение хранилище хранилища “N” Отчет.

（8）summary.html——хозяинхотеть Отчетдокумент,Отображается как общая рабочая нагрузка, созданная за один запуск в каждом отчетном интервале.,и средневзвешенное значение всех интервалов, кроме первого.

• интервал: порядковый номер интервала отчета
• I/O скорость: среднее количество наблюдений в секунду I/O ставка
• MB сек: передача изчисло по среднему MB число
• bytes Ввод-вывод: средний размер передаваемых данных
• read pct: средний процент прочтения
• resp время: среднее время ответа, измеряемое длительностью запроса на чтение/запись. все vdbench Время указано в миллисекундах.
• resp max: максимальное время ответа, наблюдаемое в этом интервале. наконец Строка содержит максимальное общее число.
• resp stddev: время отклика по стандартному отклонению
• cpu%sys+usr: процессор занят = 100 (системное + пользовательское время) (Solaris, Windows, Linux)
• cpu% sys: загрузка процессора: системное время

（9）swat_mon.txt,swat_mon_total.txt

• vdbench и Sun StorageTekTM Workload Analysis Tool (Swat) Trace Facility (STF) объединено для поддержки использования повторов Swat создаватьизодининдивидуальныйтраекторияиз I/O рабочая нагрузка.
• Swat использовать Create Replay File Опции create и Process из файла дорожки создадут файл. flatfile.bin（flatfile.bin.gz используется для vdbench403 и более поздние версии), который содержит Swat идентифицированныйиз Каждыйиндивидуальный I/O Управляйте записью.

Эти файлы содержат отформатированный отчет, который можно импортировать. Swat Performance Monitor (SPM) создавать диаграммы производительности.

4. Тест пустого диска vdbench

1、верно индивидуальное оборудование,Настройте следующие параметры:

(1) HD: определение хоста • Если вы хотите отобразить текущий хост, установите hd= локальный хост. Если вы хотите указать удаленный хост, hd= label。 • system= IP адрес или имя сети.

Example：
     hd=localhost,shell=ssh,vdbench=/home/vdbench/vdbench50406,user=root
     hd=hd1,system=10.147.0.15
     hd=hd2,system=10.147.37.173

Примечание: vdbench=dir, каталог здесь относится к каталогу на всех хостах, а это означает, что каталоги vdbench на всех хостах должны быть одинаковыми, и соответствующая конфигурация должна быть помещена в vdbench;

(2) SD: определение хранилища • sd= Имя хранилища удостоверений. • host= Хост, на котором расположено хранилище ID。 • lun= Имя исходного диска, ленты или файловой системы. vdbench Для вас также может быть создан индивидуальный диск. • threads= верно SD Максимальный параллелизм I/O Запросить количество. По умолчанию 8。 • hitarea= Отрегулируйте процент попадания при чтении. По умолчанию 1m。 • openflags= используется для Открытьодининдивидуальный lun илиодининдивидуальныйдокументиз flag_list, чтобы быть ближе к реальному сценарию, здесь обычно выбирается o_direct, чтобы обойти механизм кэширования и записать непосредственно на диск.

Example：
      sd=default,threads=32,openflags=o_direct,size=340G
      sd=sd1,hd=hd1,lun=/dev/sdb
      sd=sd2,hd=hd1,lun=/dev/sdc
      sd=sd3,hd=hd1,lun=/dev/sdd
      sd=sd4,hd=hd1,lun=/dev/sde
      sd=sd5,hd=hd1,lun=/dev/sdf
      sd=sd6,hd=hd1,lun=/dev/sdg
      sd=sd7,hd=hd1,lun=/dev/sdh
      sd=sd8,hd=hd1,lun=/dev/sdi
      sd=sd1,hd=hd2,lun=/dev/sdb
      sd=sd2,hd=hd2,lun=/dev/sdc
      sd=sd3,hd=hd2,lun=/dev/sdd
      sd=sd4,hd=hd2,lun=/dev/sde
      sd=sd5,hd=hd2,lun=/dev/sdf
      sd=sd6,hd=hd2,lun=/dev/sdg
      sd=sd7,hd=hd2,lun=/dev/sdh
      sd=sd8,hd=hd2,lun=/dev/sdi
      Эта конфигурация отличает хост 1и Хост2,Первая строка — это общая конфигурация для всех SDиз ниже;

(3) WD: определение рабочей нагрузки • wd= Имя, идентифицирующее рабочую нагрузку. • sd= Определение хранилища,которое нужно использовать ID。 • host= хоста для запуска этой рабочей нагрузки ИДЕНТИФИКАТОР. Настройка по умолчанию: localhost。 • rdpct= Запросы на чтение в процентах от общего числа запросов. • rhpct= Прочитайте процент попаданий. Настройка по умолчанию: 0。 • whpct= Напишите процент попаданий. Настройка по умолчанию: 0。 • xfersize= Размер передаваемых данных. Настройка по умолчанию: 4k。 • seekpct= Процент случайных поисков. Может быть случайным значением. • openflags= используется для Открытьодининдивидуальный lun илиодининдивидуальныйдокументиз flag_list。 • iorate= Закрепление для этой рабочей нагрузки I/O ставка.

Пример:
wd=wd1,sd=sd*,xfersize=4k,rdpct=0,seekpct=100
Эта конфигурация,Настроенный размер блока,Читать из пропорции и случайной пропорции;

(4) RD: определение хода • rd= Определяет имя запуска. • wd= используется для рабочей нагрузки в этом запуске ID。 • iorate= (#,#,…) одининдивидуальныйилимногоиндивидуальный I/O ставка (Здесь можно контролировать работу исиопса, если нет, то выставьте его на максимум) • elapsed= time: Продолжительность выполнения в секундах. Значение по умолчанию — 30. (Установка долгосрочного периода может сделать данные более стабильными) • warmup= время: период нагрева, в конечном итоге будет игнорироваться. • distribution= I/O Запрошенное распределение: экспоненциальное,равномерное или детерминированное. • pause= Время сна перед следующим запуском в секундах. • openflags= используется для Открытьодининдивидуальный lun илиодининдивидуальныйдокументиз flag_list。

Пример:
rd=run1,wd=wd1,iorate=max,el=100000,in=1,разминка=600
Эта конфигурация,iorate(iops) настроен,время работы,число В зависимости от частоты печати

Примеры тестов vdbench:
hd=localhost,shell=ssh,vdbench=/home/vdbench/vdbench50406,user=root
hd=hd1,система=200.200.213.30
sd=default,threads=16,openflags=o_direct,size=30G
сд=sd1,hd=hd1,lun=/dev/sdb
сд=sd2,hd=hd1,lun=/dev/sdc
сд=sd3,hd=hd1,lun=/dev/sdb
сд=sd4,hd=hd1,lun=/dev/sdc
сд=sd5,hd=hd1,lun=/dev/sdb
сд=sd6,hd=hd1,lun=/dev/sdc
сд=sd7,hd=hd1,lun=/dev/sdb
сд=sd8,hd=hd1,lun=/dev/sdc
wd=wd1,sd=sd*,xfersize=4k,rdpct=0,seekpct=100
rd=run1,wd=wd1,iorate=max,el=100000,in=1,разминка=600

Вывод результатов (часть):

Aug 13, 2018  interval        i/o   MB/sec   bytes   read     resp     read    write     resp     resp queue  cpu%  cpu%
                             rate  1024**2     i/o    pct     time     resp     resp      max   stddev depth sys+u   sys
07:37:56.397         1      85.00     0.33    4096   0.00 2968.303    0.000 2968.303 6136.625 1844.150 308.5  83.4  23.9
07:37:56.459         2      83.00     0.32    4096   0.00 3184.730    0.000 3184.730 7861.568 1795.753 348.0  95.5  68.2
07:37:56.478         3      23.00     0.09    4096   0.00 3441.907    0.000 3441.907 5995.742 1011.997  61.2  71.4  42.9
07:37:56.493         4       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000   0.7   NaN   NaN
07:37:56.647         5       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000   0.8  83.3  33.3
07:38:01.132         6       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000  40.8  85.7  33.3
07:38:01.162         7      44.00     0.17    4096   0.00 4070.731    0.000 4070.731 10818.509 2883.771 226.7  66.7  66.7
07:38:01.181         8       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000   1.4  88.9  11.1
07:38:01.201         9      26.00     0.10    4096   0.00 4508.067    0.000 4508.067 15048.031 2778.336  27.7  91.7  55.6
07:38:01.630        10       8.00     0.03    4096   0.00 1806.932    0.000 1806.932 4328.737 1174.638  48.3  90.0  86.7
07:38:01.760 Detailed reporting is running behind; reporting of intervals 11-27 has been skipped.
07:38:54.054        28       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000  15.9   NaN   NaN
07:39:01.272        29      17.00     0.07    4096   0.00 4937.274    0.000 4937.274 7454.897 1474.074  39.4   NaN   NaN
07:39:03.858 Detailed reporting is running behind; reporting of intervals 30-42 has been skipped.
07:39:59.480        89      84.00     0.33    4096   0.00 7764.630    0.000 7764.630 14029.705 2984.238 654.5  75.9  48.1
07:39:59.561        90       0.00     0.00       0   0.00    0.000    0.000    0.000    0.000    0.000   0.6   NaN   NaN

Издатель: Лидер стека программистов полного стека, укажите источник для перепечатки: https://javaforall.cn/124628.html Исходная ссылка: https://javaforall.cn