Практика непрерывной интеграции Pytest+Allure+Jenkins
Практика непрерывной интеграции Pytest+Allure+Jenkins

1: Конфигурация среды

1.1 Установите pytest

pytestОфициальный адрес сайта:https://github.com/pytest-dev/pytest/

pytestСторонние плагины:http://plugincompat.herokuapp.com/

Предварительное условие: среда Python установлена.

Использование pipУстановить pytest,существоватьDosВыполнить в окнеpip install -U pytestЗаказ:

УстановитьAllure2

Предварительное условие: среда Java развернута.

allure — это легкая, гибкая, многоязычная и многоплатформенная структура отчетов.

Allure2Официальный адрес сайта:https://github.com/allure-framework/allure2

Win10 Установите allure2: требуется питание Окно оболочкиказнен вscoop install allureЗаказ:

  • Клавиша Win + X открывает окно Power Shell.
  • Выполните следующую команду в окне Powershell (строка установки):

iex (new-object net.webclient).downloadstring('https://get.scoop.sh')

После выполнения с помощью команды scoop проверьте, правильно ли она установлена ​​(на следующем рисунке видно, что установка правильная):

  • Power Окно оболочкиосуществлятьscoop install allureЗаказ(Установка прошла успешно, как показано ниже.):

Примечание: pip должен выполняться под Win7. install pytest-adaptor-allure устанавливает адаптер allure!

2. Подробное объяснение параметров Pytest.

2.1:--collect-only

Используйте опцию --collect-only, чтобы показать, какие тестовые случаи будут выполняться в данной конфигурации.

2.2:-k

Опция -k позволяет нам использовать выражение для указания тестовых случаев, которые мы хотим выполнить.

2.3:-m

-m (маркер) используется для маркировки и группировки тестов для быстрого выбора и выполнения тестовых случаев.

Обязательным условием для использования является то, что тестовые примеры должны быть помечены с помощью pytest.mark.marker_name.

-m может использовать несколько имен маркеров (имен меток), конечно, он также поддерживает и не поддерживает эти правила.

2.4:-x(--exitfirst)

Обычно pytest запускает каждый собранный тестовый пример. Если тестовая функция не выполнит утверждение или вызовет внешнее исключение, выполнение тестового примера будет прекращено, а pytest пометит его как неудавшийся и продолжит выполнение следующего тестового примера. Обычно это ожидаемый режим работы. Но при отладке мы захотим немедленно завершить весь сеанс в случае сбоя. На данный момент опция -x может удовлетворить наши потребности.

2.5:--maxfail=num

Опция -x характеризуется немедленным завершением сеанса в случае сбоя. Если мы допускаем сбой pytest несколько раз перед остановкой, тогда решительно используйте опцию --maxfail. Пример: pytest --maxfail=3 (завершить сеанс после трех сбоев во время выполнения pytest)

2.6:-s(--capture=method)

Опция -s позволяет терминалу выводить определенные результаты во время теста, включая любую стандартную информацию о потоке вывода. -s эквивалентно --capture=no. Обычно фиксируются все выходные данные теста.

2.7:--lf(--last-failed)

Если один или несколько тестовых примеров терпят неудачу, если мы хотим найти последний неудачный тестовый пример и повторно выполнить его, мы можем использовать опцию --lf.

2.8:--ff(--failed-first)

Опции --ff и --lf имеют аналогичный эффект, за исключением того, что --ff запускает остальные тестовые примеры.

2.9:-v(--verbose)

При использовании опции -v выводимая информация будет более подробной.

2.10:-q(--quit)

Опция -q имеет противоположный эффект, чем опция -v, которая упрощает вывод информации.

2.11:-l(--showlocals)

С опцией -l трассируются стек непройденных тестовых случаев, поэтому отображаются локальные переменные и их значения.

2.12:--tb=style

Опция --tb определяет, как будет отображаться выходная информация при обнаружении сбоя. Рекомендуемые типы стилей: короткий, линейный и нет. Короткий режим: выводит только одну строку содержимого утверждения системы первого уровня. В линейном режиме для отображения всех сообщений об ошибках используется только одна строка вывода. Режим no напрямую блокирует всю информацию обратной связи.

2.13:--duration=N

Опция --duration=N может ускорить темп тестирования. Ему не важно, как выполняется тест. Он только подсчитывает, какие этапы процесса тестирования являются самыми медленными, и отображает N самых медленных этапов. Чем дольше это происходит, тем выше результат. Если указана длительность=0, все этапы будут отображаться в порядке от самого длинного к самому короткому.

Третье: Fixture, суть Pytest

Fixture — это функция оболочки, выполняемая pytest до и после запуска тестовой функции. Код в приспособлении можно настроить в соответствии с изменяющимися потребностями тестирования, включая определение набора данных, передаваемых в тест, настройку начального состояния системы перед тестированием, предоставление источников данных для пакетного тестирования и т. д.

Декоратор @pytest.fixture() используется для объявления того, что функция является фикстурой. Если список параметров тестовой функции содержит имя фикстуры, Pytest обнаружит его и выполнит фикстуру до запуска тестовой функции. Фикстуры могут выполнять задачи и возвращать данные в функции тестирования.

3.1: Совместное использование приборов через conftest.py

Фикстуры можно размещать в отдельных тестовых файлах. Если вы хотите, чтобы несколько тестовых файлов использовали одно и то же приспособление, вы можете создать новый файл conftest.py в каталоге слоев вариантов использования и поместить в него приспособление.

3.2:использоватьfixtureосуществлять Предустановка&уничтожить логику

Функция фиксации будет выполнена до функции тестирования, но если функция фиксации содержит выход, система остановится на выходе и вместо этого запустит тестовую функцию. После выполнения функции тестирования она вернется к функции фиксации и выполнит код после нее. урожай.

Таким образом, код перед выходом можно рассматривать как процесс настройки (настройки), а код после выхода можно рассматривать как процесс очистки (демонтаж). Что бы ни случилось во время логистического теста, код после выхода будет выполнен.

# -*- encoding = utf-8 -*- import pytest from Basic import commons # Глобальная установка и демонтаж Предустановленным условием является вход в систему и выход из драйвера после завершения выполнения нужного дела. @pytest.fixture(scope="session", autouse=True) def login(): commons.login() yield login commons.quit_driver()

Примером приведенного выше кода является выполнение операции входа в систему до выполнения всех вариантов использования и выход из драйвера после выполнения всех вариантов использования.

3.3: Используйте --setup-show, чтобы отслеживать процесс выполнения фикстуры.

Когда мы пишем фикстуры, если мы хотим увидеть, что выполняется во время процесса тестирования и порядок выполнения, pytest предоставляет опцию --setup-show для достижения того, чего мы хотим.

3.4. Использование приборов для передачи тестовых данных

Фикстуры отлично подходят для хранения тестовых данных и могут возвращать любые данные.

@pytest.fixture() def save_test_data(): return {"name": "kevin", "passwd": "hello1234"}

3.5 Указанная площадь крепления

Фикстура содержит дополнительный параметр, называемый областью действия, который используется для управления частотой выполнения логики конфигурации и уничтожения.

@pytest.fixture(scope=scope) имеет 4 необязательных значения.

Scope=’function’:

Фикстуры функционального уровня необходимо выполнять только один раз для каждой тестовой функции. Код конфигурации выполняется до выполнения тестового примера, а код уничтожения выполняется после выполнения тестового примера. функция является значением области видимости по умолчанию.

Scope=’class’:

Фикстура уровня класса выполняется только один раз для каждого тестового класса. Эту фикстуру можно использовать независимо от того, сколько методов класса имеется в тестовом классе.

Scope=’module’:

Фикстуры уровня модуля необходимо запускать один раз для каждого выполнения модуля. Независимо от того, сколько тестовых функций, методов класса или других приспособлений имеется в модуле, это приспособление можно использовать совместно.

Scope=’session’:

Фикстуры уровня сеанса необходимо выполнять только один раз за сеанс. Все тестовые функции и методы в сеансе pytest могут использовать этот фиксатор.

Хотя область действия определяется самим приспособлением, следует отметить, что параметр области определяется при определении приспособления. Поэтому тестовая функция, использующая приспособление, не может изменить область действия приспособления. Светильники разумно используют светильники того же уровня или светильники более высокого уровня, чем они сами. Например: фикстура уровня функции может использовать фикстуру того же уровня или фикстуру уровня класса, уровня модуля или уровня сеанса, но не наоборот!

3.6: Опция автоматического использования приспособления

Опция фикстуры autoouse может определить, будут ли все тестовые примеры автоматически использовать фикстуру.

пример:

# Глобальная установка и демонтаж Предустановленным условием является вход в систему и выход из драйвера после завершения выполнения нужного дела. @pytest.fixture(scope="session", autouse=True) def login(): commons.login() yield login commons.quit_driver()

Четвертое: плагин Pytest

Вы можете просмотреть и загрузить плагин pytest по адресу https://docs.pytest.org/en/latest/plugins.html.

4.1 pytest-repeat

Если вы хотите разрешить повторение тестовых случаев в течение сеанса, вы можете использовать плагин pytest-repeat.

(Если выполнение теста периодически терпит неудачу, вы можете попробовать этот плагин)

Выполните pip(3) install -U pytest-repeat, чтобы установить последнюю версию.

4.2 pytest-xdist

Обычно тесты выполняются последовательно, поскольку к некоторым ресурсам можно получить доступ только в одном варианте использования подряд. Если нашим тестовым примерам не требуется доступ к общим ресурсам, мы можем увеличить скорость выполнения, выполняя их параллельно.

Используя pytest-xdist, вы можете указать количество процессорных процессов для одновременного выполнения нескольких тестов. Если мы объединим pytest-xdist и selenium-grid, тесты можно будет выполнять на нескольких машинах.

Выполните pip(3) install pytest-xdist, чтобы установить этот плагин.

4.3 pytest-timeout

По умолчанию выполнение теста в pytest не имеет ограничений по времени. Если в процессе тестирования задействованы исчезающие ресурсы, например веб-сервисы, лучше всего добавить ограничение по времени выполнения теста.

Pytest-timeout позволяет нам указать тайм-аут или отметить его непосредственно в тестовом коде.

Приоритет тайм-аута, указанный в тестовом примере, выше, чем приоритет тайм-аута в командной строке.

4.4 pytest-rerunfail

Если нам необходимо повторно запустить тестовый пример после его неудачи, стоит попробовать плагин pytest-rerunfail.

4.5 pytest-instafail

По умолчанию pytest отображает информацию стека об ошибках и неудачных тестовых случаях после выполнения всех тестов. Если выполнение теста занимает много времени и мы хотим вовремя увидеть ошибки или собрать информацию о трассировке вместо того, чтобы ждать выполнения всех тестовых случаев, установите плагин с помощью pip install pytest-instafail

Его использование также относительно просто. Вам нужно только добавить опцию pytest --instafail при его выполнении.

4.6 pytest-html

Pytest-html полезен для непрерывной интеграции или длительных тестов. Он может создать веб-страницу с реалистичными результатами тестов для тестирования pytest. В этом HTML-отчете можно фильтровать результаты теста (пройдено, пропущено, не удалось, ошибка, ожидаемый сбой, ожидаемый сбой, но пройден), а также сортироваться по имени теста, продолжительности и статусу результата.

Отчеты HTML также могут настраивать некоторые элементы, например снимки экрана и выходную информацию.

Pip install -U pytest-html плагин установки

Вариант использования Pytest: абсолютный путь --html=html абсолютный путь к файлу отчета

Пятое: Allure (красивый отчет об испытаниях)

Allure Framework — это гибкий и легкий многоязычный инструмент для составления отчетов о тестировании, который не только отображает очень краткое представление содержимого тестирования в удобной форме веб-отчета, но также позволяет всем, кто участвует в процессе разработки, извлекать максимум полезной информации из ежедневного выполнения тестов. .

С точки зрения разработки и контроля качества отчеты Allure сокращают жизненный цикл распространенных дефектов: неудачные тесты можно разделить на ошибки и неработающие тесты, а также можно настроить журналы, шаги, исправления, вложения, время, историю и ссылки на tms и ошибки. Интеграция систем отслеживания, чтобы ответственные разработчики и тестировщики имели всю информацию.

С точки зрения менеджера, Allure предоставляет ясную «общую картину» того, какие функции включены, где скапливаются дефекты, как выглядят сроки выполнения и многие другие полезные вещи.

Конфигурация Дженкинса Allure

  • Установить плагин привлекательности

Управление системой-->Управление плагинами-->Устанавливаемые плагины Поиск привлекательности для установки

  • Установите командную строку Allure
  • После установки плагина allure,Входить Управление системой-->Глобальная конфигурация инструмента,Установите командную строку Allure
  • Новыйjob-->Добавить этапы сборки-->WindowsПакетная обработка Заказ,входить:

python -m pytest E:\future-his\TestCase -n 2 --alluredir D:\\report

проиллюстрировать:

E:\future-his\TestCase: каталог, в котором находится тестовый пример (скрипт unittest)

D:\\report: каталог вывода отчета о тестировании

-n 2: указывает на открытие двух потоков (можно удалить, если seleniumGrid не включен)

  • Новая операция после сборки, отчет Allure, введите имя каталога, в котором находится отчет: в соответствии с именем каталога отчета, заданным в пакетной команде Windows (здесь используется имя отчета).
  • Запустите сборку и просмотрите отчет:
  • Посмотреть детали отчета:

ЯсуществоватьучаствоватьНа втором этапе специального тренировочного лагеря Tencent Technology Creation 2023 года будут отмечены призовые эссе, которые разделят призовой фонд в 10 000 юаней и часы с клавиатурой.

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose