SpringCloud Gateway — оптимизация производительности с несколькими маршрутизациями
SpringCloud Gateway — оптимизация производительности с несколькими маршрутизациями

Обзор

Поскольку шлюзы являются общедоступными услугами и должны справляться с последующим непрерывным ростом, влияние количества маршрутов на производительность нельзя игнорировать.

Тестирование производительности

Процесс тестирования

  1. Параметры измерения давления
    1. запросы 20 Вт
    2. 1000 потоков
  2. сопоставление маршрутов
    1. Элемент конфигурации одного маршрута: настройте только 5 полностью совпадающих маршрутов.
    2. Несколько элементов конфигурации маршрутизации: прежде чем сопоставление будет успешным, существует 1000 несовпадающих маршрутов.

Результаты испытаний

1. Количество запросов в секунду

  • Совпало 5 маршрутов:
    5 маршрутов совпадают
    5 маршрутов совпадают
  • 1000 совпадений маршрута:
    1000 матчей по маршруту
    1000 матчей по маршруту

2. Использование ресурсов

1. CPU
CPU
CPU
2. GC
GC
GC
2. STW
STW
STW

в заключение

  • Количество совпадений маршрутов сильно влияет на QPS.
  • Влияние на ЦП, сборщик мусора и STW также велико.

Место проблемы

1. Сравнение производительности

5 маршрутов (хорошая производительность)

Как видно из рисунка ниже, общее распределение времени ЦП относительно нормальное, три части времени относительно равномерны, и все они потребляются такими компонентами, как сеть и React, поэтому общая нагрузка ЦП находится в относительно здоровое состояние.

fire_5_routes
fire_5_routes

1000 маршрутов (плохая производительность)

Как видно из рисунка ниже, очевидно, что загрузка ЦП в Части 1 ненормально пропорциональна всей пропорции, поэтому основная проблема с производительностью связана с Частью 1.

fire_1000_routes
fire_1000_routes

два、Место проблемы

fire_reason
fire_reason
  • Из рисунка видно, что место с высокой загрузкой ЦП происходит из org/springframework/cloud/gateway/handler/predicate/HostRoutePredicateFactory$1.test.
  • HostRoutePredicateFactory используется для проверки соответствия имени домена
  • Построенные 1000 тестовых маршрутов и URL-адреса запросов не совпадают из-за несогласованных доменных имен. Здесь показатели производительности соответствуют построенной тестовой модели.

Оптимизация производительности

Причина проблемы

Каждый запрос будет проходить через цепочку маршрутов, а временная сложность равна O(n). Поскольку шлюз продолжает использоваться, маршрут будет продолжать увеличиваться. Таким образом, производительность будет продолжать снижаться.

решение

  • Идея: Самая интуитивная идея — кэшировать маршрут, и доменное имя оказывается наиболее подходящим измерением.
  • Причины, по которым доменные имена подходят для кэширования измерений:
    • Прежде всего, доменное имя стабильно и не изменится при изменении пути запроса.
    • Во-вторых, Маршруты под доменным именем не будут расти бесконечно, а обычно их количество ограничено.

Решите результат

Модификация кода

Расширьте функциональность шлюза за счет следующих двух аспектов

  • Загрузка маршрута
    • В процессе загрузки анализируется элемент конфигурации Host Маршрута.
    • При использовании хоста в качестве ключа связанный список маршрутов является наиболее ценным, а маршрут кэшируется на основе измерения доменного имени.
  • Маршрутизация
    • Измените селектор маршрута SpringCloudGateway.
    • Запрошенный хост точно соответствует цепочке маршрутов, и операция маршрутизации выполняется.

Оптимизированный стресс-тест HTTP на 1000 маршрутах.

QPS_1000_After
QPS_1000_After

Видно, что для тех же 1000 маршрутов QPS и время ответа пришли в норму.

Продолжительность вызова HostRoutePredicateFactory

  • До оптимизации
  • После оптимизации
    fire_host_route_after
    fire_host_route_after

результат

Использование org/springframework/cloud/gateway/handler/predicate/HostRoutePredicateFactory$1.test здесь уже очень мало, и программа возвращается в нормальное состояние.

пример кода

Обратитесь к следующему коду:

spring-cloud-gateway-domain-routers

Если вы решили свою проблему, вы можете нажать звездочку на Github. В Github есть и другие платформы с открытым исходным кодом. Заинтересованные студенты могут использовать их и задавать вопросы.

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose