Советы по оптимизации Go
Советы по оптимизации Go

Когда вы задумаетесь об оптимизации?

  • Когда функция вызывается часто
  • Когда дизайн интерфейса или структуры данных нецелесообразен, а использование памяти слишком велико.
  • Ответ интерфейса занимает слишком много времени
  • Когда код слишком беспорядочный, часто возникают проблемы

Какие существуют способы поиска проблем?

  • Испытание под давлением одного интерфейса (обычно это новый интерфейс или при смене интерфейса), испытание под давлением с фиксированным QPS
  • Испытание на экстремальное давление QPS (обычно используется для проверки максимального диапазона давления интерфейса)
  • Полноканальный стресс-тест (этот раздел в основном предназначен для подготовки к пикам трафика)

Некоторые инструменты проверки кода

Инструменты оценки кода Go:

  1. goreporter — создание отчетов об оценке качества кода Go.
  2. dingo-hunter — Статический анализатор для поиска взаимоблокировок в программах на Go
  3. flen — Получить информацию о длине функции в пакетах Go
  4. go/ast — пакет ast объявляет типы, используемые пакетами Go для представления синтаксических деревьев.
  5. gocycle — Измерение сложности цикломатической функции в исходном коде Go
  6. Go Meta Linter — одновременный инструмент Go lint и стандартизация вывода инструмента.
  7. go vet — проверить исходный код Go и сообщить о подозрительных конструкциях.
  8. ineffassign — обнаружение недопустимых присвоений в коде Go
  9. Safesql — инструмент статического анализа Golang для предотвращения SQL-инъекций.

некоторые инструменты

  • benckmark
    1. При использовании различных инструментов, библиотек с открытым исходным кодом и т. д. вы можете сначала протестировать метод. Затем решите, какой из них использовать в конце
  • go pprof
    1. CPU Профиль: используется для диагностики логики кода, вызывающей высокую загрузку ЦП.
    2. Профиль памяти: используется для диагностики логики кода, вызывающей высокое использование памяти.
    3. Профиль Goroutine: используется для диагностики логики кода, которая заставляет Goroutine занимать высокий уровень, и анализа конкретной логики выполнения Goroutine.
    4. Block Профиль: используется для диагностики логики кода, которая блокирует выполнение, например обнаружения больших блокировок (мьютекс блокирует долго выполняющуюся логику, и есть много других горутинов, ожидающих этой блокировки).

Встроенный профилировщик памяти Go позволяет нам анализировать использование памяти онлайн-системами. Есть четыре соответствующих индикатора:

  1. inuse_objects: обращаем внимание, когда нам кажется, что в памяти слишком много резидентных объектов. на Индикатор
  2. inuse_space: Когда мы думаем, что приложение занимает RSS Когда он слишком большой, он будет сосредоточен на Индикатор
  3. alloc_objects: Когда приложение в истории испытывало большое количество выделенной памяти, это приведет к CPU Или когда использование памяти значительно возрастает, оно может сосредоточиться на Индикатор
  4. alloc_space: Когда приложение в истории испытало значительное увеличение использования памяти, оно сосредоточится на Индикатор

Далее мы остановимся на этих аспектах.

Slice

  • Выделите память для срезов заранее

○ При необходимости используйте третий параметр: make([]T, 0, len)

○ Если точное число заранее неизвестно и срез является временным, его можно установить больше, если срез не будет увеличиваться во время выполнения.

  • Не забудьте использовать «копировать»

○ Старайтесь не использовать добавление при копировании, например, при объединении двух или более фрагментов.

  • Не оставляйте неиспользованные кусочки

○ Если вам нужно отрезать от ломтика небольшой кусок и использовать только его, основная часть сохранится. Вы можете использовать копирование для создания нового фрагмента, и старый объект будет переработан сборщиком мусора.

string

  • strings.Builder,bytes.Bufferпохожий
  • Предпочитайте strings.Builder +=

struct

  • Уменьшить путем выравнивания памятиstructразмер
    • Структуру можно выровнять (в правильном порядке в зависимости от размера полей), тем самым уменьшив размер самой структуры.
    • Траверс []struct{} Используйте индексы вместо range
    • Иногда, когда мы используем канал, он обычно используется для представления идентификатора, а не для отправки данных для уведомления подпрограмм о выполнении некоторых задач. Эта ситуация более практична. Пустая структура

defer

  • Постарайтесь не использовать defer или, по крайней мере, не используйте defer в цикле.

map

  • То же, что и срез,Необходимо заранее выделить память
    • При инициализации карты укажите ее размер
  • Если необходимо представить заполнитель, его значение представляется пустой структурой.
    • struct{} ничего
  • Прозрачныйmap
    • Карта может только увеличиваться, а не уменьшаться. Нужно это контролировать - полностью и явно сбросить карту
  • Использование указателей
    • если map Не содержит указателей. Имейте в виду, что строки тоже являются указателями — используйте в качестве ключей []byte вместо строк.

interface

  • Рассчитать распределение памяти ○ Помните: чтобы присвоить значение интерфейсу, сначала нужно его куда-то скопировать, а затем вставить указатель. Ключевое слово — копия. Получается, что стоимость упаковки и распаковки будет примерно равна размеру структуры и распределению.

sync.Pool

быстрыйhttp. Он поддерживает почти все объекты с помощью sync.Pool, поэтому утверждает, что работает в 10 раз быстрее, чем http, но на самом деле это не так.

пул сопрограмм

В большинстве сценариев приложений go не требует пула. сопрограммы. Конечно, пул сопрограммы все же имеют некоторые преимущества:

  1. Количество горутин можно ограничить, чтобы избежать неограниченного роста.
  2. Уменьшите количество раз расширения стека.
  3. В сценариях, где горутины создаются часто, ресурсы используются повторно для экономии памяти. (Для этого требуется определенный масштаб. В общих сценариях эффект не очевиден.)

Go имеет определенные возможности повторного использования горутин. Таким образом, вам придется выбирать, использовать ли пул в соответствии со сценарием. сопрограмм,Неуместные сцены не только не принесут никакой пользы,Наоборот, это увеличивает сложность системы.

Уменьшите потребление блокировки

В параллельных сценариях критические разделы обычно блокируются. К рискам производительности, связанным с этим, также следует относиться серьезно. Общие методы оптимизации включают в себя:

  • Уменьшите степень детализации блокировок: в стандартной библиотеке go math.rand таит в себе такую ​​скрытую опасность. Когда мы напрямую используем библиотеку rand для генерации случайных чисел, за их генерацию фактически отвечает глобальный объект globalRand. Генерация случайных чисел после блокировки globalRand приведет к неэффективности в сценариях, где мы часто используем случайные числа.
  • Атомарный: в соответствующих сценариях использование атомарных операций для замены блокировок мьютексов также является классическим методом без блокировок. Оптимизация sync.map в стандартной библиотеке для операций чтения исключает rwlock, что является стандартным случаем. О нем написано много статей, поэтому я не буду вдаваться в подробности.

Объединение нескольких маленьких объектов в один большой объект

Уменьшите количество ненужных косвенных ссылок на указатели и больше используйте ссылки на копирование.

Например, используйте bytes.Buffer вместо *bytes.Buffer, поскольку при использовании указателя для завершения ссылки будут выделены 2 объекта.

оптимизация, потребляющая много времени процессора

  1. При изготовлении заранее оцените размер.
  2. Временные карты и фрагменты используют sync.pool
  3. Если он больше 32 КБ, вы также можете использовать sync.pool.
  4. Не злоупотребляйте горутиной и уменьшите давление gc
  5. Не злоупотребляйте мьютексом и сократите переключение контекста.
  6. []Используйте unsafe для преобразования между байтовыми и строковыми временными переменными.
  7. Сократите использование отражения и отсрочки
  8. использование атомной блокировки без блокировки
boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose