Big Data NiFi (16): Подключение процессора
Big Data NiFi (16): Подключение процессора

Подключение процессора

1. Просмотрите FlowFile в очереди.

После отдельного запуска процессора GenerateFlowFile вы можете заметить, что в соответствующей очереди соединения есть данные. Щелкните правой кнопкой мыши «Список очереди» в соединении, чтобы просмотреть информацию о FlowFile в очереди:

2. Просмотр значений настраиваемых атрибутов FlowFile.

Вы также можете просмотреть информацию о настроенном атрибуте в атрибуте FlowFile в очереди. Например, установите пользовательский атрибут «mykey» в процессоре «GenerateFlowFile» и установите соответствующее значение «myvalue»:

Запустите «GenerateFlowFile» отдельно, чтобы получить некоторые данные, и просмотрите атрибуты FlowFile в очереди следующим образом:

3. Конфигурация подключения

Для подключенных подключений вы можете настроить дополнительную информацию через «Настроить»:

Нажмите «НАСТРОЙКИ» на всплывающей странице:

Срок действия данных FlowFile истекает:

Установка времени истечения срока действия FlowFile может привести к удалению данных в очереди, которые не могут быть обработаны вовремя. Значение по умолчанию — 0. Срок действия данных никогда не истекает. Когда установлен срок действия, на соединении Connect можно увидеть небольшой значок часов.

Противодавление «Бэк Пресс»:

NiFi предоставляет два механизма настройки противодавления. Механизм противодавления позволяет определить, сколько данных находится в очереди. Когда это количество будет достигнуто, исходный процессор больше не будет планировать данные, чтобы предотвратить переполнение данных. «Порог объекта противодавления» определяет количество данных в очереди для запуска механизма противодавления. «Порог размера данных противодавления» определяет размер данных в очереди, которая запускает механизм противодавления. После настройки механизма противодавления на соединении Connection отобразится индикатор выполнения.

«Стратегии балансировки нагрузки» балансировка нагрузки:

Варианты политики балансировки нагрузки следующие:

  • Не балансировать нагрузку: не балансировать данные в кластере, значение по умолчанию.
  • Разделение по атрибуту: определите, на какой узел отправляются данные, на основе значения атрибута, указанного пользователем. Данные с одинаковым значением атрибута будут отправлены на один и тот же узел. Если узел, на который отправляются данные, отключен, данные не будут отправляться на другие узлы и будут отправлены автоматически при повторном подключении узла к кластеру.
  • Круговой перебор: данные распределяются в режиме опроса. Когда узел отключается, он автоматически опрашивается и отправляется на другие узлы.
  • Один узел: все данные отправляются на один узел.,Не Конфигурация какого узла. Когда узел отключен от кластера,Данные не будут отправляться на другие узлы,пока узел снова не станет доступен.

После настройки балансировки нагрузки вы можете увидеть значок:

«Сжатие балансировки нагрузки» — сжатие данных балансировки нагрузки:

После настройки стратегии балансировки нагрузки вы можете указать, следует ли сжимать данные, передаваемые между узлами. Доступны следующие варианты:

  • Не сжимать: Не сжимать.
  • Сжимать только атрибуты: сжимать только атрибуты.
  • Сжатие атрибутов и содержимого. Сжатие атрибутов и содержимого.

Приоритет «Выбор приоритета»:

Вы можете указать приоритет данных в очереди, чтобы обрабатываться данные с более высоким приоритетом. Приоритеты можно использовать, перетащив их из «Доступные приоритезаторы» на вкладку «Выбранные приоритезаторы». Можно выбрать несколько приоритетов, и данные будут отсортированы в соответствии с выбранным приоритетом. Варианты приоритета следующие:

  • FirstInFirstOutPrioritizer: Учитывая два FlowFile, сначала обрабатываются FlowFiles, которые первыми поступают в соединение.
  • NewestFlowFileFirstPrioritizer: учитывая два FlowFile, последний FlowFile в потоке данных будет обработан первым.
  • OldestFlowFileFirstPrioritizer: дано два FlowFile.,Самые старые в потоке данных будут обработаны первыми.FlowFiles。Это схема по умолчанию, используемая, если приоритет не выбран.
  • PriorityAttributePrioritizer: учитывая два FlowFile, будет извлечен атрибут с именем Priority. Первым будет обработано сообщение с наименьшим значением приоритета. Рекомендуется задать числовое значение. Если это строка, она будет отсортирована по коду ascii.

4. Просмотр информации о подключениях

Посмотреть информацию о подключении можно в разделе «Подключение» главного меню «Сводка»:

5. Настройте изогнутое соединение

Вы можете дважды щелкнуть линию соединения, чтобы добавить точку изгиба. Повторный двойной щелчок по точке изгиба приведет к удалению текущей точки изгиба.

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose