ClickHouse(04)Как создать кластер ClickHouse
ClickHouse(04)Как создать кластер ClickHouse

ClickHouseСоздание кластераиразвертыватьиавтономныйразвертыватьпохож,В основном из-за несогласованности конфигурации,Если вам нужно знать об установке и развертывании автономной машины ClickHouse,Вы можете прочитать эту статью,ClickHouse(03)Как установить и развернуть ClickHouse

Процесс развертывания кластера ClickHouse примерно следующий:

  1. Экологическая подготовка
  2. Установите автономную версию ClickHouse на каждый компьютер.
  3. Конфигурация config.xml
  4. Конфигурация Zookeeper
  5. Войти в тест ClickHouse

Экологическая подготовка

  1. Загрузите установочный пакет

в соответствии сClickHouse(03)Как установить и развернуть ClickHouseВы можете скачать введение в

  1. Установите полное доменное имя, которое является именем хоста, команда выглядит следующим образом:
Язык кода:shell
копировать
# hostnamectl --static set-hostname ck1.com
  1. Настроить файл хостов
Язык кода:shell
копировать
# cat /etc/hosts
……
10.37.129.10 ck1
10.37.129.11 ck2

Установите автономную версию ClickHouse на каждый компьютер.

в соответствии сClickHouse(03)Как установить и развернуть ClickHouseПросто установите его, как описано в

Конфигурация config.xml

Для настройки кластера вам необходимо /etc/clickhouse-server/config.xml <remote_servers> Добавьте соответствующую информацию о кластере под меткой. Или настройте его в /etc/metrika.xml, просто выберите один из двух.

Такая конфигурация должна быть записана в файл config.xml или metrika.xml каждой машины.

Если настроено в config.xml

Язык кода:html
копировать
# Добавьте metrika.xml в файл глобальной конфигурации config.xml.
<include_from>/etc/clickhouse-server/metrika.xml</include_from>

#Обратитесь к определению конфигурации Zookeeper.
<zookeeper incl="zookeeper-servers" optional="true" />

<remote_servers>
        <test_cluster1>
            <shard>
                <replica>
                    <host>ck1</host>
                    <port>9000</port>
                </replica>
            </shard>
            <shard>
                <replica>
                    <host>ck2</host>
                    <port>9000</port>
                </replica>
            </shard>
        </test_cluster1>
</remote_servers>

Если настроено в metrika.xml

Язык кода:html
копировать
<yandex>
    <clickhouse_remote_servers>
        <!--Имя пользовательского кластера-->
        <test_cluster1>
            <!--Определите количество шардов для кластера,2индивидуальныйshardОписание этикетки2индивидуальныйузел-->
            <shard>
                <!--Определить количество реплик для шарда,Здесь только копии1индивидуальный-->
                <replica>
                    <host>ck1</host>
                    <port>9000</port>
                </replica>
            </shard>
            <shard>
                <replica>
                    <host>ck2</host>
                    <port>9000</port>
                </replica>
            </shard>
        </test_cluster1>
    </clickhouse_remote_servers>

</yandex>

Конфигурация Zookeeper

Zookeeper в основном используется в кликхаусе для синхронизации данных таблицы реплик (движок ReplicationMergeTree) и работы распределенных таблиц (Distributed).

Создайте файл конфигурации metrika.xml в каталоге /etc/clickhouse-server (если он уже существует, просто запишите его непосредственно в него) и добавьте следующее содержимое:

Язык кода:html
копировать
# Что-то вроде этого, хозяин и Заполните свой собственный порт
<zookeeper-servers>
    <node index="1">
        <host>10.10.1.20</host>
        <port>2181</port>
    </node>
    <node index="2">
        <host>10.10.1.21</host>
        <port>2181</port>
    </node>
    <node index="3">
        <host>10.10.1.22</host>
        <port>2181</port>
    </node>
</zookeeper-servers>

Войти в тест ClickHouse

После завершения настройки нет необходимости перезапускать службу Clickhouse, Clickhouse выполнит горячую загрузку этих конфигураций. Мы можем зайти во все кликхаусы по отдельности и просмотреть соответствующую информацию о кластере, к которому принадлежит текущий узел, через select * from system.clusters;:

Войдите в клиент ClickHouse

Язык кода:shell
копировать
clickhouse-client --host="127.0.0.1" --port="9000" --user="****" --password="****"

Информация о кластере, к которому принадлежит текущий узел

Язык кода:sql
копировать
select * from system.clusters where cluster = 'test_cluster1';

Результаты запроса

Язык кода:shell
копировать
SELECT *
FROM system.clusters
WHERE cluster = 'test_cluster1'

Query id: eb2064de-92f3-41b0-ac74-6b025d5082a1

┌─cluster──────┬─shard_num─┬─shard_weight─┬─replica_num─┬─host_name─────┬─host_address──┬─port─┬─is_local─┬─user────┬─default_database─┬─errors_count─┬─slowdowns_count─┬─estimated_recovery_time─┐
│ test_cluster1 │         1 │            1 │           1 │ ck1 │ 10.37.129.10 │ 9000 │        0 │ default │                  │            0 │               0 │                       0 │
│ test_cluster1 │         2 │            1 │           1 │ ck2 │ 10.37.129.11 │ 9000 │        1 │ default │                  │            0 │               0 │                       0 │
└──────────────┴───────────┴──────────────┴─────────────┴───────────────┴───────────────┴──────┴──────────┴─────────┴──────────────────┴──────────────┴─────────────────┴─────────────────────────┘

3 rows in set. Elapsed: 0.002 sec. 

На этом этапе развертывание кластера Clickhouse 2shard1replica завершено.

Обратите внимание, что кластер Clickhouse не является структурой «главный-подчиненный», и каждый узел независим друг от друга. Поэтому, в отличие от кластеров HDFS и YARN, мы можем гибко настраивать кластер в соответствии с конфигурацией и даже назначать узел нескольким кластерам одновременно.

Обмен данными

Классический обмен документами ClickHouse на китайском языке

Справочная статья

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose