Действия с кластером Kafka

Обновление кластера

Если версия релиза кластера Kafka 1.1.0, обновите его до версии 1.2.0.

Обновить кластер Kafka можно, если соблюдаются условия:

• статус кластера Включен;
• статус  заказа В порядке.

Чтобы обновить кластер Kafka:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, который нужно обновить, нажмите на кнопку и выберите пункт Обновление кластера до версии 1.2.0.
3. Ознакомьтесь с примечанием и установите флажок Я прочитал предупреждение выше и подтверждаю выполнение действия.
4. Нажмите на кнопку Подтвердить.
5. Синхронизируйте информацию кластера Kafka.

Выключение кластера

Выключите кластер, если не планируете использовать его какое-то время. В этом случае тарифицируются только подключенные публичные IP-адреса и диски.

Выключить кластер можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы выключить кластер Kafka:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, который нужно выключить, нажмите на кнопку  и выберите пункт Выключение кластера Kafka.
3. Нажмите на кнопку Подтвердить.

Статус кластера и серверов с Включено изменится на Выключено.

Включение кластера

Включить кластер можно, если соблюдаются условия:

• статус кластера Выключен;
• статус заказа В порядке.

Чтобы включить кластер Kafka:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, который нужно включить, нажмите на кнопку и выберите пункт Включение кластера Kafka.
3. Нажмите на кнопку  Подтвердить 

Статус кластера и серверов с Выключено изменится на Включено.

Изменение вычислительных ресурсов

Вычислительные ресурсы изменяются на всех брокерах Kafka.

Изменить вычислительные ресурсы можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы изменить вычислительные ресурсы кластера:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, в котором нужно изменить вычислительные ресурсы, нажмите на кнопку и выберите пункт Изменение вычислительных ресурсов.
3. Заполните поля: Вычислительные ресурсы: 
   • Общие — для публичного облака;
   • Персональные — для частного облака.

   Семейство — семейство процессоров:

   • General-purpose — процессоры с частотой 2.2 GHz с конфигурациями b2, с частотой 2.8 GHz с конфигурациями b5, с частотой 3.0 GHz с конфигурациями b3 и процессоры с частотой 4.05 GHz с конфигурациями b4. Подходит для решения большинства задач, например, выполнения кода для веб-сервисов и приложений, размещения интернет-магазинов, создания тестовых сред;
   • Advanced — процессоры с частотой 3.0 GHz с конфигурациями a1 и процессоры с частотой 2.8 GHz с конфигурациями a5. Подходит для работы высоконагруженных систем, например, CRM и баз данных.

   Серия — серия процессоров. Процессоры отличаются частотой, от которой зависят производительность сервера и скорость обработки данных:

   • Intel Cascade Lake 2.2 GHz — для небольшой нагрузки;
   • Intel Ice lake 2.8 GHz и Intel Cascade Lake 3.0 GHz — подходят для большинства задач;
   • AMD EPYC 9004 series 4.05 GHz — для обеспечения высокой скорости обработки данных. Например, при работе с Microsoft SQL и 1С.

   vCPU, шт. — количество процессоров.

   RAM, ГБ — объём оперативной памяти.

   Выбрана конфигурация — конфигурация сервера определяется автоматически на основании выбранного количества процессоров (vCPU) и объёма оперативной памяти (RAM). Подробнее см. раздел Конфигурации сервера.

4. Ознакомьтесь с примечанием и установите флажок Я прочитал предупреждение выше и подтверждаю выполнение действия.
5. Нажмите на кнопку Подтвердить.

В результате вычислительные ресурсы изменятся на всех брокерах Kafka.

Изменение параметров кластера

Можно указать дополнительные параметры кластера или изменить их, если они были указаны при создании кластера.

Изменить параметры кластера можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы изменить параметры кластера:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с нужным кластером нажмите на кнопку и выберите пункт Изменение параметров кластера.
3. Напишите первую строку #cloud-config и после неё параметры со значениями или загрузите текстовый файл. Например:
4. Ознакомьтесь с примечанием и установите флажок Я прочитал предупреждение выше и подтверждаю выполнение действия.
5. Нажмите на кнопку Подтвердить.

Отключение публичного IP-адреса

Чтобы запретить доступ к кластеру из сети Интернет, отключите публичный IP-адрес. Публичный IP-адрес отключается на всех брокерах Kafka.

Отключить публичный IP-адрес можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы отключить публичный IP-адрес:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, в котором нужно отключить публичный IP-адрес, нажмите на кнопку  и выберите пункт Отключение публичного IP адреса.
3. Ознакомьтесь с примечанием и установите флажок Я прочитал предупреждение выше и подтверждаю выполнение действия.
4. Нажмите на кнопку Подтвердить.

Подключение публичного IP-адреса

Для доступа к кластеру из сети Интернет подключите к нему публичный IP-адрес.

Публичный IP-адрес подключается только к брокерам Kafka и не подключается к хостам ZooKeeper.

Подключить публичный IP-адрес можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы подключить публичный IP-адрес:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, в котором нужно подключить публичный IP-адрес, нажмите на кнопку и выберите пункт Подключение публичного IP адреса.
3. Ознакомьтесь с примечанием и установите флажок Я прочитал предупреждение выше и подтверждаю выполнение действия.
4. Нажмите на кнопку Подтвердить.

В результате публичный IP-адрес подключается на всех брокерах Kafka и отображается на вкладке Общая информация в столбце External socket:

Расширение дополнительного диска

Размер диска увеличивается только на брокерах Kafka и не увеличивается на хостах ZooKeeper.

Увеличить размер дополнительного диска можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы увеличить размер дополнительного диска:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, в котором нужно увеличить размер дополнительного диска, нажмите на кнопку  и выберите пункт Расширение дополнительного диска.

3. В открывшемся окне в поле Новый размер диска * введите новый размер диска в ГБ. Максимальный размер диска — 4096 ГБ.

4. Нажмите на кнопку Подтвердить.

Cинхронизация информации кластера Kafka

Синхронизация информации кластера Kafka применяется для согласованности данных в кластере Kafka и на портале Т1 Облако. Обязательно выполняйте синхронизацию информации после любых изменений в кластере Kafka (например, после создания топика через терминал). В результате данные на портале Т1 Облако обновятся и станут актуальными.

Синхронизировать информацию можно, если соблюдаются условия:

• статус кластера Включен;
• статус заказа В порядке.

Чтобы синхронизировать информацию кластера Kafka:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, информацию о котором нужно синхронизировать, нажмите на кнопку и выберите пункт Синхронизация информации кластера Kafka.
3. Нажмите на кнопку Подтвердить.

Увеличение количества брокеров

Добавить брокеры можно, если соблюдаются условия:

• в кластере заказано 4 или более брокеров;
• статус кластера Включен;
• статус заказа В порядке.

Чтобы добавить брокеры в кластер:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, в котором нужно добавить брокеры, нажмите на кнопку  и выберите пункт Увеличение количества брокеров.
3. В открывшемся окне заполните поле Количество брокеров  *. Чётное количество брокеров необходимо для корректной репликации между ними. Максимальное количество брокеров кластера — 10.
4. Нажмите на кнопку Подтвердить.

Изменение метки

Метка — тег, который присваивается каждому кластеру и помогает ориентироваться в созданных кластерах:

Длина метки — от 3 до 64 символов. 

Чтобы изменить метку:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. Нажмите на строку с кластером, в котором нужно изменить метку.
3. Нажмите на кнопку Редактировать рядом с меткой и введите новую метку.
4. Сохраните новую метку по кнопке Сохранить.

Удаление кластера

Удалить можно только кластер со статусом заказа В порядке.

Чтобы удалить кластер:

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, который нужно удалить, нажмите на кнопку  и выберите пункт Удалить продукт.
3. Введите Идентификатор для подтверждения удаления.
4. Нажмите на кнопку Удалить.

При удалении кластера автоматически удаляются брокеры Kafka и серверы ZooKeeper.

Копирование ID кластера и заказа

Чтобы скопировать ID кластера (ITEM_ID):

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. Нажмите на строку с кластером, ID которого нужно скопировать.
3. На вкладке Общая информация нажмите на кнопку Действия и выберите пункт Скопировать ID. ID сохраняется в буфер обмена вашего устройства.

Чтобы скопировать ID заказа (ORDER_ID):

1. В главном меню портала перейдите в раздел Ресурсы → Приложения → Managed Service for Kafka.
2. В строке с кластером, ID заказа которого нужно скопировать, нажмите на кнопку и выберите пункт Скопировать ID заказа. ID заказа сохраняется в буфер обмена вашего устройства.