tocdepth

2

Управляемый кластер ClickHouse

Решение для создания управляемого кластера ClickHouse в облаке Advanced реализуется с использованием платформы корпоративного уровня MRS для хранения, обработки и анализа больших данных.

Данное решение позволяет реализовать в облаке Advanced систему управления базами данных (СУБД) для онлайн-обработки аналитических запросов (OLAP), которая обеспечивает следующие возможности:

  • Управляемый кластер ClickHouse в несколько кликов.

  • Простое масштабирование в зависимости от рабочей нагрузки.

  • Отказоустойчивость «из коробки».

  • Открытое API и стандартные коннекторы для интеграции со сторонними сервисами.

  • Управление резервным копированием и обновлениями из интерфейса.

Построение базы данных ClickHouse в облаке Advanced имеет следующие преимущества и риски:

Преимущества решения

Риски

  • Быстрое создание и изменение кластеров ClickHouse.

  • Резервное копирование «из коробки».

  • Гибкость в организации интеграции со сторонними сервисами.

Программы и файлы с данными могут быть использованы, если они будут предварительно загружены в файловую систему хранения: OBS.

Общая схема

../../_images/schm__typical-solutions_adv_on-pagers-tools_mrs-clickhouse.svg

Описание решения

Предварительные требования:
  • В тенанте должны быть созданы как минимум одна VPC и одна подсеть (Subnet).

  • В тенанте должен быть создан бакет в сервисе OBS.

  • Настроен сервис очередей сообщений DMS for Kafka, для случая загрузки потоковых данных.

  • Запись всех операций, в том числе операций с ресурсами MRS, и результатов выполнения заданий выполняется сервисом CTS.

Реализация

Список последовательных действий при настройке решения:

  1. Создание VPC.

  2. Создание подсетей (Subnet).

  3. Создание бакета в сервисе OBS.

  4. Создание ключей Access Key/Secret Key для IAM пользователя с правами Администратора.

  5. Создание целевого сервера CTS для записи всех операций и результатов выполнения заданий.

  6. Загрузка данных в бакет OBS.

  7. Создание в сервисе MRS кластера ClickHouse с предустановленными настройками.

  8. Синхронизация IAM-пользователей с сервисом MRS для управления кластером через консоль.

  9. Запуск кластера ClickHouse в облаке Advanced.

Запустили Evolution free tier
для Dev & Test
Получить