Облачная платформаAdvanced

Запуск задачи миграции Logstash

Эта статья полезна?
Язык статьи: Русский
Показать оригинал
Страница переведена автоматически и может содержать неточности. Рекомендуем сверяться с английской версией.

Сценарий

Чтобы начать задачу миграции с кластером Logstash, выполните следующие действия:

  1. Проверьте сетевую связь между источником данных, назначением и кластером Logstash. Для получения подробностей см. Тестирование соединения.
  2. Запустите задачу миграции Logstash, начав файл конфигурации.
  3. Отслеживайте задачу миграции через метрики, записи операций и журналы выполнения. Для получения подробностей см. Monitoring Migration Tasks.

Ограничения

  • Может быть до 50 Работает файлы конфигурации в списке конвейера кластера Logstash.
  • Файлы конфигурации, которые используют logstash stdin плагин не может использовать Hot Start опцию.
  • Если при hot-starting файла конфигурации происходит сбой и процесс Logstash завершается неожиданно, кластер попытается перезапустить оригинальный процесс Logstash. Будьте осторожны при использовании Hot Start опцию.

Testing Connectivity

Прежде чем использовать кластер Logstash для миграции данных, проверьте сетевую связность между источником и назначением данных и кластером Logstash.

  1. Перейдите к Центр конфигурации страница.
    1. Войдите в консоль управления CSS.
    2. В левой области навигации выберите Кластеры > Logstash.
    3. В списке кластеров кликните название целевого кластера. Отображается страница информации о кластере.
    4. Нажмите Центр конфигурации вкладка.
  2. На Центр конфигурации странице, нажмите Test Connectivity.
  3. В Test Connectivity в диалоговом окне, введите IP address и номер порта источника данных и назначения, и нажмите Test.

    Вы можете протестировать максимум 10 IP-адресов за один раз. Вы можете нажать Добавить чтобы добавить больше IP-адресов и нажать Тест внизу, чтобы проверить подключение к нескольким IP-адресам одновременно.

    Если Доступно отображается, сеть подключена. Если сеть отключена, настройте маршруты для кластера Logstash, чтобы соединить кластеры. Для получения деталей см. .

Запуск конфигурационного файла

Если нет Выполняется задача в списке конвейеров, запустите задачу миграции Logstash, запустив конфигурационный файл. Вы можете выбрать несколько конфигурационных файлов, чтобы запустить их все одновременно. Максимум 50 конфигурационных файлов можно выбрать за раз.

  1. В списке конфигурационных файлов выберите файлы, которые хотите запустить, и нажмите Запустить в левом верхнем углу.
  2. В Start Logstash диалоговое окно, выберите Keepalive при необходимости.

    Когда Keepalive включен, процесс‑демон будет настроен на каждом узле. Если сервис Logstash выйдет из строя, процесс‑демон попытается исправить ошибку и перезапустить сервис. Рекомендуется включать Keepalive для сервисов, работающих длительно. Не включайте его для сервисов, работающих только коротко, иначе задачи миграции могут потерпеть неудачу из‑за отсутствия исходных данных.

  3. Нажмите OK чтобы запустить конфигурационный файл и, соответственно, задачу миграции Logstash.

    Вы можете просмотреть запущенный конфигурационный файл в списке Пайплайнов.

Hot Starting a Configuration File

Если есть Running задачи в списке конвейеров, запустите задачу миграции Logstash, горячим запуском файла конфигурации. Только один файл конфигурации может быть горячо запущен одновременно. То есть только один конвейер может быть добавлен одновременно.

  1. В списке файлов конфигурации выберите файл конфигурации и нажмите Горячий запуск в верхнем левом углу.
  2. В Горячий запуск конфигурации Logstash в диалоговом окне параметр Keepalived по умолчанию синхронен с другими задачами в списке конвейеров и не может быть изменён.
  3. Нажмите OK чтобы горячо запустить файл конфигурации и, соответственно, задачу миграции Logstash.

    Вы можете просматривать горячо запущенный файл конфигурации в списке конвейеров.

Мониторинг задач миграции

После запуска файла конфигурации в списке конвейеров генерируется задача, где вы можете мониторить задачу.

  • В списке конвейеров нажмите Мониторинг метрик в Операция столбец, чтобы перейти в консоль Cloud Eye и просмотреть информацию о мониторинге.

    Когда События данные конвейера меняются динамически, данные мониторинга соответствующим образом меняются. Когда задача конвейера запускается или останавливается, или События данные стабильны, данные мониторинга остаются неизменными.

    Для получения подробной информации о поддерживаемых метриках мониторинга см. Метрики мониторинга конвейера Logstash. Для сведения о том, как настроить сигналы мониторинга, см. Использование Cloud Eye для мониторинга кластеров Logstash.

  • Вы также можете нажать Просмотр записи операции или Просмотр журнала выполнения над списком пайплайна, чтобы просмотреть записи операций файла конфигурации или журналы выполнения задачи миграции.