Что делать, если у узла статус Unavailable?

1. Проверьте нагрузку на узел

1. Войдите в консоль CCE.

2. Нажмите на название кластера.

3. В левом меню выберите Nodes.

4. В строке недоступного узла нажмите Monitor.

5. Чтобы перейти к детальной статистике в сервисе AOM, нажмите View More. Высокие значения использования процессора или памяти приводят к большой задержке сети или к нехватке памяти (OOM), из-за чего узел может перейти в статус «Unavailable».

• Перенесите рабочую нагрузку на другие узлы и установите верхний предел использования ресурсов для рабочих нагрузок.

• Установите квоты на использование CPU и RAM для каждого контейнера.

• Очистите данные на узлах кластера.

• Добавьте узлы в кластер.

• Перезапустите узел в консоли ECS.

• Добавьте отдельные узлы для развертывания требовательных к памяти контейнеров.

• Сбросьте узел.

2. Проверьте статус ECS

1. В консоли CCE перейдите в раздел Resource Management → Clusters и проверьте статус кластера:

   • Если кластер недоступен (статус «Unavailable»), свяжитесь службой поддержки клиентов для обнаружения ошибки.

   • Если сам кластер доступен (статус «Available»), но недоступна часть узлов, перейдите к следующему пункту.

2. В консоли управления выберите Homepage → Computing → Elastic Cloud Server и проверьте статус сервера ECS:

   • Если статус ECS «Deleted», пересоздайте ECS-узел. Для этого в консоли CCE перейдите в раздел Resource Management → Nodes, удалите соответствующий ECS-узел и создайте новый.

   • Если статус ECS «Stopped» или «Frozen», запустите ECS. Для этого нажмите More → Start. Как правило, запуск занимает несколько минут.

   • Если статус ECS «Faulty», перезагрузите ECS Для этого в строке сервера нажмите More → Restart. Если перезагрузка не помогла, свяжитесь со службой поддержки клиентов для обнаружения ошибки.

   • Если статус ECS «Running», авторизуйтесь в виртуальной машине ECS. Для этого в строке нужного сервера нажмите Remote Login и следуйте инструкциям из следующего пункта.

3. Авторизуйтесь в виртуальной машине ECS для обнаружения ошибки.

   • Чтобы подключиться к виртуальной машине ECS, на которой расположен неработающий узел, в строке нужного сервера нажмите Remote Login.

   • Чтобы поверить состояние PaaS-компонентов, введите команду:

     su paas -c '/var/paas/monit/bin/monit summary'
     
     

   Если не удается выполнить команду, свяжитесь со службой поддержки клиентов.

   При успешном выполнении команды отобразится статус каждого компонента:

   

   Если у одного из компонентов статус отличается от «Running», перезапустите соответствующий сервис.

   Например, у компонента canal нерабочий статус:

   

   Чтобы перезапустить компонент, введите команду:

   su paas -c '/var/paas/monit/bin/monit restart canal'
   
   

   После перезагрузки введите команду для запроса статуса компонента:

   su paas -c '/var/paas/monit/bin/monit summary'
   
   

   При сохранении неисправности свяжитесь со службой поддержки клиентов.

3. Проверьте уровень загрузки узла

1. Войдите в консоль управления Advanced.

2. Выберите Homepage → Computing → Elastic Cloud Server.

3. Нажмите на название виртуальной машины, которая соответствует узлу, и перейдите во вкладку Monitoring.

4. Изучите информацию об узле. Если узел перегружен, рекомендуется уменьшить рабочую нагрузку.

4. Проверьте группу безопасности (Security Group)

1. Войдите в консоль управления Advanced.

2. Выберите Homepage → Computing → Elastic Cloud Server.

3. Нажмите на название виртуальной машины, которая соответствует узлу, и перейдите на вкладку Security Group.

4. Раскройте информацию о группе безопасности и проверьте, что правила группы безопасности настроены верно.

5. Проверьте диск

6. Проверьте работоспособность внутренних компонентов

1. Чтобы авторизоваться в виртуальной машине ECS, на которой расположен неработающий узел, в строке нужного сервера нажмите Remote Login.

2. Чтобы поверить состояние PaaS-компонентов, введите команду:

   su paas -c '/var/paas/monit/bin/monit summary'
   
   

   Если не удается выполнить команду, свяжитесь со службой поддержки клиентов.

   При успешном выполнении команды отобразится статус каждого компонента:

   

3. Если у одного из компонентов статус отличается от «Running», перезапустите соответствующий сервис. Например, у компонента canal нерабочий статус:

   

   Перезапустите компонент:

   su paas -c '/var/paas/monit/bin/monit restart canal'
   
   

4. После перезагрузки введите команду для запроса статуса компонента:

   su paas -c '/var/paas/monit/bin/monit summary'
   
   

   Статус каждого компонента после перезагрузки должен быть «Running».

5. Если не удалось перезапустить компонент, используйте команду:

   ps -ef \| grep monitrc
   
   

   • Если присутствует процесс monitrc, удалите его:

     kill -s 9 \`ps -ef \| grep monitrc \| grep -v grep \| awk '{print$2}'\`
     
     

     Процесс monitrc будет автоматически перезапущен после его удаления.

   • Если процесс monitrc не существует или не перезапускается после его удаления, свяжитесь со службой поддержки клиентов.