Клиентские логи сервиса Managed Kafka содержат детальную техническую информацию о событиях управления кластером. Они позволяют отслеживать ошибки в работе сервисов и приложений, находить узкие места и быстро реагировать на инциденты.
Клиентские логи не содержат информации о пользователе, который совершил действие. Для получения этой информации используйте аудитные логи.
Сервис Managed Kafka передает логи по умолчанию в лог-группу default.
Вы можете выбрать лог-группу при создании кластера.
Логи передаются и хранятся централизованно в сервисе «Клиентское логирование».
Для просмотра логов перейдите в раздел личного кабинета Мониторинг → Логирование → Просмотр логов и выберите лог-группу, указанную при создании кластера.
По умолчанию отображаются логи всех сервисов и ресурсов.
Для точной выборки логов используйте язык фильтрующих выражений. Это позволяет найти записи логов по определенным параметрам и их комбинациям. Например, по тексту сообщения в записи лога, важности лога и метке.
Ниже описаны уровни лога и метки, которые передает сервис Managed Kafka.
Фильтрация по уровням логов позволяет классифицировать логи по важности и срочности реагирования.
В таблице показано соответствие нативных уровней логирования Apache Kafka® уровням сервиса «Клиентское логирование». Уровни TRACE, DEBUG, INFO, WARN и ERROR передаются без изменений. Остальные уровни преобразуются:
Уровень Apache Kafka® | Уровень в логах |
|---|---|
NOTICE | INFO |
WARNING | WARN |
FATAL | ERROR |
Метки передаются в поле labels и позволяют детализировать запрос. Формат обращения к метке в выражении: labels.<label_name>="value".
Для фильтрации записей сервиса Managed Kafka применяются следующие метки.
Название метки | Описание | Значение |
|---|---|---|
product_type | Название сервиса | kafka |
cluster_id | Идентификатор кластера | — |
cluster_name | Название кластера | — |
Примеры запросов к логам для решения частых задач Managed Kafka:
Логи кластера по идентификатору:
labels.product_type="kafka" AND labels.cluster_id="<cluster_id>"
Где <cluster_id> — идентификатор кластера.
Логи кластера по названию:
labels.product_type="kafka" AND labels.cluster_name="<cluster_name>"
Где <cluster_name> — название кластера.
Потенциальные проблемы кластера:
labels.product_type="kafka" AND labels.cluster_id="<cluster_id>" AND level in ["WARN", "ERROR"]
Где <cluster_id> — идентификатор кластера.
На основе логов вы можете настроить уведомление о событиях или отклонениях в работе сервиса. Это позволит оперативно реагировать на инциденты, сбои и ошибки, а также снизить время простоя.
Чтобы настроить уведомления:
Настройте рассылки уведомлений в случае срабатывания правил.