yandex
Калькулятор ценТарифыАкцииДокументацияО насКарьера в Cloud.ruНовостиЮридические документыКонтактыРешенияРеферальная программаКейсыПартнерство с Cloud.ruБезопасностьEvolutionAdvancedEvolution StackОблако VMwareВ чем отличия платформ?БлогОбучение и сертификацияМероприятияИсследования Cloud.ruЛичный кабинетВойтиЗарегистрироватьсяОблако для мобильных и веб‑приложенийСайт в облакеАналитика данных в облакеХранение данных в облакеАналитика данных в облакеИнфраструктура для 1С в облакеМиграция IT‑инфраструктуры в облако3D-моделирование и рендерингРазработка и тестирование в облакеEvolution ComputeEvolution Managed KubernetesEvolution Object StorageEvolution Managed PostgreSQL®Evolution Bare MetalEvolution SSH KeysEvolution ImageEvolution DNSEvolution VPCEvolution Load BalancerEvolution Magic RouterEvolution DiskEvolution Container AppsEvolution Artifact RegistryEvolution Managed ArenadataDBEvolution Managed TrinoEvolution Managed SparkEvolution ML InferenceEvolution Distributed TrainEvolution ML FinetuningEvolution NotebooksEvolution TagsEvolution Task HistoryCurator Anti-DDoSCurator Anti‑DDoS+WAFUserGate: виртуальный NGFWStormWall: Anti-DDoSCloud MonitoringCloud LoggingАренда GPUDirect ConnectCDNCloud AdvisorCross-platform connectionAdvanced Object Storage ServiceAdvanced Elastic Cloud ServerAdvanced Relational Database Service for PostgreSQLAdvanced Image Management ServiceAdvanced Auto ScalingAdvanced Enterprise RouterAdvanced Cloud Backup and RecoveryAdvanced Data Warehouse ServiceAdvanced Elastic Volume ServiceAdvanced Cloud Container EngineAdvanced FunctionGraphAdvanced Container Guard ServiceAdvanced Software Repository for ContainerAdvanced Document Database Service with MongoDBAdvanced Relational Database Service for MySQLAdvanced Relational Database Service for SQL ServerAdvanced Server Migration ServiceAdvanced Data Replication ServiceAdvanced API GatewayAdvanced CodeArtsAdvanced Distributed Message Service for KafkaAdvanced Distributed Message Service for RabbitMQAdvanced DataArts InsightAdvanced CloudTableAdvanced MapReduce ServiceAdvanced Cloud Trace ServiceAdvanced Application Performance ManagementAdvanced Identity and Access ManagementAdvanced Enterprise Project Management ServiceVMware: виртуальный ЦОД с GPUVMware: виртуальный ЦОДУдаленные рабочие столы (VDI)VMware: резервное копирование виртуальных машинVMware: резервный ЦОДVMware: резервное копирование в облакоVMware: миграция виртуальных машин
Связаться с нами

Курс Model Monitoring

Курс о наблюдаемости ML-модели и serving-сервиса в продакшене: метриках инфраструктуры, качества данных и предсказаний, drift, алертах и действиях при деградации
hero_img

Для кого
Что узнаете
Как проходит обучение
Автор курса
Отвечаем на вопросы

Уровень подготовки

Для прохождения курса потребуется понимание жизненного цикла ML-модели в продакшене

Бесплатный доступ

Полный комплект учебных материалов курса без скрытых платежей и ограничений

Удобный график

К курсам можно приступить в любой момент и проходить в комфортном для себя темпе

Практический результат

Сможете подготовить monitoring plan, набор алертов и runbook для типовых инцидентов

Кому подойдет курс

ML-инженерам

Научатся связывать метрики сервиса, данных и модели и отличать drift от деградации качества

SRE и platform-инженерам

Смогут проектировать dashboards, алерты, ownership и диагностику продакшен-инцидентов

Дата-сайентистам и аналитикам

Разберутся в delayed labels, proxy metrics, анализе срезов и критериях переобучения

Что вы узнаете на курсе

Что нужно мониторить в ML-системе

Разделите метрики сервиса, качества и схемы данных, признаков, распределения предсказаний и качества модели

Чем drift отличается от деградации

Поймете различия data drift и concept drift и почему изменение распределения не доказывает падение качества

Как оценивать качество при задержанных метках

Выберете proxy metrics, контрольные выборки и периодический расчет метрик после получения эталонных меток

Как настроить алерты и реагирование

Зададите thresholds, ownership и runbook, разберете shadow и canary как способы проверки новой версии

Как проходит обучение

Пройти курс

Курс доступен сразу после регистрации на платформе LMS. Все уроки и прогресс обучения отражаются в личном кабинете

Автор курса

Курсы Cloud.ru ML System Design

Линейка из 11 курсов о проектировании и разработке ML систем, которые помогут освоить методы создания эффективных и масштабируемых решений в облаке

Курсы Cloud.ru ML System Design

Отвечаем на вопросы

Регистрация на обучение

*
*
*
*
+7
*
*