Обучение · 30 темПонимай причины. Решай увереннее.Разбор команд, типовые ошибки и подготовка к твоим кейсам Подготовиться к кейсу

Практика дежурств в безопасном окружении

Прод упал.
Твоя смена.

Тренажёр инцидентов для SRE и DevOps

Чини сломанные серверы в настоящей консоли Linux: алерт, поиск причины, починка — и разбор, как это делают опытные SRE.

Первый кейс «Магазин недоступен» — самостоятельная практика на 3–5 минут: выясни причину недоступности и верни магазин в строй.

  • 24живых кейсов
  • 0установок
  • Linuxв браузере
  • Freeбез оплаты

История Лидеры Войти Регистрация

INCIDENT / SHOP-API LIVE
Error rate38.4%
p95 latency2.41s
Disk free0 MB
ALERT shop-api: 502 · диск заполнен на 100%
$ df -h /var/lib/shop
tmpfs       512M  512M     0 100% /var/lib/shop
$ sudo du -sh /var/lib/shop/* | sort -h
494M  /var/lib/shop/export-nightly.csv
$ sudo rm /var/lib/shop/export-nightly.csv
$ sudo systemctl restart shop-api
$ curl -sI localhost:8080/health
HTTP/1.1 200 OK
RESOLVED закрыт за 3:41 · +100 очков

Как это устроено

  1. ALERT

    Приходит инцидент

    Получаешь симптомы и контекст последних изменений.

  2. $ _

    Разбираешься в консоли

    Исследуешь настоящий Linux прямо в браузере.

  3. RESOLVED

    Проверка и разбор

    Восстанавливаешь сервис и получаешь разбор решения.

Библиотека · 24 инцидентов

Не теория. Сломанный прод.

Каждый кейс — отдельный Linux-сервер, реальные симптомы и автоматическая проверка починки.

Фильтры: уровень и теги
Уровень
Теги

Трек 1 Основы

0/14 пройдено
LOW Кейс 0 · 5 мин

Магазин недоступен

После обновления покупатели не могут открыть магазин: вместо страницы — 502 Bad Gateway. Сервер доступен, nginx работает, но приложение shop-api не отвечает. Выясни причину и восстанови магазин — от первой проверки до успешного запроса покупателя.

практикаlinuxsystemd
LOW Кейс 1 · 15 мин

Приложение не запускается

Теперь shop-api не запускается. В журнале есть причина: найди её, освободи место для приложения и верни магазин в строй. Одна поломка — один понятный путь диагностики.

linuxлогидиск
CRITICAL Кейс 2 · 30 мин

База данных не отвечает

PostgreSQL упал после деплоя. Пользователи получают 500 ошибки.

postgresqldatabase
HIGH Кейс 3 · 25 мин

Высокая нагрузка на CPU

Серверы API потребляют 95% CPU. Latency выросла в 10 раз.

linuxperformance
CRITICAL Кейс 4 · 20 мин

OOM Killer убивает процессы

Память закончилась, система убивает критичные сервисы.

memoryoom
MEDIUM Кейс 5 · 15 мин

Диск заполнен на 100%

Раздел /var/log заполнен логами. Сервис не может записывать новые данные.

disklogs
HIGH Кейс 6 · 35 мин

Kubernetes поды в CrashLoopBackOff

После обновления конфигурации все поды падают в цикле.

kubernetesconfig
CRITICAL Кейс 7 · 40 мин

SSL сертификат истёк

Пользователи не могут зайти на сайт, браузеры блокируют соединение.

sslnginx
HIGH Кейс 8 · 20 мин

Сайт отвечает 502 Bad Gateway

После релиза приложения nginx отдаёт покупателям 502, хотя сам работает.

nginxsystemd
MEDIUM Кейс 9 · 20 мин

Места нет, а df показывает свободное

API пишет «No space left on device», хотя на разделе свободно три четверти места.

diskinode
HIGH Кейс 10 · 25 мин

Платёжный шлюз недоступен

Сервис оплаты не может достучаться до шлюза по имени, хотя шлюз работает.

dnsnetwork
LOW Кейс 11 · 15 мин

Ночной бэкап не создаётся

После изменения окружения перестали появляться резервные копии магазина. Восстанови автоматическое резервное копирование и проверь данные.

linuxcronbackup
MEDIUM Кейс 12 · 20 мин

HTTP 200, но белый экран

После обновления сайт показывает пустую страницу, хотя мониторинг видит 200 OK. Восстанови загрузку интерфейса и данных.

nginxhttpfrontend
LOW Новый Кейс 13 · 20 мин

Маленькие файлы загружаются, большие — нет

Небольшой файл товара сохраняется, а обычная фотография получает 413. Свободное место есть, media-api работает. Найди ограничение в цепочке и восстанови загрузки до 4 МиБ.

nginxhttpuploads

Трек 2 Продвинутые

0/10 пройдено
CRITICAL Дежурство недели Кейс 1 · 15 мин

API исчерпал подключения к PostgreSQL

Долгие подключения перегружают PostgreSQL; исправление таймаута выявляет retry storm.

postgresqlcascading-failuresre
HIGH Кейс 2 · 25 мин

Too many open files

Шлюз уведомлений перестал принимать подключения, в журнале — Too many open files.

linuxlimitssystemd
HIGH Кейс 3 · 25 мин

Сбитое время на сервере

Пользователи не могут войти — сервис считает токены «ещё не действительными».

timentplinux
MEDIUM Кейс 4 · 20 мин

Сайт работает через раз

После обновления магазина часть запросов завершается ошибками. Найди причину нестабильной работы и восстанови все экземпляры приложения.

nginxload-balancingbackend
MEDIUM Кейс 5 · 25 мин

Микросервисы перестали доверять друг другу

Внешний API работает, но запросы к внутреннему сервису завершаются 401. Восстанови доверенное взаимодействие сервисов.

apimicroservicesauthentication
HIGH Кейс 6 · 25 мин

Kubernetes Service не видит поды

После обновления поды запущены, но приложение через Service недоступно. Учебная симуляция Kubernetes с настоящими HTTP-процессами и редактируемыми манифестами.

kubernetesnetworkingсимуляция
HIGH Новый Кейс 7 · 30 мин

API завис, но PostgreSQL работает

Магазин открывается, но оформление заказа заканчивается таймаутом. База принимает подключения и почти не использует CPU. Найди, кто удерживает рабочие запросы, и верни оформление заказов.

postgresqllockstransactions
HIGH Новый Кейс 8 · 30 мин

Заказы принимаются, обработка остановилась

API возвращает 202, RabbitMQ доступен, обработчик запущен. Но новые заказы не исполняются. Проследи доставку сообщения до подтверждения обработки и разбери очередь без потери заказов.

rabbitmqqueuesdelivery
HIGH Новый Кейс 9 · 30 мин

Кеш перепутал покупателей

После ускорения магазина покупатели видят чужие корзины или получают отказ после входа. Backend различает пользователей. Найди, где персональные ответы стали общими, и восстанови изоляцию сессий.

nginxcachesessions
HIGH Новый Кейс 10 · 30 мин

Авария есть, оповещение не приходит

Тестовая проверка оформления заказа падает, но дежурный не получает сообщение. Пройди цепочку Prometheus → Alertmanager → пейджер и восстанови настоящую доставку оповещений.

prometheusalertmanagerobservability

Частые вопросы

Это бесплатно?

Да, все кейсы бесплатные. Кейс 0 проходится без регистрации, для остальных нужен аккаунт — только имя и пароль, без почты и телефона.

Нужно что-то устанавливать?

Нет. Консоль открывается прямо в браузере, на твой компьютер ничего не ставится.

Это настоящий Linux?

Да. Каждому игроку поднимается отдельный изолированный сервер с Linux, где сломан сервис. Запускай любые команды: ни твой компьютер, ни других игроков это не затронет.

Что, если застряну?

У каждого кейса три подсказки: направление → где искать → конкретная команда. Они снижают очки, но решение всё равно засчитается. Окружение можно сбросить и начать заново.

Можно с телефона?

Кейс 0 — да. Остальные удобнее проходить с компьютера: команд много, а печатать их с телефонной клавиатуры неудобно.

Для кого это?

Для начинающих SRE, DevOps-инженеров и системных администраторов, дежурных и всех, кто готовится к первому дежурству или собеседованию. Начать можно с нуля: кейс 0 знакомит с самостоятельной диагностикой простого инцидента.