Высокий CPU и нехватка памяти требуют разных проверок. Один снимок показывает состояние сейчас, а несколько наблюдений помогают увидеть рост. До перезапуска сохрани факты: PID, команду, ресурс и время.
Посмотри на систему целиком
top показывает процессы и меняющиеся показатели системы. В free -m смотри не только на free, но и на available: часть памяти занята кешем, который система может освободить. Низкое free само по себе не означает аварию.
uptime
free -m
topLoad average не равен проценту CPU: в Linux он включает и некоторые ожидающие задачи. Сопоставляй его с числом CPU и другими показателями.
Найди конкретный процесс
ps делает снимок. Сортировка по %cpu или %mem выводит кандидатов наверх. RSS — резидентная память в КиБ; %CPU в ps отражает среднее за время жизни процесса и может отличаться от текущего значения в top.
ps -eo pid,ppid,user,%cpu,%mem,rss,args --sort=-%cpu | head
ps -eo pid,ppid,user,%cpu,%mem,rss,args --sort=-rss | headPID PPID USER %CPU %MEM RSS COMMAND
842 1 app 96.0 8.4 172000 python worker.pyИмя процесса и родительский PID помогают понять, кто его запустил. Проценты и числа здесь иллюстративные.
Проверь последствия
Если приложение исчезло, проверь журнал ядра на OOM. Если процесс жив, но постоянно загружает CPU, исследуй его задачу и последние изменения. Самый прожорливый процесс может выполнять полезную работу: решение зависит от симптома пользователя.
sudo journalctl -k -n 100 --no-pager | grep -i -E 'oom|killed process'После исправления повтори запрос пользователя и наблюдение за ресурсами. Одного падения графика недостаточно.
Вернись к настройке, которая создаёт нагрузку
В CPU-кейсе число воркеров, интенсивность работы или задержка цикла влияют на нагрузку по-разному. При OOM проверь, ограничено ли накопление работы, какой процесс убит и кто его запускает снова. Один kill уменьшает график, но не меняет параметр, который создаёт проблему.
Сравни несколько снимков до и после одного изменения. Сохрани возможность обработать настоящий запрос: отключённое приложение с нулевым CPU не является восстановленным приложением.
ps -eo pid,ppid,%cpu,rss,args --sort=-rss | head -n 12От симптома к проверке
| Наблюдение | Следующая проверка | Как читать результат |
|---|---|---|
| Высокий CPU, процесс жив | top и ps по CPU | Сопоставь горячий процесс с количеством и поведением воркеров. |
| Killed process / OOM | journalctl -k и RSS до отказа | Подтверди давление памяти и конкретную жертву, а не только новый PID. |
| RSS растёт при той же нагрузке | Несколько снимков и лимит очереди | Проверь накопление работы или утечку; один снимок не показывает тренд. |
Типовые ошибки
- Считать любой низкий free доказательством OOM.
- Перезапустить бесконечно растущий процесс и считать падение RSS решением.
- Остановить полезный API ради нулевого CPU.
Как доказать восстановление
- Сравни несколько CPU/RSS-снимков на сопоставимой нагрузке.
- Проверь успешный бизнес-запрос, а не только статус процесса.
- Убедись, что новые OOM-события не появляются.
- Проверь сохранение исправленной настройки после штатного перезапуска.
МИНИ-ИНЦИДЕНТ
Сервис ожил после kill. Инцидент закрыт?
После остановки тяжёлого процесса API вернулся. Через минуту новый PID снова растит RSS при том же числе запросов. Что нужно выяснить до следующего restart?
12:00 PID 410 RSS 180 MiB
12:01 PID 410 RSS 320 MiB
12:02 PID 410 RSS 470 MiBРазобрать ход диагностики
Проверь, кто запускает процесс и какая настройка ограничивает накопление работы. Стабильное число запросов при росте RSS требует исследования удержания памяти; повторный restart лишь сбросит наблюдение. После правки нужны стабильная память и работающий API.
ПРАКТИКУМ
Практикум: объясни данные и выбери действие
Сравни три снимка одного сервиса. Нельзя заключить, что любой большой RSS является утечкой.
t=0s PID=711 RSS=120MiB available=600MiB
t=30s PID=711 RSS=240MiB available=470MiB
t=60s PID=711 RSS=360MiB available=350MiBКакое изменение видно и чего пока не известно?
Сверить рассуждение
RSS одного PID растёт, доступная память уменьшается. Пока не известны интенсивность нагрузки, ожидаемый кеш и плато потребления. Для вывода нужна сопоставимая серия, а не ярлык «утечка».
Что добавит журнал ядра к этим данным?
Сверить рассуждение
Он может подтвердить OOM и выбранный для завершения процесс. Отсутствие OOM не отменяет роста памяти: это другой порог наблюдения и другое событие.
Какая проверка нужна после ограничения параллелизма?
Сверить рассуждение
Повтори схожую нагрузку, сравни число процессов и RSS во времени, затем пользовательский ответ. Одно уменьшение памяти после restart показывает сброс состояния, но не устойчивость настройки.
ПРОВЕРЬ СЕБЯ
free показывает мало свободной памяти, но available много. Серверу точно не хватает RAM?
Показать объяснение
Нет. Память может использоваться кешем. Сопоставь available, сообщения OOM, расход конкретных процессов и поведение приложения.
Пока без комментариев. Поделись первым впечатлением или задай вопрос по теме.