Ошибка записи может остановить базу, логирование или очередь. Начни с файловой системы, куда пишет приложение: свободное место в /home не поможет, если заполнен отдельный раздел /var.
Проверь нужную точку монтирования
df -h показывает занятые блоки в удобных единицах. Передай путь к каталогу данных, чтобы увидеть его файловую систему. Смотри одновременно на Use%, Avail и Mounted on.
df -h /var/lib/shop
df -i /var/lib/shopFilesystem Size Used Avail Use% Mounted on
/dev/vdb 10G 10G 0 100% /var/lib/shopdf -i проверяет inode — метаданные файлов. Множество крошечных файлов может исчерпать inode раньше, чем блоки данных.
Локализуй источник роста
du оценивает место, занятое файлами и каталогами. Ограничь поиск нужным деревом: обход всего сервера создаёт лишнюю нагрузку. -x оставляет обход в пределах одной файловой системы.
sudo du -xhd1 /var/lib/shop | sort -h120M /var/lib/shop/uploads
9.8G /var/lib/shop/exportsВ каталоге exports ищи владельца данных, сроки хранения и источник роста. Размер каталога ещё не разрешает удалить его целиком.
Проверь результат очистки
Удаляй только подтверждённо ненужные данные по правилам сервиса. Если df и du сильно расходятся, проверь открытые удалённые файлы: процесс может удерживать их блоки до закрытия дескриптора. lsof есть не на каждом сервере.
sudo lsof +L1
df -h /var/lib/shop
df -i /var/lib/shopПосле освобождения места проверь запись и запрос к сервису. Устрани источник роста: например, сломанный срок хранения или неконтролируемое создание файлов.
Устрани скорость роста, а не только заполнение
У большого лога проверь режим логирования и ротацию; у множества мелких кеш-файлов — срок жизни и уборку. Пользовательские загрузки и служебный кеш имеют разную ценность. Перед удалением установи назначение каталога по конфигурации приложения.
logrotate -d помогает прочитать план без выполнения ротации, если инструмент есть в окружении. После исправления наблюдай повторный рост и доступность записи. Одно освобождение места не доказывает, что ночное заполнение не вернётся.
ls -l /etc/logrotate.d
sudo logrotate -d /etc/logrotate.conflogrotate относится к логам; для inode-кейса отдельно исследуй уборку кеша, сохранив uploads.
От симптома к проверке
| Наблюдение | Следующая проверка | Как читать результат |
|---|---|---|
| df -h: Use% 100% | du в том же разделе | Ищи большой потребитель блоков и его назначение. |
| df -h: 70% free; df -i: 100% | Каталоги с мелкими файлами | Проблема в inode, а не в размере одного большого файла. |
| du меньше df после удаления | lsof +L1 | Процесс может удерживать удалённый файл открытым. |
Типовые ошибки
- Удалить uploads вместе со служебным кешем.
- Освободить блоки и не проверить inode.
- Очистить лог, оставив debug и сломанную ротацию.
Как доказать восстановление
- Проверь и df -h, и df -i для каталога данных.
- Убедись, что приложение снова записывает рабочие данные.
- Сохрани пользовательские файлы и контрольные данные кейса.
- Наблюдай новый рост после исправления уборки или ротации.
МИНИ-ИНЦИДЕНТ
Большой файл не всегда виноват
API не создаёт файл. На разделе свободно 8 ГБ, но inode заняты на 100%. Рядом есть большой архив и каталог с миллионом кеш-объектов. С чего начнёшь?
Avail: 8G
IFree: 0
IUse%: 100%Разобрать ход диагностики
Сначала установи назначение и политику уборки мелких объектов. Удаление одного архива освободит мало inode и не устраняет их массовое накопление. Убедись, что это действительно кеш, а не загрузки пользователей, затем проверь восстановление записи.
ПРАКТИКУМ
Практикум: объясни данные и выбери действие
В каталоге тысячи мелких файлов. Сопоставь два вида ёмкости до решения об очистке.
df -h: 45% used
df -i: 100% used
application: No space left on deviceПочему ошибка не противоречит свободным гигабайтам?
Сверить рассуждение
Закончились inode, необходимые для новых объектов файловой системы. Свободные блоки не создают новые inode в рамках обычной очистки; нужно исследовать число и происхождение файлов.
Как сузить поиск без обхода посторонних разделов?
Сверить рассуждение
Привяжи df к пути приложения и ограничь поиск тем же разделом. Сравни каталоги с большим количеством мелких файлов, а не только суммарный размер крупнейших объектов.
Что должно измениться после уборки?
Сверить рассуждение
Свободные inode, успешное создание ожидаемого файла и скорость появления новых объектов. Если генератор продолжает прежний темп, освобождённая ёмкость снова закончится.
ПРОВЕРЬ СЕБЯ
Свободно 5 ГБ, а создание файла завершается ENOSPC. Что проверить дальше?
Показать объяснение
Проверь df -i на той же файловой системе. Если inode закончились, освобождение одного большого файла не решает проблему множества мелких файлов.
Пока без комментариев. Поделись первым впечатлением или задай вопрос по теме.