Урок 6 из 10Диагностика

12 мин · теория и практика · Основы

Место на диске и inode

Почему «No space left on device» бывает даже при свободных гигабайтах.

Сможешь найти заполненную файловую систему и проверить два разных лимита.

Ошибка записи может остановить базу, логирование или очередь. Начни с файловой системы, куда пишет приложение: свободное место в /home не поможет, если заполнен отдельный раздел /var.

Проверь нужную точку монтирования

df -h показывает занятые блоки в удобных единицах. Передай путь к каталогу данных, чтобы увидеть его файловую систему. Смотри одновременно на Use%, Avail и Mounted on.

Команды
df -h /var/lib/shop
df -i /var/lib/shop
Пример вывода
Filesystem  Size  Used Avail Use% Mounted on
/dev/vdb     10G   10G     0 100% /var/lib/shop

df -i проверяет inode — метаданные файлов. Множество крошечных файлов может исчерпать inode раньше, чем блоки данных.

Локализуй источник роста

du оценивает место, занятое файлами и каталогами. Ограничь поиск нужным деревом: обход всего сервера создаёт лишнюю нагрузку. -x оставляет обход в пределах одной файловой системы.

Команды
sudo du -xhd1 /var/lib/shop | sort -h
Пример вывода
120M /var/lib/shop/uploads
9.8G /var/lib/shop/exports

В каталоге exports ищи владельца данных, сроки хранения и источник роста. Размер каталога ещё не разрешает удалить его целиком.

Проверь результат очистки

Удаляй только подтверждённо ненужные данные по правилам сервиса. Если df и du сильно расходятся, проверь открытые удалённые файлы: процесс может удерживать их блоки до закрытия дескриптора. lsof есть не на каждом сервере.

Команды
sudo lsof +L1
df -h /var/lib/shop
df -i /var/lib/shop

После освобождения места проверь запись и запрос к сервису. Устрани источник роста: например, сломанный срок хранения или неконтролируемое создание файлов.

Устрани скорость роста, а не только заполнение

У большого лога проверь режим логирования и ротацию; у множества мелких кеш-файлов — срок жизни и уборку. Пользовательские загрузки и служебный кеш имеют разную ценность. Перед удалением установи назначение каталога по конфигурации приложения.

logrotate -d помогает прочитать план без выполнения ротации, если инструмент есть в окружении. После исправления наблюдай повторный рост и доступность записи. Одно освобождение места не доказывает, что ночное заполнение не вернётся.

Команды
ls -l /etc/logrotate.d
sudo logrotate -d /etc/logrotate.conf

logrotate относится к логам; для inode-кейса отдельно исследуй уборку кеша, сохранив uploads.

От симптома к проверке

НаблюдениеСледующая проверкаКак читать результат
df -h: Use% 100%du в том же разделеИщи большой потребитель блоков и его назначение.
df -h: 70% free; df -i: 100%Каталоги с мелкими файламиПроблема в inode, а не в размере одного большого файла.
du меньше df после удаленияlsof +L1Процесс может удерживать удалённый файл открытым.

Типовые ошибки

  • Удалить uploads вместе со служебным кешем.
  • Освободить блоки и не проверить inode.
  • Очистить лог, оставив debug и сломанную ротацию.

Как доказать восстановление

  1. Проверь и df -h, и df -i для каталога данных.
  2. Убедись, что приложение снова записывает рабочие данные.
  3. Сохрани пользовательские файлы и контрольные данные кейса.
  4. Наблюдай новый рост после исправления уборки или ротации.

МИНИ-ИНЦИДЕНТ

Большой файл не всегда виноват

API не создаёт файл. На разделе свободно 8 ГБ, но inode заняты на 100%. Рядом есть большой архив и каталог с миллионом кеш-объектов. С чего начнёшь?

Данные для разбора
Avail: 8G
IFree: 0
IUse%: 100%
Разобрать ход диагностики

Сначала установи назначение и политику уборки мелких объектов. Удаление одного архива освободит мало inode и не устраняет их массовое накопление. Убедись, что это действительно кеш, а не загрузки пользователей, затем проверь восстановление записи.

ПРАКТИКУМ

Практикум: объясни данные и выбери действие

В каталоге тысячи мелких файлов. Сопоставь два вида ёмкости до решения об очистке.

Учебные данные
df -h: 45% used
df -i: 100% used
application: No space left on device
  1. Почему ошибка не противоречит свободным гигабайтам?

    Сверить рассуждение

    Закончились inode, необходимые для новых объектов файловой системы. Свободные блоки не создают новые inode в рамках обычной очистки; нужно исследовать число и происхождение файлов.

  2. Как сузить поиск без обхода посторонних разделов?

    Сверить рассуждение

    Привяжи df к пути приложения и ограничь поиск тем же разделом. Сравни каталоги с большим количеством мелких файлов, а не только суммарный размер крупнейших объектов.

  3. Что должно измениться после уборки?

    Сверить рассуждение

    Свободные inode, успешное создание ожидаемого файла и скорость появления новых объектов. Если генератор продолжает прежний темп, освобождённая ёмкость снова закончится.

ПРОВЕРЬ СЕБЯ

Свободно 5 ГБ, а создание файла завершается ENOSPC. Что проверить дальше?

Показать объяснение

Проверь df -i на той же файловой системе. Если inode закончились, освобождение одного большого файла не решает проблему множества мелких файлов.

Документация

Гостевой прогресс хранится отдельно в этом браузере.

ТЕПЕРЬ В КОНСОЛЬ

Закрепи на инциденте

Сравни два инцидента с диском: ищи лимит, который действительно достигнут.

ПОМОГЛО РАЗОБРАТЬСЯ?

Как тебе материал?

Оцени статью или напиши, где не хватило объяснения. Это поможет улучшить обучение.

Полезно 0 Не помогло 0

Войди, чтобы оценить статью и оставить комментарий.

Обсуждение

0

Войти в обсуждение →

Пока без комментариев. Поделись первым впечатлением или задай вопрос по теме.