Немає більше місця на диску: Як знайти те, що займає місце?

У мене виникла проблема на одному з моїх серверів під керуванням 16.04: немає місця на диску.

Я поняття не маю, що займає простір. Чи є команда перелічити поточні розміри каталогів, щоб я міг перейти та опинитися в каталозі, зайнявши весь простір?

Як завжди в Linux, існує більше ніж один спосіб зробити роботу. Однак якщо вам потрібно зробити це з CLI, це мій кращий метод:

Почніть з запуску цього файлу як root або з sudo:

du -cha --max-depth=1 / | grep -E "M|G"

Поглинання полягає в обмеженні повертаються ліній на ті, які повертаються зі значеннями в діапазоні Мегабайт або Гігабайт. Якщо ваші диски досить великі, ви можете також додати |Tсуми Терабайт. Ви можете отримати деякі помилки на /proc, /sysта / або /devтому, що вони не є реальними файлами на диску. Однак він все одно повинен забезпечити дійсний вихід для решти каталогів у корені. Після того як ви знайдете найбільші, ви можете запустити команду всередині цього каталогу, щоб звузити шлях винуватця. Так, наприклад, якщо це /varбуло найбільше, ви могли б зробити це наступним чином:

du -cha --max-depth=1 /var | grep -E "M|G"

Це повинно привести вас до проблемних дітей!

Додаткові міркування

Хоча вищезазначена команда, безумовно, зробить трюк, у коментарях нижче я зазнав конструктивної критики, яка вказала на деякі речі, які ви також можете включити.

1. Наданий grepя міг призвести до того, що час від часу повертається значення "K", якщо у імені каталогу чи файлу є велика літера G або M. Якщо ви абсолютно не хочете, щоб жоден із вказаних K-каталогів відображався, ви хочете отримати Ваша гра-регекс буде більш креативною та складною. напрgrep -E "^[0-9\.]*[MG]"

2. Якщо ви знаєте, в чому проблема, і на ній є інші приєднані диски, на які ви не хочете витрачати час, включаючи пошук, можете додати -xпрапор до своєї duкоманди. Опис чоловічої сторінки цього прапора:

     -x, --one-file-system
         skip directories on different file systems
   

3. Ви можете сортувати результат duкоманди так, щоб найвище значення було внизу. Просто додайте це до кінця команди:| sort -h

Ви можете використовувати ncduдля цього. Це працює дуже добре.

sudo apt install ncdu

Я використовую цю команду

sudo du -aBM -d 1 . | sort -nr | head -20

Інколи мені потрібно запустити його з /каталогу, оскільки я щось розмістив у непарному місці.

Про способи пошуку каталогів, що займають більшу частину місця, вже існує багато хороших відповідей. Якщо у вас є підстави вважати, що основна проблема є великими файлами, а не багато маленьких, ви можете використовувати щось на кшталт find / -size +10M.

Я не знаю Ubuntu і не можу перевірити свою відповідь, але опублікуйте тут свою відповідь, виходячи з мого досвіду роботи з адміністратором Unix давно.

1. Дізнайтеся, у якій файловій системі не вистачає місця

   df -h
   

   перерахує всю файлову систему, їх розмір та вільний простір. Ви витрачаєте час лише, якщо досліджуєте файлові системи, у яких достатньо місця. Припустимо, що повна файлова система є / myfilesystem. перевірити вихід df, чи є файлові системи, встановлені на підкаталогах / myfilesystems. Якщо це так, до цієї ситуації повинні бути пристосовані наступні заклики.

2. Дізнайтеся, скільки місця використовується файлами цієї файлової системи

   du -sh /myfilesystem
   

   Параметр -x може використовуватися для гарантування врахування лише тих файлів, які є учасниками цієї файлової системи. Деякі варіанти Unix (наприклад, Solaris) не знають опцію -x для du. Тоді вам доведеться скористатися деякими обхідними шляхами, щоб знайти дію вашої файлової системи.

3. Тепер перевірте, чи розмір видимих ​​файлів приблизно розмір використовуваного простору, відображеного df. Якщо так, ви можете почати знаходити великі файли / каталоги файлової системи / myfilesystem для очищення.

4. щоб знайти найбільші підкаталоги каталогу /.../dir використання

   du -sk /.../dir/*|sort -n
   

   Варіант -k змушує дю виводити сиє в кілобайт без жодної одиниці. Це може бути дефолт у деяких системах. Потім ви можете пропустити цю опцію. Найбільші файли / підкаталоги будуть показані внизу виводу.

5. Якщо ви знайшли великий файл / каталог, який вам більше не потрібен, ви можете його видалити відповідним чином. Не турбуйтеся про невеликі каталоги у верхній частині виводу. Це не вирішить вашу проблему, якщо ви видалите їх. Якщо у вас все ще недостатньо місця, ви можете повторити крок 4 у великих підкаталогах, які відображаються внизу списку.

Але що сталося, якщо висновок du не є приблизно наявним простором, відображеним df?

Якщо висновок du більший, то ви пропустили підкаталог, де інстальована інша файлова система. Якщо висновок du набагато менший, файли som не відображаються в жодному каталозі, який перевіряє. Причини його явищ можуть бути різні.

6. деякі процеси використовують файл, який вже був видалений. Тому ці файли були вилучені з каталогу, і їх неможливо побачити. Але для файлової системи їх блоки все ще використовуються до тих пір, поки прибутки не закриють файли. Ви можете спробувати знайти відповідні процеси (наприклад, з lsof) і змусити їх закрити ці файли (наприклад, зупинивши програму або вбивши процеси). Або ви просто перезавантажте машину.

7. є файли в каталогах, які більше не видно, оскільки в одному з батьківських каталогів інша файлова система змонтована. Отже, якщо у вас є файл / myfilesysem / subdir / bigfile і тепер змонтуйте іншу файлову систему в / myfilesystem / subdir, ви більше не можете бачити цей файл і

   du -shx /myfilesystem 
   

   повідомить про значення, яке не містить розмір / myfilesystem / subdir / bigfile. Єдиний спосіб дізнатися, чи існують такі файли, - це відключити / myfilesystem / subir та перевірити

   ls -la /myfilesystem/subdir 
   

   якщо він містить файли.

8. Можливо, існують спеціальні типи файлових систем, які використовують / резервують простір на диску, який не видно команді ls. Для його відображення потрібні спеціальні інструменти.

Окрім цього систематичного способу використання команди du, ви можете скористатися і іншими. Таким чином, ви можете скористатися командою find, щоб знайти файли, які перевищують якесь значення, яке ви надаєте, ви можете шукати файли, що перевищують якесь значення, яке ви надаєте, або які були створені нещодавно або мають спеціальне ім’я (наприклад, * .log, core, * .trc). Але ви завжди повинні робити df, як описано в 1, щоб ви працювали в правій файловій системі

Якщо ви також зацікавлені не використовувати команду, ось додаток: Filelight

Це дозволяє швидко візуалізувати використання дискового простору в будь-якій папці.

Спробуйте sudo apt-get autoremoveвидалити невикористані файли, якщо ви цього не зробили

Я часто користуюся цим

du -sh /*/

Тоді, якщо я знайду якісь великі папки, я перейду до нього і проведу подальше дослідження

cd big_dir
du -sh */

Якщо потрібно, ви також можете зробити це сортування автоматично

du -s /*/ | sort -n

Насправді не відповідь - а додаток.

Вам не вистачає місця та не можете встановити ncdu з відповіді @erman.

Деякі пропозиції

• sudo apt clean allщоб видалити пакети, які ви вже завантажили. БЕЗПЕЧНИЙ
• sudo rm -f /var/log/*gzФайли журналу очищення старше тижня чи двох - новіші / поточні журнали не видалять. НАЙБІЛЬШЕ БЕЗПЕЧНО
• sudo lsof | grep deletedсписок усіх відкритих файлів, але відфільтруйте до тих, які були видалені з диска. FAIRLY SAFE
• sudo rm /tmp/*видаліть деякі тимчасові файли - якщо щось використовує їх, ви могли б порушити процес. НЕ ДІЙСНО, ЩО БЕЗПЕЧНО

Цей `lsof може повернути такі рядки:

server456 ~ $ lsof | grep deleted
init          1          root    9r      REG              253,0  10406312       3104 /var/lib/sss/mc/initgro                        ups (deleted)
salt-mini  4532          root    0r      REG              253,0        17     393614 /tmp/sh-thd-1492991421                         (deleted)

Не вдасться зробити багато для рядка init, але другий рядок передбачає, що у солі-minion відкритий файл, який був видалений, і блоки диска будуть повернуті, коли всі ручки файлів будуть закриті при перезапуску служби.

До інших поширених підозрюваних тут можна віднести syslog / rsyslog / syslog-ng, squid, apache або будь-який процес, на якому працює ваш сервер, який є "важким".

Я вважаю особливо цінним вихід таких інструментів, як Filelight, але, як у вашому випадку, на серверах зазвичай не встановлений графічний інтерфейс, але duкоманда завжди доступна.

Що я зазвичай роблю:

• записати duвихід у файл ( du / > du_output.txt);
• скопіюйте файл на мою машину;
• використовувати DuFSдля "монтажу" duвиводу у тимчасовій директорії; DuFSвикористовує FUSE для створення віртуальної файлової системи (= файли фактично не створені, це все підроблено) відповідно до duвиводу;
• запустіть Filelight або інший інструмент GUI у цьому тимчасовому каталозі.

Відмова: Я писав dufs- саме тому, що мені часто доводиться з'ясовувати, що таке коси дискового простору на безголівкових машинах.

Подібно до @TopHat, але фільтрує деякі файли, якщо вони мають M, G або T у назві. Я не вірю, що він буде пропускати розмір у першому стовпці, але він не буде відповідати імені файлу, якщо ви не назвете файли творчо.

du -chad 1 . | grep -E '[0-9]M[[:blank:]]|[0-9]G[[:blank:]]|[0-9]T[[:blank:]]'

Тут викладено пояснення перемикачів командного рядка, оскільки я не знав, що робив c чи що.