Як отримати фактичний розмір каталогу (з du)?

Як отримати фактичний розмір каталогу за допомогою стандартних інструментів UNIX / Linux?

Альтернативне запитання: Як мені отримати ду, щоб показати мені фактичний розмір каталогу (не використання диска)?

Оскільки, здається, люди мають різні визначення терміна "розмір": Моє визначення "розміру каталогу" - це сума всіх регулярних файлів у цьому каталозі.

Я НЕ дбаю про розмір inode каталогу або будь-який інший (блоки * розмір блоку) файлів у відповідній файловій системі. Каталог з 3-ма файлами, по 1 байті кожен, має розмір каталогу в 3 байти (за моїм визначенням).

Обчислення розміру каталогу за допомогою du здається ненадійним.
Наприклад, mkdir foo && du -b fooзвіти "4096 foo", 4096 байт замість 0 байт. У дуже великих каталогах розмір каталогів, про який повідомляється, du -hsможе бути вимкнений на 100 ГБ (!) Та більше (стисла файлова система).

Отже, що (інструмент / варіант) потрібно використовувати для отримання фактичного розміру каталогу?

Ось сценарій, що відображає читаний людиною розмір каталогу за допомогою стандартних інструментів Unix (POSIX).

#!/bin/sh
find ${1:-.} -type f -exec ls -lnq {} \+ | awk '
BEGIN {sum=0} # initialization for clarity and safety
function pp() {
  u="+Ki+Mi+Gi+Ti+Pi+Ei";
  split(u,unit,"+");
  v=sum;
  for(i=1;i<7;i++) {
    if(v<1024) break;
    v/=1024;
  }
  printf("%.3f %sB\n", v, unit[i]);
}
{sum+=$5}
END{pp()}'

наприклад:

$ ds ~        
72.891 GiB

Деякі версії duпідтримують аргумент --apparent-sizeпоказувати видимий розмір замість використання диска. Отже, ваша команда буде:

du -hs --apparent-size

З довідкових сторінок для du, включених до Ubuntu 12.04 LTS:

--apparent-size
      print apparent sizes,  rather  than  disk  usage;  although  the
      apparent  size is usually smaller, it may be larger due to holes
      in (`sparse') files, internal  fragmentation,  indirect  blocks,
      and the like

Просто альтернатива, використовуючи ls:

ls -nR | grep -v '^d' | awk '{total += $5} END {print total, "Total"}'

ls -nR: -nяк -l, але перераховуйте числові UID та GID та -Rпідкаталоги списку рекурсивно.

grep -v:Інвертуйте відчуття відповідності, щоб вибрати невідповідні лінії. (-v визначається POSIX.). '^ d'виключить каталоги.

Команда Ls: http://linux.about.com/od/commands/l/blcmdl1_ls.htm

Людина Греп: http://linux.die.net/man/1/grep

Редагувати :

Відредаговано як пропозиція @ Сергій Власов.

Якщо припустити, що ви маєте duGNU coreutils, ця команда повинна обчислити загальний видимий розмір довільної кількості регулярних файлів всередині каталогу без будь-яких довільних обмежень на кількість файлів:

find . -type f -print0 | du -scb --files0-from=- | tail -n 1

Додайте -lпараметр, duякщо всередині є деякі файли з твердим посиланням, і ви хочете рахувати кожне тверде посилання окремо (за замовчуваннямdu рахується кілька твердих посилань лише один раз).

Найголовніша відмінність від звичайного du -sbполягає в тому, що рекурсивний duтакож рахує розміри каталогів, про які по-різному повідомляють різні файлові системи; щоб уникнути цього, findкоманда використовується для передачі лише звичайних файлів du. Ще одна відмінність полягає в тому, що символьні посилання ігноруються (якщо їх слід порахувати, тоfind команду слід скорегувати).

Ця команда також буде споживати більше пам'яті , ніж звичайний du -sb, тому що з допомогою --files0-from=FILEробить duмагазин пристрою і номера індексних дескрипторів з усіх оброблених файлів, на відміну від поведінки за замовчуванням запам'ятовування тільки файли з більш ніж однієї жорсткої посилання. (Це не проблема, якщо ця -lопція використовується для підрахунку твердих посилань кілька разів, тому що єдиною причиною для зберігання номерів пристрою та inode є пропуск файлів, які вже були оброблені.)

Якщо ви хочете отримати зрозуміле для людини представлення загального розміру, просто додайте -hпараметр (це працює, тому що duвикликається лише один раз і обчислює сам загальний розмір, на відміну від деяких інших запропонованих відповідей):

find . -type f -print0 | du -scbh --files0-from=- | tail -n 1

або (якщо ви переживаєте, що деякі наслідки -bпотім будуть відмінені -h)

find . -type f -print0 | du -sc --apparent-size -h --files0-from=- | tail -n 1

Якщо все, що вам потрібно, - це розмір файлів, виключаючи простір, який займають каталоги, ви можете зробити щось подібне

find . -type f -print0 | xargs -0 du -scb | tail -n 1

@SergeyVlasov зазначив, що це не вдасться, якщо у вас більше файлів, ніж argmax. Щоб уникнути того, що ви можете використовувати щось на кшталт:

find . -type f -exec du -sb '{}' \; | gawk '{k+=$1}END{print k}'