Загальний розмір вмісту всіх файлів у каталозі [закрито]

Коли я використовую lsабо du, я отримую кількість дискового простору, який займає кожен файл.

Мені потрібна загальна сума всіх даних у файлах і підкаталогах, які я отримав, якби відкрив кожен файл і підрахував байти. Бонусні бали, якщо я можу це отримати, не відкриваючи кожен файл і не рахуючи.

Якщо ви хочете "очевидний розмір" (тобто кількість байтів у кожному файлі), а не розмір, який беруть файли на диску, скористайтесь опцією -bабо --bytes(якщо у вас є система Linux з GNU coreutils ):

% du -sbh <directory>

Використання du -sb:

du -sb DIR

За бажанням додайте hопцію для більш зручного виводу:

du -sbh DIR

CD в ​​каталог, потім:

du -sh

ftw!

Спочатку писав про це тут: https://ao.gl/get-the-total-size-of-all-the-files-in-a-directory/

Просто альтернатива:

ls -lAR | grep -v '^d' | awk '{total += $5} END {print "Total:", total}'

grep -v '^d' виключить каталоги.

Формат "% s" stat дає вам фактичну кількість байтів у файлі.

 find . -type f |
 xargs stat --format=%s |
 awk '{s+=$1} END {print s}'

Не соромтеся замінювати свій улюблений метод підсумовування чисел .

Якщо ви використовуєте "du" для "box "в emebedded системі, ви не можете отримати точні байти з du, ви можете отримати лише кбайт.

BusyBox v1.4.1 (2007-11-30 20:37:49 EST) multi-call binary

Usage: du [-aHLdclsxhmk] [FILE]...

Summarize disk space used for each FILE and/or directory.
Disk space is printed in units of 1024 bytes.

Options:
        -a      Show sizes of files in addition to directories
        -H      Follow symbolic links that are FILE command line args
        -L      Follow all symbolic links encountered
        -d N    Limit output to directories (and files with -a) of depth < N
        -c      Output a grand total
        -l      Count sizes many times if hard linked
        -s      Display only a total for each argument
        -x      Skip directories on different filesystems
        -h      Print sizes in human readable format (e.g., 1K 243M 2G )
        -m      Print sizes in megabytes
        -k      Print sizes in kilobytes(default)

Коли папка створена, багато файлових систем Linux виділяють 4096 байт для зберігання деяких метаданих про сам каталог. При збільшенні каталогу цей простір збільшується кратним 4096 байтів.

команда du (з опцією -b або без) беремо підрахунок цього простору , як ви бачите:

mkdir test && du -b test

у вас вийде 4096 байт за порожній реж. Отже, якщо помістити 2 файли по 10000 байт всередині dir, загальна сума, подана du -sb, склала б 24096 байт.

Якщо ви уважно читаєте запитання, це не те, що задають. Запитуючий запитав:

загальна сума всіх даних у файлах та підкаталогах, які я отримав, якби відкрив кожен файл і порахував байти

що у наведеному вище прикладі має бути 20000 байт, а не 24096.

Отже, правильною відповіддю IMHO може бути поєднання відповіді Нельсона та пропозиції hlovdal для обробки імен файлів, що містять пробіли:

find . -type f -print0 | xargs -0 stat --format=%s | awk '{s+=$1} END {print s}'

Існує щонайменше три способи отримати "загальну суму всіх даних у файлах і підкаталогах" у байтах, які працюють як в Linux / Unix, так і в Git Bash для Windows, перелічених нижче, щоб в середньому швидше переходити на найповільніші. Для довідки, вони були виконані в корені досить глибокої файлової системи ( docrootв установці Magento 2 Enterprise, що містить 71,158 файлів у 30,027 каталогах).

1.

$ time find -type f -printf '%s\n' | awk '{ total += $1 }; END { print total" bytes" }'
748660546 bytes

real    0m0.221s
user    0m0.068s
sys     0m0.160s

2.

$ time echo `find -type f -print0 | xargs -0 stat --format=%s | awk '{total+=$1} END {print total}'` bytes
748660546 bytes

real    0m0.256s
user    0m0.164s
sys     0m0.196s

3.

$ time echo `find -type f -exec du -bc {} + | grep -P "\ttotal$" | cut -f1 | awk '{ total += $1 }; END { print total }'` bytes
748660546 bytes

real    0m0.553s
user    0m0.308s
sys     0m0.416s

Ці два також працюють, але вони покладаються на команди, які не існують на Git Bash для Windows:

1.

$ time echo `find -type f -printf "%s + " | dc -e0 -f- -ep` bytes
748660546 bytes

real    0m0.233s
user    0m0.116s
sys     0m0.176s

2.

$ time echo `find -type f -printf '%s\n' | paste -sd+ | bc` bytes
748660546 bytes

real    0m0.242s
user    0m0.104s
sys     0m0.152s

Якщо ви хочете лише загальну суму для поточного каталогу, додайте -maxdepth 1до find.

Зауважте, що деякі із запропонованих рішень не дають точних результатів, тому я б дотримувався вищезазначених рішень.

$ du -sbh
832M    .

$ ls -lR | grep -v '^d' | awk '{total += $5} END {print "Total:", total}'
Total: 583772525

$ find . -type f | xargs stat --format=%s | awk '{s+=$1} END {print s}'
xargs: unmatched single quote; by default quotes are special to xargs unless you use the -0 option
4390471

$ ls -l| grep -v '^d'| awk '{total = total + $5} END {print "Total" , total}'
Total 968133

Для Win32 DOS ви можете:

c:> dir / sc: \ каталог \ ви \ хочете

і передостанній рядок підкаже, скільки байтів займають файли.

Я знаю, що це читає всі файли та каталоги, але працює швидше в деяких ситуаціях.

duце зручно, але findкорисно в тому випадку, якщо ви хочете обчислити розмір лише деяких файлів (наприклад, використовуючи фільтр за розширенням). Також зауважте, що findсамі можуть надрукувати розмір кожного файлу в байтах. Для обчислення загального розміру ми можемо з'єднати dcкоманду наступним чином:

find . -type f -printf "%s + " | dc -e0 -f- -ep

Тут findгенерується послідовність команд для dcподібних 123 + 456 + 11 +. Хоча, виконана програма має бути схожою 0 123 + 456 + 11 + p(пам’ятайте нотацію постфікса).

Отже, для отримання завершеної програми нам потрібно поставити 0стек перед виконанням послідовності з stdin та надрукувати верхнє число після виконання ( pкоманда в кінці). Ми досягаємо цього за допомогою dcваріантів:

1. -e0це лише ярлик для того, -e '0'що ставиться 0на стек,
2. -f-призначений для читання та виконання команд із stdin (що генерується findтут),
3. -epпризначений для друку результату ( -e 'p').

Щоб надрукувати розмір у форматі MiB, 284.06 MiBми можемо використати -e '2 k 1024 / 1024 / n [ MiB] p'замість нього пункт 3 (більшість пробілів не є обов'язковим).

Це може допомогти:

ls -l| grep -v '^d'| awk '{total = total + $5} END {print "Total" , total}'

Наведена вище команда підсумовує всі файли, що залишають розмір каталогів.

Використання:

$ du -ckx <DIR> | grep total | awk '{print $1}'

Де <DIR> - каталог, який ви хочете перевірити.

'-C' дає великі загальні дані, які витягуються за допомогою команди 'grep total', а кількість в Кбайт витягується за допомогою команди awk.

Єдине застереження тут - якщо у вас є підкаталог, що містить текст "total", він також вийде.