Як очистити невикористаний простір нулями? (ext3, ext4)

Я шукаю щось розумніше

cat /dev/zero > /mnt/X/big_zero ; sync; rm /mnt/X/big_zero

Як і FSArchiver шукає "використаний простір" і ігнорує невикористаний, але протилежний сайт.

Мета: Я хотів би стиснути зображення розділів, тому наповнювати невикористаний простір нулями настійно рекомендується.

Btw. Для btrfs: очищення невикористаного простору з нулями (btrfs)

Така утиліта є zerofree.

З його опису:

Zerofree знаходить нерозподілені, ненульові блоки в файловій системі ext2 або ext3 і заповнює їх нулями. Це корисно, якщо на пристрої, на якому знаходиться ця файлова система, є зображення диска. У цьому випадку, залежно від типу зображення диска, вторинна утиліта може мати змогу зменшити розмір зображення диска після запуску zerofree. Zerofree вимагає відключення файлової системи або встановлення лише для читання.

Звичайний спосіб досягти того ж результату (обнулення невикористаних блоків) - запустити "dd", створити файл, заповнений нулями, який займає весь вільний простір на диску, а потім видалити цей файл. Це має багато недоліків, які полегшує нуль:

• це повільно
• це змушує образ диска (тимчасово) зростати до максимальної міри
• він (тимчасово) використовує весь вільний простір на диску, тому інші паралельні дії запису можуть не виконати.

Zerofree написано для запуску із систем GNU / Linux, встановлених як гостьові ОС у віртуальній машині. Якщо це не ваш випадок, вам майже точно не потрібен цей пакет.

ОНОВЛЕННЯ №1

Опис пакету .deb містить наступний параграф, який би означав, що це буде добре працювати і з ext4.

Опис: нульові вільні блоки з файлових систем ext2, ext3 та ext4 Zerofree знаходить неподілені блоки з вмістом ненульового значення у файловій системі ext2, ext3 або ext4 і заповнює їх нулями ...

Інші види використання

Інша програма, яка використовується у цій програмі, - стискати образи диска, які є резервною копією реального диска. Типовим прикладом цього є скидання SD-карти в BeagleBone або Raspberry Pi. Після того, як порожні пробіли будуть нульові, резервні зображення можна стиснути ефективніше.

Короткий огляд методів (як зазначено в цьому питанні та в інших місцях) для очищення невикористаного простору на ext2 / ext3 / ext4:

Нульовий невикористаний простір

Файлова система не змонтована

• Якщо "диск" у вашій файловій системі увімкнено (наприклад, сучасний SSD, що підтримує TRIM, файл VM, формат якого підтримує розрідженість тощо), а ваше ядро ​​каже, що блоковий пристрій це розуміє, ви можете використовувати e2fsck -E discard src_fsдля викидання невикористаного простору (потрібні e2fsprogs 1.42.2 або вище).
• Використання zerofree (наприклад zerofree src_fs) для явного запису нулів у невикористані блоки.
• Використовуючи e2image -rap src_fs dest_fsлише для копіювання використовуваних блоків (нова файлова система повинна бути на іншому нульовому «диску», потрібні e2fsprogs 1,42,9 або новіші).

Файлова система змонтована

• Якщо "диск" на вашій файловій системі увімкнено (наприклад, сучасний SSD, що підтримує TRIM, файл VM, формат якого підтримує розрідженість тощо), ваше ядро ​​говорить, що блоковий пристрій це розуміє, і нарешті, драйвер файлової системи ext підтримує його, яким ви можете користуватися. fstrim /mnt/fs/попросити файлову систему відкинути невикористаний простір.
• Використання cat /dev/zero > /mnt/fs/zeros; sync; rm /mnt/fs/zeros( sfillіз захисту-видалення використовує цю техніку). Цей метод є неефективним, не рекомендується Тедом Ц'о (автор ext4), може не нульовувати певні речі і може сповільнити майбутні fsckс.

Відключення файлової системи дасть кращі результати, ніж її встановлення. Відмова, як правило, є найшвидшим методом, коли багато раніше використовуваного простору потрібно занулювати, але використання zerofreeпісля процесу відкидання іноді може дорівнювати нулю трохи додатково (залежно від того, як відкидання реалізовано на «диску»).

Зменшення файлу зображень менше

Зображення у виділеному форматі VM

Вам потрібно буде використовувати відповідний інструмент для зображення диска (наприклад, qemu-img convert src_image dst_image), щоб дозволити нульовий простір відновити та дозволити файлу, що представляє зображення, зменшитись.

Зображення - це необроблений файл

Для зменшення файлу може бути використаний один із наступних прийомів (так, нульові зупинки займають місце):

• cp --sparse=always src_image dst_image.
• fallocate -d src_image (потрібна util-linux v2.25 або новіша версія).

У ці дні може бути простіше використовувати такий інструмент, як virt-sparsify, щоб зробити ці кроки та інше за один раз.

 Джерела

• Очистіть невикористаний простір нулями (ext3, ext4) (це питання Unix та Linux!)
• https://ext4.wiki.kernel.org/index.php/Ext4_VM_Images
• Повідомлення Теда Цьо, що обговорює методи зменшення зображень у "помилку ядра при fs / ext4 / resize.c: 409" linux-ext4.
• Захист зображень файлової системи автором є рідкимzerofree
• звільніть невикористаний простір у файлі qcow2-image на відповіді kvm / qemu на сервісі Fault
• http://libguestfs.org/virt-sparsify.1.html

sfillfrom safe-delete може виконати це та кілька інших пов'язаних з цим завдань.

напр

sfill -l -l -z /mnt/X

ОНОВЛЕННЯ №1

Існує дерево джерела, яке, схоже, використовується проектом ArchLinux на github, яке містить джерело, для sfillякого є інструмент, включений до пакету Secure-Delete.

• https://github.com/BlackArch/secure-delete

Також є копія sfillчоловічої сторінки тут:

• http://manpages.ubuntu.com/manpages/xenial/man1/sfill.1.html

Якщо у вас є e2fsprogs 1.42.9, тоді ви можете використовувати e2imageдля створення зображення розділу без вільного місця в першу чергу, щоб ви могли пропустити нульовий крок.

Можна використовувати sfill. Це краще рішення для тонких об'ємів.

якщо ви не хочете вдаватися до додаткових інструментів, цей спосіб повинен бути швидшим, ніж cat /dev/zero > /mnt/fs/zeros:

dd if=/dev/zero of="/mnt/fs/filler" bs=10485760
dd if=/dev/zero of="/mnt/fs/filler1" bs=1
rm /mnt/fs/filler
rm /mnt/fs/filler1