Масове видалення файлів у Windows

У мене є каталог, який містить ~ 3 мільйони файлів у певних підкаталогах на сервері Windows 2008. Видалення файлів вручну через SHIFT + DEL у кореневому режимі займає багато років. Чи є інший спосіб зробити швидше видалення ?

ПОПЕРЕДЖЕННЯ: якщо у вас є посилання на каталоги, delви видалите фактичні каталоги, а не символьні посилання. Будьте дуже обережні з цим і не запускайте ці команди, якщо ви не знаєте, що в каталозі цілі немає посилань.

Мені регулярно потрібно видаляти багато файлів і каталогів із зашифрованого накопичувача WinXP, як правило, близько 22 ГБ з 500 000 файлів у 45 000 папок.

Видалення за допомогою Провідника Windows - це сміття, оскільки воно витрачає багато часу на перерахування файлів. Зазвичай я переміщую речі, які мені потрібно видалити, на C: \ stufftodelete і маю пакетний файл deletestuff.bat rmdir /s/q C:\stufftodelete. Це планується запустити вночі, але іноді мені потрібно запустити його вдень, тим швидше, тим краще.

Ось результати тесту на швидкий час невеликого 5,85 МБ зразка з 960 файлів у 303 папках. Я запустив метод 1, а потім спосіб 2, а потім скинув тестові каталоги.

Спосіб 1 видаляє файли та структуру каталогів за один прохід:

rmdir /s/q foldername

Спосіб 2 має перший пропуск для видалення файлів і виведення на нуль, щоб уникнути накладних витрат на екран для кожного окремого файлу. Потім другий прохід очищає решту структури каталогів:

del /f/s/q foldername > nul
rmdir /s/q foldername

• Спосіб 1: 17,5s, 14,9s, 13,9s, 14,8s, 13,8s: в середньому 14,98 секунди
• Спосіб 2: 14,3s, 12,1s, 11,7s, 14,2s, 11,8s: в середньому 12,82 секунди

Ось результати іншого тесту з використанням 404 МБ з 19 521 файлів у 3 243 папках:

• Спосіб 1: 2 хвилини 20 секунд
• Спосіб 2: 2 хвилини 33 секунди

Так що в ньому не так багато, напевно, занадто близько, щоб судити про один тест.

Редагувати: я перевірив значно більше даних, це типовий для мене випадок: 28,3 ГБ із 1159 211 файлів у 146 918 папках:

• Спосіб 1: 2h 15m, 2h 34m: середній: 2 години 25 хвилин
• Спосіб 2: 49м, 57м: середній: 53 хвилини

Нічого собі, метод 2 майже втричі швидший, ніж метод 1! Я буду оновлювати свою deletestuff.bat!

Якщо вам доведеться регулярно видаляти великі дерева каталогів, подумайте про збереження кореня дерева цього каталогу на окремому розділі, а потім просто швидко відформатувати його, коли потрібно видалити все. Якщо вам потрібно автоматизувати це, ви можете використовувати цю команду DOS:

echo Y | format Z: /FS:NTFS /X /Q

де Z: - ваша "летюча" перегородка. Примітка: на розділі не повинно бути ярликів. Я тут про це блогував .

У командному рядку (Пуск -> Виконати -> cmd):

del /f /s /q foldername 

Крім копіювання / переміщення файлів дуже швидко (використовуючи власний API), TeraCopy може видаляти файли, і це дуже швидко. З моменту з'ясування TeraCopy я не використовую комп'ютер без його встановлення (якщо я буду копіювати / переміщувати / видаляти).

Цей же інсталятор встановлює видання x64, але щоб використовувати його, потрібно вручну змусити його.

Бета-версія, яку я рекомендую для стабільних версій: http://blog.codesector.com/2010/09/22/teracopy-2-2-beta-3/

Я зробив bat-файл, який робить те саме.

@echo off
echo --------------------WARNING--------------------
echo folder "%~1" will be deleted
echo --------------------WARNING--------------------
pause
echo Deleting folder: "%~1".
time /T
del /f/s/q "%~1" >nul
rmdir /s/q "%~1" >nul
echo Done.
time /T
echo --- Taking ownership.
takeown /f "%~1" /r /d y >nul
icacls "%~1" /reset /t >nul
icacls "%~1" /setowner "%username%" /t >nul
echo Done all.
time /T

він виконує роботу в два кроки, один, він намагається видалити файли. А друге - спробувати взяти на себе право власності на файли. y слід змінити ваш місцевий (позначати так англійською). Якщо не вдасться виконати завдання (наприклад, якщо не вдалося через дозвіл), тоді його потрібно запустити ще раз. Однак другий раунд не намагатиметься видалити файли, видалені в першому раунді, тому це може бути досить швидким.

Як ним користуватися. Збережіть як delfolder.bat у маршруті маршруту (наприклад, c: \ windows), а потім запустіть його як

 delfolder "foldername"   

де ім'я папки - це ім'я папки

У моєму тесті видалення 123'000 файлів зайняло 3 хвилини (sata 7200rpm). ТАК!

Використання наведеного нижче коду для мене працює добре.

mkdir empty_dir
robocopy empty_dir dir_to_wipe /mir /r:0 /w:0 /e
rmdir empty_dir dir_to_wipe

Використовуйте команду rd / s з командного рядка.

Найкраще практичне рішення - це, мабуть, переміщення папки кудись (наприклад, Кошик), а потім почати її видалення. Це пройде віками, але принаймні воно не вийде.

Я впевнений, що час, необхідний для видалення всіх цих файлів, є невід'ємною вимогою завдання, а не неефективністю в реалізації видалення.

Встановіть Cygwin і використовуйте rm -r . Але це, ймовірно, буде зайвим.

Чи увімкнено генерацію коротких імен файлів? Якщо так, то вам це справді потрібно? Видалення файлу - це лише метадані. Тож якщо у вас вдвічі більше імен, які потрібно видалити, обсяг роботи значно більший.

Ви спробували будь-яке з цих двох додатків?

• Захищене видалення файлу
• Копір дисків і файлів

Обов'язково встановіть кількість перезаписів на 0, якщо ви хочете, щоб швидше було виконано. Зробіть це, натиснувши параметри, а потім змініть значення в нижній частині діалогового вікна.

Введіть шлях до видалення у поле Джерело та натисніть Видалити.

Ці програми не ставлять файли у кошик. Використовуйте обережно.

Це передбачено для компліменту та розширення кроків, зроблених у раніше згаданих відповідях.

Наведені вище два способи здаються досить ефективними, але визначити ефективність буде складно, якщо вони не будуть відповідати точно таким же умовам:

• Пристрій і модель фізичного жорсткого диска
  • Переважно, ATTO / Crystal Disk орієнтується перед клонуванням даних про них
• Місце розташування та геометрія тієї ж секції / об’єму
  • Способом зробити це - дефрагментація зразкових розділів / папок та їх клонування саме так, як вони є 2-ма тими ж типом жорстких дисків (з попереднього кроку)

• Потім виконайте конфігурації за допомогою пакетного файлу та використовуйте Powershell Cmdlet для реєстрації та вимірювання їх продуктивності.

  • В ідеалі слід додати деякі механізми, щоб запобігти будь-які упередження кешування через сприйняття подібної активності.

• Нижче наведено кілька зразків папок (названих як загальний розмір), над якими я експериментував, але не зміг отримати будь-які переконливі показники / результати.

р.бат

rmdir /s/q 3.2G

rd.bat

del /f/s/q 3.3G > nul
rmdir /s/q 3.3G

• Я б розмістив вихідні файли журналу, але я вважаю, що дисперсія величезна через розміри та розподіл файлів папок тощо.

Powershell:

PS S:\T> Measure-Command { S:\T\rd.bat } > rdlog.txt

PS S:\T> Measure-Command { S:\T\r.bat } > rlog.txt

PS S:\T> Measure-Command { S:\T\rd.bat } > rd_1.7G_log.txt

PS S:\T> Measure-Command { S:\T\r.bat } > r_1.8G_log.txt

PS S:\T> Measure-Command { S:\T\r.bat } > r_2.4G_log.txt

PS S:\T> Measure-Command { S:\T\rd.bat } > rd_2.7G_log.txt

PS S:\T> Measure-Command { S:\T\r.bat } > r_3.2G_log.txt

PS S:\T> Measure-Command { S:\T\rd.bat } > rd_3.3G_log.txt

Відповідь від Hugo найшвидший, але він не видаляє приховані або системні файли з першого проходу, тому, якщо ви хочете більш повного рішення, використовуйте параметр / a:

del /f /s /q /a foldername > nul
rmdir /s /q foldername

Щодо файлу BAT від Magallanes , будьте дуже обережні з поглинанням та icacls, викликайте жорсткі посилання, які мають однакові дозволи та власники, тому якщо в папці, яку ви хочете видалити, є ненасичені тверді посилання, використовуючи takeown та icacls, ви зміните дозволи та власники файлів поза папку.

Використовуючи інструмент ln.exe, ви можете перелічити всі файли з твердою посиланням всередині папки та знати, чи є вони жорсткими посиланнями на файли поза папкою (ненасичені тверді посилання):

ln.exe --enum foldername > HardlinksList.txt

Видалення папки швидше, ніж видалення декількох файлів.

Тож якщо ви віддаєте перевагу використовувати миш замість командного рядка, ви можете створити каталог, перемістити файли туди і видалити його (як ви вже сказали Shift + Del).