Запитання з тегом «deduplication»

Дедуплікація - це пошук та видалення дублікатів файлів.



3
Як вивести копію даних 40TB?
Я успадкував дослідницький кластер із ~ 40 ТБ даних у трьох файлових системах. Дані тягнуться майже до 15 років, і, швидше за все, існує велика кількість дублікатів, оскільки дослідники копіюють дані один одного з різних причин, а потім просто зависають на копії. Мені відомо про такі інструменти, як дедупінг, як …

6
Який найкращий спосіб видалити дублікати файлів зображень із комп'ютера?
У мене на комп’ютері Windows багато копій файлів зображень, в різних папках і з різними іменами файлів. Який сценарій або безкоштовна програма Python ви б рекомендували видалити дублікати? (Я читав цю аналогічне питання, але плакат є просять про візуальних дублікатів з різними розмірами файлів. Mine є точними копіями з різними …

3
Чи існує програма стиснення або архівації для Windows, яка також робить дедуплікацію? [зачинено]
Зачинено. Це питання поза темою . Наразі відповіді не приймаються. Хочете вдосконалити це питання? Оновіть питання, щоб воно було актуальним для Super User. Закрито 3 роки тому . Я шукаю програму архіватора, яка може виконувати дедупликацію (дедупінг) у архівах, що архівуються. Після розпакування архіву програмне забезпечення буде повертати всі файли, …

4
Як видалити дублікати рядків на основі деяких стовпців
У мене є лист Excel, який містить дублікати рядків Я хочу видалити рядок, якщо його стовпці A C D E F є однаковими (Ігнорувати B під час обчислення дублікатів, але видалити його під час видалення рядка) На даний момент він ігнорує B при порівнянні, а також видаленні.

7
Способи декупажу файлів
Я хочу просто зробити резервну копію та архівувати файли на декількох машинах. На жаль, у файлах є великі файли, які є одним і тим же файлом, але по-різному зберігаються на різних машинах. Наприклад, може бути кілька сотень фотографій, скопійованих з одного комп’ютера на інший у вигляді спеціального резервного копіювання. Тепер, …

5
Безкоштовний пошук дублікатів mp3 [закрито]
Зачинено. Це питання поза темою . Наразі відповіді не приймаються. Хочете вдосконалити це питання? Оновіть питання, щоб воно було актуальним для Super User. Закрито 5 років тому . Колись назад, я використовував пошук дублікатів файлів для mp3, аналізуючи вміст. На жаль, це не було безкоштовно, і програмне забезпечення мало багато …

3
Як я можу мати два файли з тим самим іменем у каталозі, коли він встановлений з NFS?
У мене є тест додатків C ++, який створює 10 000 файлів у каталозі, встановленому NFS, але нещодавно мій тест не вдався через те, що один файл із цим іменем у цьому каталозі з’явився двічі з усіма іншими 10 000 файлами. Це можна побачити на Linux Centos v4 або v5, …

1
ZFS стиснута і вилучена файлова система у файлі
Я можу створити squashed файлові системи з mksquashfs таким чином: mksquashfs dir-1 dir-2 ... dir-n filesystem-on-file.squash -comp xz -Xbcj x86 -Xdict-size 1048576 -b 1024k mksquashfs забезпечує стиснення і дедупликацию даних, але тільки для читання. Тепер я хотів би створити кілька тестових файлових систем з ZFS з включеною як дедуплікацією, так …

3
Два файли PDF, однакові за винятком можливо різних титульних сторінок - як видалити дублікати?
У мене є маса файлів у форматі PDF - це статті, завантажені з різних веб-сайтів журналу. Проблема полягає в тому, що деякі з цих файлів PDF - це дублікати один одного. Однак якщо я запускаю основний пошук дублікатів файлів, вони не з’являться, оскільки журнали мають (дещо дратівливу) звичку розміщувати титульну …

1
Як знайти витягнуті Zip файли і їх папку в Mac
Як я можу перерахувати всі ZIP файли і їх витягнуті папки для того, щоб видалити одну з них, я завантажив багато ZIP файли в роки (як і всі) і витягнув їх так, тепер вони беруть вдвічі більше місця, ніж вони повинні.

0
Видалення відповідей із завантажених електронних листів (тобто непослідовні повторювані речення з файлу txt)
Привіт, експерти та однокурсники! У мене є десятки текстових файлів, які містять щомісячні архіви listserv. Я намагаюся усунути / видалити цитовані відповіді, щоб кожне повідомлення з’являлося лише один раз у всіх файлах. Більшість користувачів списку не використовують вбудоване цитування, тому це корисно! У мене є ідентифікатор повідомлення, відповідь у відповідь …

1
Знайти дублікати певного файлу [закрито]
Я завантажив бібліотеку іконок з якогось веб-сайту, і я використав декілька значків у проекті. Тепер мені потрібно знайти ще одну іконку з бібліотеки, але я не можу знайти бібліотеку на своєму комп’ютері. Оскільки я скопіював декілька файлів із бібліотеки, я знаю, що у мене на диску є дублікати, тому я …

1
Повторюваний пошук відео? [дублювати]
На це запитання вже є відповідь: Як виявити подібні відео 5 відповідей Чи є така річ, як дублікат пошуку відео, який буде шукати дублікати на основі відео / аудіо порівняння файлів, а не тільки розмір файлу?
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.