Видаліть повторювані повідомлення з Maildir

У мене є купа дублікатів повідомлень у Maildir мого сервера IMAP. Який найкращий спосіб їх видалити?

Деякі відповідні моменти:

• Спільний ідентифікатор повідомлення зазвичай є досить хорошим визначенням дубліката. Крихітний сценарій, який видаляє всі, крім одного з повторюваних повідомлень, спрацював би.
• Іноді доводиться знаходити дублікати на основі спільних тел повідомлень. Яке тут загальне визначення? Побітовий еквівалент? Що з дивними відмінностями в обертанні рядків, втечах, кодуванні символів?
• Іноді між "повторюваними" повідомленнями є якась змістовна різниця. Який найкращий спосіб переглянути відмінності в наборах "копій" повідомлень? Відмінності?

Я вніс кілька суттєвих вдосконалень у згаданий вище сценарій Кевіна, і він був досить люб'язним, щоб прийняти мої прохання про витяг. Врешті-решт ми розділимо це на спеціальний проект, який ви можете знайти тут:

https://github.com/kdeldycke/maildir-deduplicate

для загальних файлів у Linux я використовую утиліти fdupes для видалення дублікатів файлів. Я виявив, що це також працює для повідомлень Maildir.

Gnome's Evolution (графічний агент користувача пошти) має вбудовану функцію для видалення дублікатів пошти. Як пояснено на цій довідковій сторінці , вона зводиться до:

1. Виберіть підозрілі повідомлення (або просто всі повідомлення)
2. Перейдіть до меню " Повідомлення" , виберіть " Видалити копії повідомлень" .

Voilà.

PS Evolution може отримати доступ до ваших повідомлень локально (MailDir, MH, Mbox) або через IMAP.

Найкраще , що я знайшов сьогодні Кевін Deldycke в Maildir-Дедупліціровать .

• Він ігнорує X-MIMETrackзаголовок за замовчуванням і порівнює заголовки, використовуючи SHA224дайджест.
• Він автоматично видаляє дублікати, не вимагаючи підтвердження; однак існує режим «сухого запуску», який дозволяє попередньо переглянути, які дублікати будуть видалені.

Надіюсь , хтось може зробити щось фантазійне з delIMAPdups.pl Ріка Сандерса , що є частиною його Інструментів IMAP .