Чому фотографії пошкоджуються на жорстких дисках ПК?

Я не професійний фотограф, але дуже ціную свої фотографії. Іноді, коли я переглядаю їх через місяці чи роки після того, як я їх забрав, деякі з них виявляються корумпованими без видимих ​​причин. Я часто отримую такі речі, як сірі зони, змінені кольори, починаючи з певного моменту на фотографії або навіть зовсім не можна побачити. Я використовую як ОС Windows, так і Linux на своїх ПК.

Чому це відбувається і, головне, як цього уникнути ?

Є дві основні причини. Перший - деградація даних . Біти, що зберігаються на магнітних носіях (наприклад, на вашому жорсткому диску), можуть з часом втратити свою магнітну орієнтацію, пошкодивши біт. У суворих умовах (висока спека і вологість) фізичні середовища можуть почати руйнуватися. Для твердотільних носіїв, таких як SSD, механізм інший, але результат схожий.

Більш поширеним явищем є беззвучна корупція даних , внаслідок якої виникає помилка під час запису чи читання даних. Хоча зображення на попередньому посиланні є крайнім прикладом, часто один перевернутий біт може пошкодити зображення.

Є два рішення цих проблем, і якщо припустити, що ви обертаєте резервні копії, резервне копіювання самостійно не допоможе. Більш складним і технічним підходом є використання файлової системи із вбудованими механізмами цілісності даних (наприклад, ZFS або btrfs), тоді як більш простим підходом було б обчислити хеш для кожного файлу між резервними копіями для виявлення будь-яких змін.

Я не буду надто переживати про те, як це станеться, тому що жорсткі диски вийдуть з ладу; Як і все на цьому світі, вони не є ідеальними. Ви не можете потрапити до стану, коли ви ніколи не втратите файл.

Однак ви можете потрапити до стану, коли ви ніколи не втрачаєте фотографію - це робите, маючи кілька копій на окремих жорстких дисках, включаючи принаймні одну в окремому фізичному місці. Тоді не важливо, що один диск виходить з ладу, тому що ви можете просто отримати фото з іншого місця.

Відповідь на те, чому це відбувається, залежить від типу накопичувача, типу файлу, файлової системи та використовуваної операційної системи, тому не можна дати повну відповідь на це питання.

Щодо того, як цього уникнути, інша відповідь стосується створення резервних копій - однак, при такій пошкодженні файлів, вам потрібен спосіб визначити, коли певна копія вашого файлу була пошкоджена, і уникати копіювання цього файлу у ваші резервні копії. Зробити це дуже просто з 2 пошкодженими копіями файлу. Технічна відповідь - використовувати контрольні суми та порівняти їх для виявлення пошкоджених файлів.

Найкращий спосіб уникнути цього дня - це використання сервісу онлайн-сховищ, який обробляє всі надмірності та цілісність файлів для вас.

Файли фотографій у цьому плані не особливі, будь-який файл на комп'ютері може пошкодитися. JPEG-файли, ймовірно, виявляють корупцію очевидним чином, ніж багато інших типів файлів, хоча ви можете це помітити більше (див. Коментар @ pipe на відповідь @ alldayremix).

Файли можуть бути пошкоджені багатьма способами (жорсткі диски, що не є SSD), можна надто близько розміщувати до магніту, компакт-диски та DVD-диски можуть поступово гнити, а електричні перешкоди та помилки в прошивці чи програмному забезпеченні можуть пошкодити файли під час руху. Є й інші причини, але я б радив поцікавитись у більш стек, пов’язаному з комп'ютером, якщо ви хочете детальніше розібратися.

З точки зору того, що можна з цим зробити, найкраща відповідь, яку я можу придумати, - це обчислення хешей і збереження кількох копій фотографій. З цією метою я написав безкоштовну програму з відкритим кодом для вирішення цього питання для себе: Archiverify .

Він працює, обчислюючи хеші, зберігаючи хеші поряд із зображеннями та порівнюючи файли з хешами під час його запуску. Поки у вас є більше однієї копії файлу, він може автоматично оновити пошкоджену копію від хорошої (за умови, що обидві не будуть пошкоджені відразу).

Крім того, я впевнений, що доступні послуги з зберігання / резервного копіювання, які періодично здійснюватимуть хеширование та перевірку для вас.

Як зазначено вище, існує кілька причин. Це може бути просто природний знос з часом, який пошкоджує біти файлів або фізичну деградацію. Якщо ви постійно знаходите фотографії та інші файли, сильно пошкоджені, це може бути ознакою комп'ютерного вірусу. Якщо ви не хочете, щоб ваші файли були пошкоджені першими двома способами, тоді вкладайте їх у SSD, оскільки він не буде деградувати так швидко, а в 10 разів швидше. (Ви також можете зробити швидке сканування вірусів.)

Чому це відбувається і, головне, як цього уникнути?

Вам слід задати це питання на Security.SE.

Щоб уникнути корупції, слід створити резервні копії .

В інформаційних технологіях резервне копіювання або процес резервного копіювання відноситься до копіювання та архівування комп'ютерних даних, щоб вони могли бути використані для відновлення оригіналу після події втрати даних. Форма дієслова - це резервне копіювання двома словами, тоді як іменник - резервний.

Записувані цифрові оптичні носії, такі як CD-R та DVD-R, можуть бути пошкоджені навіть сонячним світлом. Щоб уникнути цього, ви можете використовувати щось на зразок стратегії подвійного резервного копіювання. Однак у наш час у нас є такі прекрасні онлайн-методи для резервного копіювання фотографій, як Instagram або інші онлайн-сервіси. Наприклад, за Google Drive є велика кількість центрів обробки даних. Кожна ваша фотографія буде зберігатися у файловій системі Google (GoogleFS або GFS) на серверах, розміщених у цих центрах обробки даних. Ця файлова система була розроблена Google для захисту користувачів від втрати даних. Ваші фотографії будуть збережені в трьох зразках у трьох різних географічних місцях, щоб захистити від втрати даних через локальні катастрофи від блискавки, цунамі, землетрусу тощо.

Спробуйте використовувати декілька онлайн-сервісів одночасно (наприклад, megaupload, dropbox, wuala, 4shared тощо).

Згодом, для найбільшого спокою, що жодна з ваших фотографій не була змінена або пошкоджена, ви використовуєте контрольні суми для перевірки цілісності даних.

Контрольна сума - це невелика за розмірами дата з блоку цифрових даних з метою виявлення помилок, які могли бути введені під час її передачі чи зберігання.

Найкращий спосіб - використовувати криптовалюту для такого завдання. Використовуйте останні стабільні хеш-функції, такі як SHA-256 або SHA-512. Старіші алгоритми, такі як MD5, зараз вважаються небезпечними. Сучасний зловмисник може зробити підробку ваших даних тим самим md5sum.

Коли ви закінчите, у вас буде розподілена система резервного копіювання, яку не буде легко зламати навіть найдосконаліші та віддані нападники (такі як напади, що мають загальнодержавну державу).

• Два копії DVD із однаковими даними всередині:

     1. Photo1.jpg
     2. Photo2.jpg
     3. Photo3.jpg
   ...
   999. Photo999.jpg
  1000. SHA256SUM
  

  Якщо цей SHA256SUM повинен містити щось на зразок:

  e5347dce99eb8cf694cf708d4a17d83abb3ec378241b5878c0abdab045859b24  Photo1.jpg
  b497a12b608def869a0429d7e6bbbd112bd413256201647a5aff6773de3b7bd9  Photo2.jpg
  b15b0d99bf8135286f444fc62bcf70278a89e60650252ab2bd3b6fffd40c4255  Photo3.jpg
  ...
  209732fbdb499f0cad6fd3311b45185667bbb40e501106997d3ac2c49cb30a7e  Photo999.jpg
  

  Лінії - 209732fbdb499f0cad6fd3...це унікальні хеші ваших фотографій. Коли один біт вашої фотографії стане пошкодженим, цей хеш буде змінено на інший, так що ви можете перевірити хеші щодо цього списку, щоб бути спокійними, що ваші фотографії зберігають цілісність.

• По-друге, всі ці фотографії та цей хешовий файл SHA256SUM завантажуються, наприклад, у дроп-бокс та ще десь.

Тепер у вас є 5 копій ваших фотографій. 2 офлайн, 2 он-лайн, 1 на поточному жорсткому диску.

Схема може бути перетворена на щось більш надійне, звичайно. Ваша уява - ваш козир.

Я не можу виключити, що стандарти jpeg між вашою старою камерою та останньою програмою перегляду зображень дещо розходяться, тому фотографії виглядають лише пошкодженими. Іноді програмне забезпечення відповідає лише попередній версії стандарту. Спробуйте старший переглядач (на старому комп’ютері).