Bit rot: что такое тихое повреждение файлов и как защитить домашний архив

Так называют ситуацию, когда информация на носителе меняется без ведома пользователя и без сообщений об ошибке. Диск не сломан, файловая система не сообщает о проблемах, но при чтении получается не то, что записывали. Термин неформальный, в технической литературе чаще говорят о незаметном повреждении данных или деградации носителя.

Последствия зависят от типа файла. Текстовый документ с одним изменённым байтом может открыться без заметных дефектов, архив — перестать распаковываться, а фотография — получить полосу искажений или перестать открываться вовсе. Особенно неприятно, что вы узнаёте об этом спустя годы, когда доступ к исходному файлу уже утрачен, а все копии были сделаны с уже испорченного экземпляра.

Точную частоту таких событий оценивать нельзя: она зависит от носителя, условий хранения и возраста. Поэтому говорить стоит о принципе, а не о цифрах.

Источников несколько, и не все они связаны с самим носителем.

• Старение носителя: у твердотельных накопителей и флеш-карт заряд ячеек со временем может ослабевать, особенно если устройство долго лежит без питания.
• Магнитные диски: со временем возможны сбои чтения, которые встроенная коррекция ошибок обычно исправляет, но не всегда.
• Сбои при записи: внезапное отключение питания или извлечение носителя во время копирования.
• Ошибки оперативной памяти и контроллеров, из-за которых данные портятся по пути к диску.
• Программные ошибки в файловой системе или в программе копирования.

Оптические диски тоже подвержены деградации, поэтому «записал и забыл» нельзя считать надёжной стратегией для любого носителя.

Надёжный способ обнаружить изменения — сравнивать файл с его эталонными данными. Для этого используют контрольные суммы: короткий отпечаток содержимого, который вычисляется заранее и затем сверяется. Если хотя бы один байт изменился, отпечаток почти наверняка будет другим. Как вычислить и сравнить такой отпечаток, написано в отдельном материале о проверке файла по контрольной сумме.

Для большого архива удобно сохранить список сумм в текстовый файл рядом с данными и периодически запускать проверку всей папки. Некоторые программы для резервного копирования и сетевые хранилища умеют делать это сами. Другие файловые системы хранят контрольные суммы внутри и способны сообщить о повреждении при чтении или плановой проверке.

Обратите внимание: сумма показывает, что файл изменился, но не исправляет его. Для восстановления нужна исправная копия.

Практика сводится к нескольким привычкам, не требующим сложного оборудования.

1. Храните ценные данные минимум в двух независимых копиях на разных носителях.
2. Создайте и сохраните список контрольных сумм для архивов, которые вы не меняете: фотографии, сканы, документы.
3. Раз в несколько месяцев или раз в год проверяйте архив и сравнивайте копии между собой.
4. Подключайте редко используемые носители и проверяйте их, не оставляйте их лежать без дела на много лет.
5. Используйте источник бесперебойного питания или аккуратно извлекайте носители, чтобы избежать сбоев при записи.
6. Копируйте данные с проверкой результата, а не только по размеру.

Если вы нашли расхождение между копиями, не перезаписывайте одну другой вслепую: сначала определите, какая из них осталась верной.

Массив из нескольких дисков повышает доступность, но не отменяет описанную проблему. Классический массив чаще всего не знает, какая из двух копий верная, если обе читаются без ошибки, но различаются. Поэтому он не заменяет проверку и резервную копию, как разбирается в материале о RAID дома.

Некоторые современные файловые системы ведут контрольные суммы блоков и при наличии избыточных данных способны исправить ошибку. Это полезное свойство, но оно зависит от конкретной системы и настройки, а также требует достаточно ресурсов и подготовки пользователя. Если вы выбираете сетевое хранилище, посмотрите в документации производителя, поддерживает ли оно такие проверки и как их включить.

В любом случае эта функция дополняет, а не заменяет копии на других носителях.

Не все файлы одинаково страдают от изменения нескольких байтов. Сжатые форматы и архивы особенно уязвимы: небольшая ошибка внутри может сделать недоступным весь архив или большой его фрагмент. Многие форматы фотографий и видео переносят единичные ошибки лучше и показывают их как артефакты изображения, но это не означает, что файл прочитается полностью.

Простой текст и документы без сжатия иногда сохраняют читаемость, но и в них изменённый байт может остаться незамеченным и исказить цифры в таблице или слово в договоре. Именно такие тихие правки опаснее заметных поломок.

Поэтому для архивов, которые вы не собираетесь править, разумно держать эталонные суммы и независимые копии. Для часто меняющихся рабочих файлов достаточно регулярного резервного копирования с историей версий.

Обнаружив повреждённый файл, не торопитесь перезаписывать им другие копии. Порядок действий такой:

1. Остановите автоматическое копирование и синхронизацию, чтобы порча не разошлась по другим носителям.
2. Найдите исправные копии: на другом диске, в облаке, в резервном архиве прошлых периодов.
3. Сравните контрольные суммы копий и определите те, которые совпадают с эталоном.
4. Восстановите файл из исправной копии и проверьте, что он открывается.
5. Проверьте исходный носитель на ошибки и состояние по диагностическим параметрам.
6. Если ошибки повторяются, замените носитель.

Если исправной копии нет, для некоторых форматов существуют средства частичного восстановления, но результат не предсказуем, и работать с ними лучше на копии файла.

Не стоит впадать в крайности. Для большинства домашних пользователей достаточно разумной осторожности: несколько копий, редкая проверка и внимание к необычному поведению файлов. Покупать сложное оборудование ради защиты от такого риска обычно не требуется, но привычку сверять важное полезно выработать заранее.