Полигон-2

albr написал:

[q]

И в случае несовпадения утилита должна спрашивать, что делать с файлом - перезаписать его в архиве или восстановить из архива.

[/q]

Файлы что ли статичны? А как по CRC отличить битый файл от изменённого?

Да, файлы должны быть статичны, если говорить конкретно - это архив фотографий. И насколько я понимаю, изменение MD5 и размера файла может служить признаком того, что файл изменился. В обратную сторону, неизменность этих двух параметров с высокой вероятностью гарантирует, что исходный файл не изменился.

Про инкрементное копирование я прочитал. Похоже, это в эту сторону надо копать.

И похоже, задача-то моя проще, чем казалась на первый взгляд. Для статичных файлов нужно только одно условие - что однажды помещенный в backup файл остается там навсегда и никогда не перезаписывается.

Но остается вопрос целостности резервной копии. Тогда логика должна быть такой: если для файла нет резервной копии, то она создается. Если есть, то валидируется оригинал и копия по md5. И если хотя-бы одно что-то разъехалось - то нужно восстановить либо оригинал из копии, либо копию из оригинала. И желательно не в автоматическом режиме. Если разъехались обе копии - тады обсдача

Похоже, что сие можно shell-скриптами наваять даже...

Он сейчас занимает >350Гб на отдельном (несистемном) винче + записан на 30 с хвостом DVD-болванках, которые лежат в другом месте. Но время от времени я начинаю задумываться о более эффективных способах хранения - раз и о способах вовремя убедиться, что ничего важного не протухло - два.



А вот система меня меньше всего беспокоит, кстати. Ибо переустановить винду с софтом - это занятие на несколько часов всего.

Git, например.

Да, про git я тоже думал, вернее не про git, а про subversion. Думал-думал, да так ничего и не выдумал


CodeMaster написал:

[q]

А исходный набор данных тоже на одном диске?

[/q]

В смысле? Конкретно сейчас у меня есть в компе три диска:
- маленький ssd исключительно под винду+софт+профили. Никак не могу переучить жену хранить нужные файлы вне рабочего стола винды, так что это тоже надо по умному backup-ить по-хорошему;
- обычный sata-шный пятисотгиговник под данные, но особо ценного там, пожалуй, только фотки.
- недавно его перестало хватать и я наконец-таки доставил туда давно купленный сигейтовский терабайтник. Вчера, подумав, что разговоры про бекап могут быть не к добру, перелил туда копию архива фоток

В дополнении к этому фотографии еще записаны на 30 dvd.

Фотохранилище организовано таким образом, что файлы там хранятся с разбивкой по dvd-дискам (томам), кстати его размер оказался всего 160Гб, так что насчет 350 это я вчера загнул

Суть в следующем. Нужно периодически проверять целостность архива фотографий на жестком диске и на компакт-дисках. И в ходе вчерашнего обсуждения у меня родилась мысль, как это можно сделать. Нужно написать утилиту, которая будет в заданный файл выводить листинг содержимого каталога в виде: имя файла:размер:контрольная сумма. Затем для тома формируется такой файл листинга, который складывается в холодное сухое место. Для проверки листинг делается снова (во временный файл) и файлы сравниваются тривиальным file compare. Для вычисления контрольной суммы можно openssl припахать, тогда оно еще и портабельно будет.

Надеюсь за выходные осуществить такую штучу.