Каким бесплатным ПО бэкапить большие файлы под Windows с дедупликацией?

один из вариантов решения является смена типа почтовой базы с mbox - все письма лежат в одном большом текстовом файле на тип maildir - каждое письмо лежит в отдельном файле настройка thunderbird.
дифференциальный бекап maildir становится элементарным :)
утилиты дифференциального бекапа mbox не нашел :(

однако минус в большом количестве файлов в папке, ntfs кажись умеет делать B-tree над списком файлов, однако все равно тормозит на папках с гигантским количеством файлов.
ну и сама мозила считает маилдир в громоптице недоделаным :-/

ну и еще вариант бекапить в файловую систему с CoW (btrfs zfs) там есть функция дедупликацией блоков файла. там кажись даже доделали онлайн дедупликацию блоков файла. но не ковырял.

странно, в документации к rsync написно что delta-algorithm работает по умолчанию, можно задать размер блока

--block-size=SIZE, -B
This forces the block size used in rsync's delta-transfer algorithm to a fixed value. It is normally selected based on the size of each file being updated. See the technical report for details.

Beginning in 3.2.3 the SIZE can be specified with a suffix as detailed in the --max-size option. Older versions only accepted a byte count.

включить/выключить опциями:

--whole-file, -W
This option disables rsync's delta-transfer algorithm, which causes all transferred files to be sent whole. The transfer may be faster if this option is used when the bandwidth between the source and destination machines is higher than the bandwidth to disk (especially when the "disk" is actually a networked filesystem). This is the default when both the source and destination are specified as local paths, but only if no batch-writing option is in effect.

--no-whole-file, --no-W
Disable whole-file updating when it is enabled by default for a local transfer. This usually slows rsync down, but it can be useful if you are trying to minimize the writes to the destination file (if combined with --inplace) or for testing the checksum-based update algorithm.

Не совсем ясна задача. Ты хочешь сказать, что у вас в сети почтовые клиенты используют протокол POP3?
Используй IMAP - и все письма пользователей будут храниться на сервере.
И тебе не придётся их бекапить с локальных АРМ пользователей.

Или вы используете сторонние почтовые сервера типа майлру яндекс, гмейл и тому подобное?
Так пусть тогда они за письма пользователей и отвечают, это не зона ответственности сисадмина.
Вопрос скорее не технический, а организационный.

А так - для бекапов файлов пользователей можно использовать bacula

На самом деле можно решить проблему другим путем. Если нам важно именно сокращение размера хранилки, а нагрузка на сеть нас не волнует, то дедупликацию можно делать уже на сервере где хранятся резервные копии. В большинстве случаев удастся не только дедуплицировать данные с одного клиента, но и между клиентами наверняка будет много общих паттернов в данных. Хранилок которые это умеют делать достаточно. Из кустарных это какой-нибудь ZFS. Есть и много платных СХД с оффлайн дедупом. Важно на вход им подавать не сжатые данные. То есть любой системой резервного копирования (хоть бакулой, хоть батником) забираем данные с клиентов, полностью копируем на СХД в распакованном виде (в момент передачи можно сжимать), а дальше пусть сервер разбирается.

Насчет платной/бесплатной - кого сейчас вообще волнует платность и честные взаимоотношения с veeam? Если очень хочется купить что-то, то возможно у киберпротекта есть такой же функционал.

файл будет копироваться целиком, ведь он целиком и перезаписывается виндой...

Пора бы уже привыкнуть, что бесплатно таких вещей не бывает.

Вы Сисадмин, тех поддержка , или бухгалтер ?
Пиши скрипт в CMD или ps с относительными путями , кидай в политики , прикручивай сжатие 7zip.

Всё

"Пока единственное решение, в котором такой функционал указан - Veeam Agent for Windows, но проверка показала, что в бесплатной редакции это не работает"
Есть и бесплатный вариант, где всё это работает.