Backup почты

[CrazyPilot]

Доброго времени суток!

Взываю о помощи :-)

Есть почта на серваке, хранится на железном рейде 5 на ufs. Сейчас в сумме около 250 гигов. Хранится в maildir.
Как организовать backup? Налабал скрипт на perl, который tar'ит каждую папку, потом ее gzip'ит и сливает на ftp.
Все ок, только вот из-за объема почты не успевает уже за ночь все сделать. Пробовал pbzip2 - тот еще медленнее, хотя машина шустрая.
Может из-за того что bzip не совсем подходит для архивирования почты...хз. В алгоритмах архивирования совсем не шарю.

Код: Выделить всё

[root@flanker ~]# cat /var/log/dmesg.yesterday | grep CPU
CPU: Intel(R) Xeon(TM) CPU 3.00GHz (3000.12-MHz 686-class CPU)
  Logical CPUs per core: 2
FreeBSD/SMP: Multiprocessor System Detected: 4 CPUs
[root@flanker ~]# cat /var/log/dmesg.yesterday | grep mem
real memory  = 3489071104 (3327 MB)
avail memory = 3411685376 (3253 MB)

Бэкаплю на виндовый сервак, по ftp. На этом серваке ftp складывает файлы на один sata'шный винт.
Чем можно улучшить эффективность выполнения? Может существует шустрый эффективный архиватор?

Спасибо заранее!

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[princeps]

может инкрементальное архивирование тебе попробовать?

[CrazyPilot]

Эмм, не совсем представляю себе как его организовать и как быть в ситуации восстановления...
Сделал я фул бэкап maildir. И получил на выходе maildir.tar.gz
Как сделать инкрементальный? Распаковывать фул бэкап, смотреть что поменялось на fs и это бэкапить? Как-то не аллё, либо я неправильно понимаю.

Ща вот смотрю в сторону дифференциального бэкапа. Но в любом случае это не отменяет периодического фул бэкапа, который тоже надо делать. И вопрос в том, как его оптимизировать...

[angelas_]

Можете посмотреть в сторону rsync'а. Но я бы скорее всего поставил что-нибудь типа бакулы или аманды. Хотя мне больше бакула нравится, но аманда тоже совсем так ничего.

[princeps]

Эмм, не совсем представляю себе как его организовать и как быть в ситуации восстановления...Сделал я фул бэкап maildir. И получил на выходе maildir.tar.gzКак сделать инкрементальный? Распаковывать фул бэкап, смотреть что поменялось на fs и это бэкапить? Как-то не аллё, либо я неправильно понимаю.

Зачем же изобретать велосипед? Если по-простому, то dump умеет делать инкрементальные копии, а restore потом из них восстанавливать без лишних движений.
Если у тебя есть доступ на сервер, где бэкапы лежат, не только по ftp, то тогда действительно, лучше делать бакулой или амандой, здесь на сайте есть статьи. Они могут шифровать трафик, так что нет проблем с пропихиванием его через интернет. Мне, в отличие от angelas_'а больше нравится amanda
У rsync, на мой взгляд, при использовании для бэкапов есть два недостатка:
1) бэкап занимает место точно такое же, как и резервируемая система. Может как-то и можно прикрутить к нему архиватор, но я не знаю как.
2) Вообще-то лучше хранить несколько бэкапов, например, по одному за каждые последние 7 дней. Если ты что-нибудь сломаешь, а поймёшь это дня через три, то будет возможность откатиться на более раннюю дату, чем вчерашний день.

Ща вот смотрю в сторону дифференциального бэкапа. Но в любом случае это не отменяет периодического фул бэкапа, который тоже надо делать. И вопрос в том, как его оптимизировать...

полный бэкап каждый день и раз в неделю - две большие разницы, имхо. Его можно и оставить как есть, на самое ненагруженное время записать, например, с субботы на воскресенье, чтоб к понедельнику он уже гарантированно сделался.

[silent]

Как вариант, fsbackup посмотри.

[CrazyPilot]

Спасибо за ответы

Думаю посмотреть в сторону rsync и схемы дифференциального бэкапа

[CrazyPilot]

shit, rsync под винду нет как я понял...

[angelas_]

Под винду попробуйте robocopy... Мой коллега таким образом перекидывает инфы с одного раздела на другой по принципу rsync. Да думаю поискав найдёте, благо информации в гугле много...

[CrazyPilot]

йа хотел rsync с правильной ос на винду)

[angelas_]

Ну мы тут пробовали какие-то модификации rsync'а на виндах... К сижалению не катит. Криво работает и не делает то, что ему велено. В общем, выкинули это поделие и использовали стандартный виндовый backup.