Backup на файловом сервере

[Canabis]

Необходимо поставить механизм резервного копирования пользовательских файлов, открытых с помощью samba, на сервере. После прочтения документаций и путешествий по просторам сети, составил следующий скрипт:

Код: [Выделить]

#!/bin/sh
DATA=`date +%F`
find /var/lib/archive/ -type f -mtime -1 \
-not -wholename '/var/lib/archive/profiles/*/Recent/*' \
-not -wholename '/var/lib/archive/profiles/*/Cookies/*' \
-not -wholename '*/Thumbs.db' \
-not -wholename '*.lnk' \
-not -wholename '*.LNK' \
-not -wholename '*/desktop.ini' \
-not -wholename '*/Desktop.ini' \
-print0 | xargs -0 tar rvf "$DATA.tar" > /dev/null
gzip $DATA.tar
Этот скрипт планируется запускать каждую ночь с помощью /etc/cron.daily/.
Жду критики и предложений :)

[Canabis]

В результате сделал такой скрипт в cron.daily:

Код: [Выделить]

#!/bin/sh
BACKUPDIR=/var/backup/

# Удаление файлов старше 31 дня
for i in `find $BACKUPDIR * -mtime +31` ; do
rm -f $BACKUPDIR/$i
done

# Создание резерной копии измененных файлов за последний день
DATA=`date +%F`
find /var/lib/archive/ -type f -mtime -1 \
-not -wholename '/var/lib/archive/profiles/*/Recent/*' \
-not -wholename '/var/lib/archive/profiles/*/Cookies/*' \
-not -wholename '*/Thumbs.db' \
-not -wholename '*.lnk' \
-not -wholename '*.LNK' \
-not -wholename '*/desktop.ini' \
-not -wholename '*/Desktop.ini' \
-print0 | xargs -0 tar rvf "$BACKUPDIR$DATA.tar" > /dev/null
gzip $BACKUPDIR$DATA.tar
и такой в cron.monthly:

Код: [Выделить]

#!/bin/sh
BACKUPDIR=/var/backup_month/

# Создание резерной копии измененных файлов за последние 31 дня
DATA=`date +%F`
find /var/lib/archive/ -type f -mtime -31 \
-not -wholename '/var/lib/archive/profiles/*/Recent/*' \
-not -wholename '/var/lib/archive/profiles/*/Cookies/*' \
-not -wholename '*/Thumbs.db' \
-not -wholename '*.lnk' \
-not -wholename '*.LNK' \
-not -wholename '*/desktop.ini' \
-not -wholename '*/Desktop.ini' \
-print0 | xargs -0 tar rvf "$BACKUPDIR$DATA.tar" > /dev/null
gzip $BACKUPDIR$DATA.tar

[Athlocatle]

Работает? Не трожь!

[Canabis]

Работает. Но есть 2 недочета:
1. в архивах сохраняется полный путь (/var/lib/archive/...) хотя можно было бы оставить относительный;
2. при переносе архивов на мастдай и распаковке, руские символы нечитаемы, но это проблема в разных кодировках и вылечить, насколько я понимаю, нельзя.

[Skull]

2. при переносе архивов на мастдай и распаковке, руские символы нечитаемы, но это проблема в разных кодировках и вылечить, насколько я понимаю, нельзя.

Используйте zip или 7-zip. Если первый, то ни в коем случае не используйте WinRAR, а используйте стандартные средства Windows или WinZip.

[SantaClausRpm]

Критика такая:
1. полностью отсутствует постановка задачи (всё остальное уже можно не смотреть)
Бэкапите как я понял на том же диске, а отчеты отправляются в /dev/null. Ужос-ужос!!!  :o

2. см. п.1. Вы себе этими бэкапами весь диск забьете: 'date +%F'
3. придет юзер: надо восстановить файл имя не помню, но что-то вроде "*бла-бла*.pdf", папку, дату не помню. Сколько времени искать будете?
и т.п.

см. также http://sysadminonline.ru/category/bekap/

[Canabis]

Бэкапите как я понял на том же диске

Папку назначения легко поменять в скрипте.
а отчеты отправляются в /dev/null. Ужос-ужос!!!  :o
Покрайней мере на время тестирования исправил так:

Код: [Выделить]

# Создание резерной копии измененных файлов за последний день
DATA=`date +%F`
find /var/lib/archive/ -type f -mtime -1 \
-not -wholename '/var/lib/archive/profiles/*/Recent/*' \
-not -wholename '/var/lib/archive/profiles/*/Cookies/*' \
-not -wholename '/var/lib/archive/profiles/*/*prf*.tmp' \
-not -wholename '*/Thumbs.db' \
-not -wholename '*.lnk' \
-not -wholename '*.LNK' \
-not -wholename '*/desktop.ini' \
-not -wholename '*/Desktop.ini' \
-not -wholename '*/varentsova/*/Outlook.pst' \
-print0 2>> "$BACKUPDIR$DATA-find.txt" \
| xargs -0 tar rvf "$BACKUPDIR$DATA.tar" \
>> "$BACKUPDIR$DATA-list.txt" 2>> "$BACKUPDIR$DATA-tar.txt"
gzip $BACKUPDIR$DATA.tar 2>> "$BACKUPDIR$DATA-gzip.txt"
Буду смотреть отчеты...

2. см. п.1. Вы себе этими бэкапами весь диск забьете: 'date +%F'

1. бэкапятся только измененные/созданные файлы, а их не так уж и много в день;
2. ежедневные бэкапы храняться 31 день:

Код: [Выделить]

# Удаление файлов старше 31 дня
for i in `find $BACKUPDIR * -mtime +31` ; do
rm -f $BACKUPDIR/$i
done
а месячные будут записываться на болванки

3. придет юзер: надо восстановить файл имя не помню, но что-то вроде "*бла-бла*.pdf", папку, дату не помню. Сколько времени искать будете?

Много времени. Желание восстановить файл в основном возникает после 1-2 дней после удаления/изменени. А вероятность возникновения описанной вами ситуации в моих условиях стремиться к нулю.

[AMike]

и каждый раз, каждый админ, хоть раз в жизни напишет свою бекап систему...
Чем не устроила, хотя бы Bacula?

[SantaClausRpm]

и каждый раз, каждый админ, хоть раз в жизни напишет свою бекап систему...
Чем не устроила, хотя бы Bacula?

Бакула немного сложнее скрипта и это решение уровня предприятия. Нет смысла развертывать его для 1-го сервера. Хотя...

ps. Если что, есть где-то русскоязычная гугл-группа по бакула.

[SantaClausRpm]

Покрайней мере на время тестирования исправил так:
Буду смотреть отчеты...

2. ежедневные бэкапы храняться 31 день:

Код: [Выделить]

# Удаление файлов старше 31 дня
for i in `find $BACKUPDIR * -mtime +31` ; do
rm -f $BACKUPDIR/$i
done
а месячные будут записываться на болванки

3. придет юзер: надо восстановить файл имя не помню, но что-то вроде "*бла-бла*.pdf", папку, дату не помню. Сколько времени искать будете?

Много времени. Желание восстановить файл в основном возникает после 1-2 дней после удаления/изменени. А вероятность возникновения описанной вами ситуации в моих условиях стремиться к нулю.

Отчеты надо читать всегда. Складируйте в файл, что бэкапили + дата. Это будет типа оглавления.
А в скрипт добавьте проверку $? если есть ошибки - емайл админу.

Формат даты в имени архива переделайте так, чтобы дни следующего месяца писались на предыдущий, без всяких  -mtime +31.

С CD/DVD скоро хлебнете горя.

ps. Если занялись архивацией - самописные скрипты - потеря времени и данных. Используйте уже существующие решения.

[Canabis]

А в скрипт добавьте проверку $? если есть ошибки - емайл админу.

Что за проверка $?

Формат даты в имени архива переделайте так, чтобы дни следующего месяца писались на предыдущий, без всяких  -mtime +31.

сделал:

Код: [Выделить]

#!/bin/sh
BACKUPDIR=/var/backup/

# Удаление файлов старше 31 дня
for i in `find $BACKUPDIR * -mtime +31` ; do
rm -f $i
done

# Создание резерной копии измененных файлов за последний день
DATA=`date +%d`
find /var/lib/archive/ -type f -mtime -1 \
-not -wholename '/var/lib/archive/profiles/*/Recent/*' \
-not -wholename '/var/lib/archive/profiles/*/Cookies/*' \
-not -wholename '/var/lib/archive/profiles/*/*prf*.tmp' \
-not -wholename '*/Thumbs.db' \
-not -wholename '*.lnk' \
-not -wholename '*.LNK' \
-not -wholename '*/desktop.ini' \
-not -wholename '*/Desktop.ini' \
-not -wholename '*/varentsova/*/Outlook.pst' \
-print0 2>> "$BACKUPDIR$DATA-find.txt" \
| xargs -0 tar rvf "$BACKUPDIR$DATA.tar" \
>> "$BACKUPDIR$DATA-list.txt" 2>> "$BACKUPDIR$DATA-tar.txt"
gzip -f $BACKUPDIR$DATA.tar 2>> "$BACKUPDIR$DATA-gzip.txt"
удаление файлов старше 31 дня уберу после того, как пропадут файлы формата 2009-01-20.tar.gz

С CD/DVD скоро хлебнете горя.

почему?

ps. Если занялись архивацией - самописные скрипты - потеря времени и данных. Используйте уже существующие решения.

Уже склоняюсь. А какие посоветуете (помимо бакулы)?

[Skull]

Уже склоняюсь. А какие посоветуете (помимо бакулы)?

В школьном сервере для резервного копирования используется synbak

[SantaClausRpm]

С CD/DVD скоро хлебнете горя.

почему?

ps. Если занялись архивацией - самописные скрипты - потеря времени и данных. Используйте уже существующие решения.

Уже склоняюсь. А какие посоветуете (помимо бакулы)?

Э-ээ, я юзаю бакулу ;)
Погуглите, например, rdiff-backup и т.п.

Насчет DVD - по ссылке ходили? Читали?

[Skull]

А как им пользоваться на рабочей станции? (например чтоб текстовый файл, раз в день бекапить?)

Читайте документацию по синбаку.

[Skull]

документацию по синбаку.

...русский, где включатся? Не подскажите?

Нету. Используйте модули alterator по резервному копированию.