[Админам] Автобэкап файлов системным кроном

11-05-2013, 11:09 AM

Озадачился делать автобэкапы не только БД, но и файлов (раньше все делал ручками, муторно это), вот что из этого вышло... =)
Раз (или два) в неделю запускать системный крон для создания полного бэкапа форума или выбранной директории (например каталога вложений)
и сохранять где то выше каталога www
содержимое файла bash скрипта attach.sh (нашел в сети, я добавил туда только выполнение пхп файла)
обращаю внимание, что пути до скриптов и исполняемых файлов, нужно писать полные!

Code:

#!/bin/bash
#START

/usr/bin/php /full/path/to/folder/backup/job.php
TIME=`date +"%b-%d-%y"`
FILENAME="attach-$TIME.tar.gz"
SRCDIR="/full/path/to/your/attachments"
DESDIR="/full/path/to/folder/backup"
tar -cpzf $DESDIR/$FILENAME $SRCDIR
/usr/bin/php /full/path/to/folder/backup/job.php

#END

и делаем этот файл исполняемым 0700 (может оно и не нужно, но из консоли он у меня не запустился с ошибкой: access denied)

т.к. процедура не из легких, нужно закрыть форум на время выполнения бэкапа, для этого написал небольшой скриптик PHP, что бы он закрывал форум перед началом бэкапа и открывал после выполнения задачи
содержимое скрипта PHP job.php

PHP Code:


			
<?php
define('THIS_SCRIPT', 'job');
$forumroot = '/full/path/to/your/forum'; // FULL path to FORUM
define('FORUM_ROOT', $forumroot);
if(is_dir(FORUM_ROOT) AND file_exists(FORUM_ROOT . '/global.php'))
{
      chdir(FORUM_ROOT);
      require_once('./includes/init.php');
      function openclose()
      {
            global $vbulletin;
            $vbulletin->db->query_write("
                  UPDATE " . TABLE_PREFIX . "setting
                  SET value = " . ($vbulletin->options['bbactive'] ? 0 : 1) . "
                  WHERE varname = 'bbactive'
            ");
            require_once(DIR . '/includes/adminfunctions.php');
            build_options();
      }
      openclose();
}
?>

заливаем эти файлы куда то на сервак, повыше каталога www (оба файла должны быть в одном каталоге!) и идем в ISPманагер добавлять крон задачу
там выставляем выполнение ночью, скажем на 3 часа ночи и раз в неделю, например в воскресенье
прописываем полный путь до исполняемого файла attach.sh

Code:

0 3 * * 7 /full/path/to/folder/backup/attach.sh >/dev/null 2>&1

>/dev/null 2>&1 что бы не отправлялись отчеты на майл
===
разумеется, задачу можно добавить из консоли (crontab -e и бла бла бла), но я не дружу с консольными редакторами пингвина, поэтому мне проще в испманагере

если кто то подскажет, как убивать старые бэкапные файлы в этом каталоге, из этого же крон скрипта, ну скажем, если файлов скопилось больше трех, будет совсем гутт =)
в гугле есть инфа, но там как то все наворочано слишком... =\
===
да, и еще, тестировал закрытие/открытие форума на саппорте только с небольшим по размеру каталогом, поэтому не знаю, как работает баш скрипт
он выполняет команду исполнения внешнего файла (job.php) только после того, как создал бэкап или сразу же после начала бэкапа?
линуксоиды есть?

подскажете?

11-05-2013, 12:08 PM

В ISP есть штатный бекапщик, который может ежедневно, или раз в неделю, или раз в месяц делать полный бекап: все файлы, базу, почту, настройки панели. Можно исключить папки, которые не надо бекапить. Он же сам удаляет старые архивы, всё настраивается.

Этот скрипт может работать параллельно с ним, или они будут мешать друг другу?

11-05-2013, 12:40 PM

Quote:

Originally Posted by kerk

как убивать старые бэкапные файлы в этом каталоге

Code:

cd $DESDIR
ls -t *.tar.gz | tail +5 | xargs rm -f

В кроне есно что пути к файлам.

11-05-2013, 12:42 PM

Quote:

Originally Posted by Abraxas

Этот скрипт может работать параллельно с ним, или они будут мешать друг другу?

даже не знаю =)
не смотрел дефолтный бэкапер, задача была сохранять только одну-две папки
но собсно если по времени не будут совпадать задачи, то должен работать, правда если уже есть что то, что создает бэкапы, зачем еще?

11-05-2013, 12:44 PM

Quote:

Originally Posted by Abraxas

Этот скрипт может работать параллельно с ним, или они будут мешать друг другу?

Если в разное время - не будут)

Quote:

Originally Posted by kerk

он выполняет команду исполнения внешнего файла (job.php) только после того, как создал бэкап или сразу же после начала бэкапа?

В твоем случае - все последовательно. Если нужно не ожидать завершения, добавляешь &

11-05-2013, 12:46 PM

Quote:

Originally Posted by Smalesh

Если нужно не ожидать завершения, добавляешь &

вот как раз и нужно ждать, пока скрипт запихает все в архив и только после этого открывать форум =)

11-05-2013, 12:52 PM

Quote:

Originally Posted by kerk

зачем еще?

Штатный - не ахти)

Кстати. обратите внимание на последний Sypex Dumper 2 (кажется 2.11) - он умеет сам считать число архивов и чистить как по дате, так и по количеству. К тому же на оффсайте к нему лежит ftp-uploader, сразу выгрузка базы на резервный ftp.
Запускается все это дело с крона примерно так

Code:

21 4 * * * /usr/local/bin/php -q /home/кусь-кусь/sxd/index.php -j=dbbackup_data > /dev/null 2>&1 #cron backup db

Лежать может все это дело за web-директорией.

Smalesh добавил 05.11.2013 в 10:52

Quote:

Originally Posted by kerk

вот как раз и нужно ждать, пока скрипт запихает все в архив и только после этого открывать форум =)

Я понял. Тебе не хватает указывать свою причину закрытия форума, т.е. не ту, которая указана в админке форума)

11-05-2013, 12:52 PM

Smalesh,
можно пояснения по этим ключам?
например, что означает -t ?
tail +5 ?
xargs - аргументы? -f только файлы?

11-05-2013, 12:55 PM

Quote:

Originally Posted by Smalesh

не хватает указывать свою причину закрытия форума, т.е. не ту, которая указана в админке форума)

ну и это можно запихать в функцию, только зачем?
в админке указал что то нейтральное, типа "хальт! никому не рабегаться, щас вернемся..."

11-05-2013, 01:08 PM

Quote:

Originally Posted by kerk

можно пояснения по этим ключам?

Нужно)

Quote:

Originally Posted by kerk

например, что означает -t ?

ls -t выведет файлы по дате создания, начиная с самого свежего

Quote:

Originally Posted by kerk

tail +5

уберет с вывода 5 первых

Quote:

Originally Posted by kerk

xargs

xargs передаст все это дело команде rm

Quote:

Originally Posted by kerk

-f только файлы?

rm -f прибьет молча.

Предварительно задаем директорию командой cd

Smalesh добавил 05.11.2013 в 11:08

Quote:

Originally Posted by kerk

ну и это можно запихать в функцию, только зачем?

Что бы было. Даже два скрипта, один закрывает, второй открывает. Не у всех же нейтральное, а лишний раз руками править лень.)