DD

Инструмент командной строки dd является самым простым средством полного резервного копирования.
Инструмент автоматически устанавливается при установке ОС и никаких настроек не требует.
Недостатками инструмента являются:

• избыточность  копируемых данных (так как копируется незанятое файлами пространство);
• необходимость размещения копии на отличном от копируемого физическом устройстве;
• необходимость использование дополнительных средств для копирования по сети.

Однако, команда dd весьма удобна для полного копирования дисков или дисковых разделов при переносе системы на новый диск.

Команда для копирования системного раздела диска (обычно при установке ОС с параметрами "по умолчанию" это /dev/sda1) в файл с условным названием /media/not-sda-device/sda.bin:

С учетом возможности перенаправления стандартного ввода/вывода команда dd позволяет применять для копирования алгоритмы сжатия или защитного преобразования:

Команда для восстановления системного раздела диска (для этого потребуется загрузиться с отдельного диска, и примонтировать носитель, на котором был размещен файл с образом):

Или, для сжатого файла:

Полученный с помощью инструмента dd файл с образом дискового раздела (не подвергнутый сжатию или защитному преобразованию) может быть примонтирован и использоваться как обычный дисковый раздел:

TAR

Инструмент командной строки tar в основном применяется для копирования данных в пределах одного компьютера.
Позволяет скопировать дерево файлов в один файл архива. Позволяет сжать копии с помощью программ архивации.
Для копирования с использованием сети требуется применение дополнительных средств.

Создание архива

Команда для копирования файлов в архив с условным названием /backup.tar.bz2 (файл архива располагается в той же файловой системе):

Значения параметров:

Восстановление

Пример команд для восстановления файлов из архива:

Значения команд и параметров:

Составная команда:

-x - извлечь файлы из архива
-z - распаковать извлекаемые файлы с помощью программы gunzip
-f - указывает на то, что следующим параметров является имя файла архива (в данном примере backup.tar.bz2)

Указывает, что перед началом разархивирования нужно перейти в корневой каталог (каталог "/").
Это необходимо сделать для правильного восстановления первоначального размещения файлов, так как при копировании полные имена файлов были сохранены в архиве без начального символа "/".

После переноса с помощью tar содержимого загрузочного диска на другой диск требуется восстановить системный загрузчик grub. Для этого:

выполнить следующие команды,  указав при выполнении команды dpkg-reconfigure grub-pc диск, с которого должна выполняться загрузка:

Сценарий проверки корректности работы с мандатными атрибутами

Пример сценария копирования и восстановления с сохранением мандатных атрибутов и проверкой корректности восстановления доступен по ссылке.

RSYNC

Инструмент rsync является наиболее сложным инструментом и включает в свой состав инструмент rsync и службу rsync.service, обеспечивающую удаленный доступ для копирования.
Может применяться для локального и удалённого копирования.
В отличие от tar, копирует дерево файлов в дерево файлов и не позволяет сжать полученные копии.
Пакет не устанавливается по умолчанию при установке ОС, однако он входит в зависимости многих других пакетов (например, системы контроля версий git и subversion, система резервного копирования luckyBackup, система контейнеров виртуализации LXC), поэтому может быть установлен автоматически при их установке.

Инструмент обеспечивает очень много возможностей, в том числе:

• распараллеливание операций при копировании;
• сжатие при копировании по сети;
• инкрементное копирование, в том числе копирование только изменённых частей файлов;
• копирование удалений файлов;
• возобновление прерванного копирования;
• сохранение нескольких "снимков"

При автоматической установке служба rsync.service также устанавливается, но автоматически не запускается и требует настройки.
Несмотря на отсутствие запущенной службы rsync.service, удалённое копирование по сети можно выполнять через SSH.

Создание копии

По аналогии с примером для инструмента tar, пример локального копирования корневой файловой системы в каталог /backup:

Значения параметров:

Параметр, задающий режим архивирования.
Подразумевает следующие параметры:

-r - рекурсивное копирование дерева файлов
-l - копировать симлинки как симлинки
-p - сохранять права доступа
-t - сохранять время модификации
-g - сохранять группы
-o - сохранять владельцев
-D - сохранять файлы устройств и специальные файлы

Простейший пример для удалённого копирования отличается только объектом, в который осуществляется копирование (в примере - копирование с использованием ssh на хост host.astradomain.ru под именем пользователя admin в каталог ~admin/backup/):

Заметим, что для подобного копирования служба rsync.service на компьютере-получателе не нужна, достаточно работающей службы ssh.
При этом автоматически используются алгоритмы защитного преобразования данных, встроенные  в SSH.

Более продвинутый пример удалённого копирования:

В примере применены ранее описанные атрибуты --xattrs и --acls (в краткой форме -X и -A), и добавлен новый атрибут  --rsync-path, который переопределяет вызов удалённого экземпляра rsync как:

Восстановление

Для восстановления достаточно выполнить команду, поменяв местами источник и назначение (и не забыв установить привилегию на изменение мандатных атрибутов, подробности см. в примере к инструменту tar):

Сценарий проверки корректности работы с мандатными атрибутами

Пример сценария копирования и восстановления с сохранением мандатных атрибутов и проверкой корректности восстановления доступен по ссылке.

Настройка и применение rsync.service

В принципе, для решения большинства задач копирования достаточно изложенных выше приёмов работы через SSH без использования rsync.service.
Служба rsync.service может оказаться полезна:

• для копирования очень больших объёмов информации, так как сервер rsync.service может локально определить, какую информацию копировать;
• для работы со слабыми процессорами, так как отсутствие шифрования снижает нагрузку на процессор (хотя, при необходимости, шифрование можно отключить и при использовании ssh)

Однако, возможно, в указанных ситуациях разумнее воспользоваться сервисом резервного копирования Bacula (описание см. в отдельной статье)

Для использования rsync.service следует:

Создать и заполнить файл конфигурации /etc/rsyncd.conf, например:

где:

Создание архива на удалённом компьютере

Инструмент tar не содержит собственных средств для работы через сеть, однако может использоваться совместно с другими инструментами для сетевой работы.
Типичным примерами таких инструментов  являются netcat (nc) и tar.

Инструмент Netcat (nc)

Инструмент nc разработан как средство общего назначения для передачи данных через сеть, и позволяет установить простое соединение между двумя машинами.

Сценарий применения (опции tar для простоты не указаны):

С помощью SSH

Более безопасным вариантом является использование SSH. Подробно про настройку SSH и работу с ним можно прочитать в соответствующей статье.
Пример команды:

В примере:

• Инструмент tar применяется без указания целевого файла, и выводит поток данных в стандартный вывод (stdout);
• Стандартный вывод перенаправляется в ssh;
• ssh подключается к удалённому компьютеру и выполняет на удалённом компьютере команду записи в файл;

Восстановление

Пример команд для восстановления файлов из архива:

Значения команд и параметров:

Сценарий проверки корректности работы с мандатными атрибутами

Пример сценария копирования и восстановления с сохранением мандатных атрибутов и проверкой корректности восстановления доступен по ссылке.

RSYNC

Инструмент rsync является наиболее сложным инструментом и включает в свой состав инструмент rsync и службу rsync.service, обеспечивающую удаленный доступ для копирования.
Может применяться для локального и удалённого копирования.
В отличие от tar, копирует дерево файлов в дерево файлов и не позволяет сжать полученные копии.
Пакет не устанавливается по умолчанию при установке ОС, однако он входит в зависимости многих других пакетов (например, системы контроля версий git и subversion, система резервного копирования luckyBackup, система контейнеров виртуализации LXC), поэтому может быть установлен автоматически при их установке.

Инструмент обеспечивает очень много возможностей, в том числе:

• распараллеливание операций при копировании;
• сжатие при копировании по сети;
• инкрементное копирование, в том числе копирование только изменённых частей файлов;
• копирование удалений файлов;
• возобновление прерванного копирования;
• сохранение нескольких "снимков"

При автоматической установке служба rsync.service также устанавливается, но автоматически не запускается и требует настройки.
Несмотря на отсутствие запущенной службы rsync.service, удалённое копирование по сети можно выполнять через SSH.

Создание копии

По аналогии с примером для инструмента tar, пример локального копирования корневой файловой системы в каталог /backup:

Значения параметров:

Простейший пример для удалённого копирования отличается только объектом, в который осуществляется копирование (в примере - копирование с использованием ssh на хост host.astradomain.ru под именем пользователя admin в каталог ~admin/backup/):

Заметим, что для подобного копирования служба rsync.service на компьютере-получателе не нужна, достаточно работающей службы ssh.
При этом автоматически используются алгоритмы защитного преобразования данных, встроенные  в SSH.

Более продвинутый пример удалённого копирования:

В примере применены ранее описанные атрибуты --xattrs и --acls (в краткой форме -X и -A), и добавлен новый атрибут  --rsync-path, который переопределяет вызов удалённого экземпляра rsync как:

• вызов rsync от имени и с правами суперпользоваетеля (sudo), что позволяет выставлять на удалённом компьютере любые атрибуты создаваемым файлам-копиям;.
• вызов rsync с параметром --fake-super, разрешающим выставлять создаваемым файлам-копиям атрибуты исходных файлов независимо от валидности этих атрибутов в целевой ОС.
  
  

Восстановление

Для восстановления достаточно выполнить команду, поменяв местами источник и назначение (и не забыв установить привилегию на изменение мандатных атрибутов, подробности см. в примере к инструменту tar):

Сценарий проверки корректности работы с мандатными атрибутами

Пример сценария копирования и восстановления с сохранением мандатных атрибутов и проверкой корректности восстановления доступен по ссылке.

Настройка и применение rsync.service

В принципе, для решения большинства задач копирования достаточно изложенных выше приёмов работы через SSH без использования rsync.service.
Служба rsync.service может оказаться полезна:

• для копирования очень больших объёмов информации, так как сервер rsync.service может локально определить, какую информацию копировать;
• для работы со слабыми процессорами, так как отсутствие шифрования снижает нагрузку на процессор (хотя, при необходимости, шифрование можно отключить и при использовании ssh)

Однако, возможно, в указанных ситуациях разумнее воспользоваться сервисом резервного копирования Bacula (описание см. в отдельной статье)

Для использования rsync.service следует:

1. Разрешить запуск службы, заменив в файле /etc/default/rsync значение параметра
   RSYNC_ENABLE=false
   на
   RSYNC_ENABLE=true
   
   

2. Создать и заполнить файл конфигурации /etc/rsyncd.conf, например:

   Информация
   max connections = 10 exclude = lost+found/ /tmp/ dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2 *.rar *.7z *.mp3 *.jpg [data1]     path = /data1/     comment = Public folders     read only = yes     list = yes     auth users = rsync_d1     secrets file = /etc/rsyncd.scrt     hosts allow = localhost 192.168.32.96 192.168.32.97     hosts deny = *

   где:

   max connections = 10	Максимальное количество одновременных подключений
   exclude = lost+found/ /tmp/	Список каталогов, которые не нужно копировать
   dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2 *.rar *.7z *.mp3 *.jpg	Список файлов, которые не нужно сжимать при передаче (которые уже сжаты)
   [data1]	Заголовок описания секции данных (таких секций может быть несколько)
   path = /data1/	Путь к месту хранения данных
   comment = Public folders	Комментарий
   read only = yes	Запрет на переписывание данных
   list = yes	Разрешение на просмотр каталога данных
   auth users = user1 user2	Список авторизованных пользователей
   secrets file = /etc/rsyncd.scrt	Файл с именами и паролями
   hosts allow = localhost 192.168.32.96 192.168.32.97	Список адресов, с которых разрешен доступ
   hosts deny = *	Список адресов, с которых доступ запрещен

   Подробное описание параметров конфигурации rsync.service доступно по сслыке.
   
   

3. Создать файл с адресами и паролями (в данном примере - /etc/rsyncd.scrt):

   Информация
   user1:password1 user2:password2 backup:password3

   В целях безопасности рекомендуется ограничить доступ к этому файлу:

   Command
   chmod 600 /etc/rsyncd.scrt

   
   

4. Запустить сервис:

   Command
   service rsync start

   
   

5. Доступ к серверу rsync осуществляется точно так же, как и доступ через SSH, единственное различие - в использовании "двойного двоеточия", указывающего, что нужно использовать протокол rsync:
   

   Command
   rsync -a  user1@host.astradomain.ru::data1 /tmp/

   
   

Восстановление через сеть

С помощью Netcat (nc)

С помощью SSH

Пример команды:

Создать файл с адресами и паролями (в данном примере - /etc/rsyncd.scrt):

В целях безопасности рекомендуется ограничить доступ к этому файлу:

Запустить сервис:

Доступ к серверу rsync осуществляется точно так же, как и доступ через SSH, единственное различие - в использовании "двойного двоеточия", указывающего, что нужно использовать протокол rsync:

luckyBackup

Представляет собой графический интерфейс к инструменту rsync.
По умолчанию не устанавливается, и может быть установлен с помощью графического менеджера пакетов или из командной строки:

После установки доступен через графическое меню  "Пуск" - "Системные" - "luckyBackup (суперпользователь)".
При первом запуске рекомендуется установить русский язык ("Settings" - "Language"):

Инструмент поддерживает все возможности rsync, и предоставляет возможность :

• проверка синтаксической и логической корректности заданных параметров rsync;
• тестовое (dry-run, "холостое") выполнение команды копирования с проверкой корректности заданных параметров.

Подключение работы с мандатными атрибутами

Для включения в инструменте luckyBackup работы с мандатными атрибутами:

1. Создать новую задачу (кнопка "Добавить"):
   
   
   
2. Перейти в установку расширенных параметров (Кнопка "Расширенный"):
   
   
   
3. Выбрать закладку "Опции" (возможно, для этого придётся развернуть окно на весь экран):
   
   
   
4. В нижней части выбрать закладку "Заданные пользователем" и указать там нужные параметры
   (каждый параметр указывается в отдельной строке, для примера указаны краткие формы ранее описанных параметров --xattrs и --acls):
   
   
   
5. После внесения изменений не забыть сохранить профиль ("Профиль" - "Сохранить").