Каждый, кто хоть раз копировал на сервер большую папку с файлами, знает, как это долго. А если нужно обновить уже скопированные данные, то повторять процесс заново кажется бессмысленным. Именно для решения этой задачи был создан протокол rsync. В этой статье мы простыми словами разберем, что такое rsync, как работает его уникальный алгоритм и почему он остается незаменимым инструментом системных администраторов.
Что такое Rsync и для чего он нужен
Rsync — это утилита и протокол для эффективной синхронизации файлов и каталогов между компьютерами. Его ключевая особенность — передача только измененных частей файлов, что значительно экономит время и трафик при повторных синхронизациях.
Утилита была разработана в 1996 году австралийским программистом Эндрю Триджеллом. Она быстро стала стандартом де-факто в мире Unix-подобных систем и остается таковым до сих пор благодаря своей эффективности и гибкости.
Основные возможности rsync:
- Копирование и синхронизация файлов локально и удаленно
- Передача только различающихся частей файлов (дельт)
- Сохранение прав доступа, владельцев и временных меток файлов
- Поддержка сжатия данных для экономии трафика
- Возможность удалять файлы на приемнике, которых нет на источнике
- Возобновление прерванной передачи
Как работает алгоритм Rsync
Главная «магия» rsync заключается в его уникальном алгоритме, который позволяет синхронизировать файлы, не имея обоих файлов на одной машине.
Процесс работы выглядит так:
1. Сравнение файлов на уровне блоков
Источник и приемник обмениваются информацией не о содержимом файлов, а о контрольных суммах их частей. Алгоритм разбивает файл на блоки фиксированного размера (обычно несколько килобайт) и вычисляет для каждого блока две контрольные суммы. Приемник отправляет эти суммы источнику. Затем источник находит совпадающие блоки в своей версии файла. Только блоки, которые изменились, отправляются на приемник.
2. Конвейерная обработка
После обмена списком файлов rsync строит конвейер из трех процессов, работающих параллельно:
- Генератор сравнивает списки файлов на источнике и приемнике и определяет, какие файлы нужно передать или удалить.
- Отправитель получает от генератора список файлов для передачи и отправляет измененные блоки данных.
- Приемник записывает полученные данные на диск.
Эта параллельная обработка значительно повышает производительность синхронизации.
Основные режимы работы
Rsync может работать в нескольких режимах в зависимости от задачи:
Локальная синхронизация
Копирование файлов в пределах одной машины, как улучшенная версия команды cp:
rsync -av /source/directory/ /destination/directory/
Удаленная синхронизация через SSH
Самый безопасный способ — передача данных через зашифрованное SSH-соединение:
rsync -avz -e ssh /local/file user@remote_host:/remote/directory/
Этот режим работает «из коробки» на большинстве систем с установленным SSH.
Режим демона (Rsync Daemon)
Rsync может работать как сервер, ожидающий подключений на порту 873. В этом режиме он использует собственный протокол rsync://:
rsync -av /local/directory/ rsync://remote_host::module/
Этот режим часто используют для организации централизованных резервных копий.
Ключевые опции: что они делают
| Опция | Назначение |
|---|---|
-a (archive) | Архивирование: рекурсивное копирование с сохранением прав доступа, владельцев и временных меток |
-v (verbose) | Подробный вывод информации о процессе |
-z (compress) | Сжатие данных для экономии трафика |
--delete | Удаляет на приемнике файлы, которых нет на источнике |
--dry-run | Тестовый запуск без реальных изменений |
--exclude | Исключает файлы или каталоги из синхронизации |
--partial | Сохраняет частично переданные файлы при прерывании |
Rsync против SCP: что выбрать
Оба инструмента передают файлы, но подход у них разный:
| Характеристика | SCP | Rsync |
|---|---|---|
| Принцип работы | Копирует файл целиком каждый раз | Передает только изменения |
| Эффективность | Высокая для единичных файлов | Максимальная для повторяющихся синхронизаций |
| Возобновление после обрыва | Нет | Да (с опцией --partial) |
| Где используется | Любая система с SSH | Требует установки rsync на обоих концах |
| Когда выбирать | Для разовых копий | Для скриптов, бэкапов, регулярных синхронизаций |
Проще говоря, SCP — это быстрый и простой «курьер», который доставляет файл в целости, даже если это большой архив. Rsync — это «архитектор», который запоминает, что уже было доставлено, и в следующий раз приносит только то, что изменилось.
Практический пример: резервное копирование с Rsync
Чаще всего rsync используют для регулярного резервного копирования — например, в удаленное хранилище. В простейшем случае это выглядит так:
rsync -avz /var/www/ user@backup-server:/backups/www/
А чтобы синхронизация стала «зеркалом» и удаляла лишние файлы на приемнике:
rsync -avz --delete /var/www/ user@backup-server:/backups/www/
При следующем запуске rsync передаст только те файлы, которые изменились, и удалит те, которых больше нет на источнике. Для автоматизации эту команду можно добавить в cron и запускать, например, каждую ночь.
Заключение
Rsync — это незаменимый инструмент для эффективной синхронизации и передачи данных, который стал стандартом в администрировании Linux-систем. Его уникальный алгоритм, передающий только изменения, позволяет экономить время, трафик и дисковое пространство. Будь вы системный администратор, разработчик или просто продвинутый пользователь, освоение rsync откроет вам путь к простым и надежным автоматическим бэкапам и синхронизациям.