Rsync για Linux: πώς να συγχρονίζετε, να αντιγράφετε και να δημιουργείτε αντίγραφα ασφαλείας αρχείων σαν επαγγελματίας

Το Rsync είναι το τυπικό εργαλείο για την αντιγραφή αρχείων μεταξύ συστημάτων Linux. Είναι ταχύτερο από cp ή scp για οτιδήποτε εκτελείτε περισσότερες από μία φορές, ανακτά τα δεδομένα σε περίπτωση διακοπής δικτύου και μεταφέρει μόνο ό,τι έχει πράγματι αλλάξει. Αυτή η ανάρτηση καλύπτει τι κάνει το rsync, τις σημαίες που αξίζει να γνωρίζετε, τα παραδείγματα που θα χρησιμοποιείτε πιο συχνά και πώς να το προγραμματίσετε με το cron.

Τι είναι το rsync;

Το rsync είναι ένα βοηθητικό πρόγραμμα γραμμής εντολών για την αντιγραφή και τον συγχρονισμό αρχείων μεταξύ τοποθεσιών. Λειτουργεί τοπικά, μέσω SSH σε έναν απομακρυσμένο κεντρικό υπολογιστή ή σε σχέση με ένα δαίμονα rsync. Η βασική διαφορά από cp ή scp: το rsync συγκρίνει πρώτα την πηγή και τον προορισμό και, στη συνέχεια, μεταφέρει μόνο τις διαφορές. Σε έναν κατάλογο 100 GB όπου έχουν αλλάξει 200 MB, το rsync μεταφέρει 200 MB. cp και scp μεταφέρουν τα πάντα.

Περιλαμβάνεται σε κάθε σύγχρονη διανομή Linux. Αν λείπει: apt install rsync ή dnf install rsync.

Γιατί να χρησιμοποιήσετε το rsync αντί για το cp ή το scp

Τρεις λόγοι για τους οποίους το rsync υπερισχύει για οποιαδήποτε μη ασήμαντη αντιγραφή:

• Είναι σταδιακό. Οι επόμενες εκτελέσεις μεταφέρουν μόνο τα byte που έχουν αλλάξει, όχι ολόκληρα αρχεία. Για αντίγραφα ασφαλείας και καθρέφτες, αυτό μετατρέπει μια εργασία που διαρκεί όλη τη νύχτα σε λίγα λεπτά.
• Αντέχει στις διακοπές. Με --partial, ένα αρχείο 50 GB που έχει μεταφερθεί κατά το ήμισυ συνεχίζει από το σημείο που σταμάτησε, αντί να ξεκινά από την αρχή.
• Διατηρεί τα μεταδεδομένα. Η λειτουργία αρχειοθέτησης (-a) διατηρεί δικαιώματα, ιδιοκτησία, συμβολικούς συνδέσμους και χρονικές σημάνσεις. Κρίσιμο για αρχεία συστήματος, δέντρα πηγαίου κώδικα και οτιδήποτε όπου τα χαρακτηριστικά έχουν σημασία.

Για μεμονωμένες αντιγραφές μικρών αρχείων, το scp είναι εντάξει. Για οτιδήποτε επαναλαμβάνεται, οτιδήποτε απαιτεί μεγάλο εύρος ζώνης ή οτιδήποτε μπορεί να χρειαστεί να συνεχίσετε, χρησιμοποιήστε το rsync.

Συνηθισμένες επιλογές rsync

Οι σημαίες που θα χρησιμοποιήσετε στην πράξη:

Η προεπιλεγμένη συμπεριφορά συγκρίνει το μέγεθος του αρχείου και την ώρα τροποποίησης, κάτι που είναι γρήγορο και σχεδόν πάντα σωστό. Μεταβείτε στο --checksum αν μια διαδικασία ανάπτυξης επαναγράφει τις χρονικές σημάνσεις χωρίς να αλλάζει το περιεχόμενο, ή αν υποψιάζεστε αλλοίωση σε επίπεδο bit.

Παραδείγματα Rsync

Αντιγραφή ενός καταλόγου τοπικά:

rsync -av /source/path/ /destination/path/

Συγχρονισμός με απομακρυσμένο διακομιστή μέσω SSH:

rsync -avz /local/dir/ user@remote:/remote/dir/

Δοκιμαστική εκτέλεση πριν από οποιαδήποτε καταστροφική ενέργεια:

rsync -avz --dry-run /local/dir/ user@remote:/dir/

Δημιουργία αντιγράφου ασφαλείας δύο καταλόγων, συμπεριλαμβανομένων των διαγραφών στον προορισμό:

rsync -av --delete /source/ /destination/

Εξαίρεση αρχείων καταγραφής και ενός προσωρινού καταλόγου:

rsync -av --exclude='*.log' --exclude='tmp/' /src/ /dest/

Συνέχιση μιας μεγάλης μεταφοράς που ενδέχεται να διακοπεί:

rsync -avP user@remote:/backups/big.img /local/

Εάν η σύνδεση SSH διακοπεί, εκτελέστε ξανά την ίδια εντολή. Με το -P, το rsync συνεχίζει από το σημείο που σταμάτησε αντί να ξεκινήσει από το μηδέν.

Περιορίστε το εύρος ζώνης στα 50 MB/s για ένα αντίγραφο ασφαλείας εκτός αιχμής, ώστε να μην κορεστεί η ανερχόμενη σύνδεση:

rsync -avz --bwlimit=50000 /local/dir/ user@remote:/dir/

Η παγίδα της τελικής κάθετου

Το πιο συνηθισμένο λάθος στο rsync:

rsync -av /source  /destination/    # copies the 'source' directory INTO /destination
rsync -av /source/ /destination/    # copies the CONTENTS of /source into /destination

Μια τελική κάθετος στην πηγή σημαίνει «όλα μέσα σε αυτόν τον κατάλογο». Χωρίς τελική κάθετο σημαίνει «αυτός ο κατάλογος». Εκτελέστε με --dry-run πρώτα αν δεν είστε σίγουροι, ειδικά όταν συνδυάζεται με --delete.

Αυτοματοποίηση του rsync με το cron

Για προγραμματισμένα αντίγραφα ασφαλείας, χρειάζεστε τρία πράγματα:

1. Πρόσβαση SSH χωρίς κωδικό πρόσβασης στον προορισμό. Οι εργασίες cron δεν μπορούν να πληκτρολογήσουν κωδικούς πρόσβασης. Δημιουργήστε ένα κλειδί και αντιγράψτε το στον κεντρικό υπολογιστή αντιγράφων ασφαλείας:

   ssh-keygen -t ed25519
   ssh-copy-id user@backup-host

2. Ένα σενάριο, όχι μια γραμμή στο crontab. Ευκολότερο να δοκιμαστεί, ευκολότερο να καταγραφεί:

   #!/bin/bash
   LOG=/var/log/rsync-backup.log
   rsync -az --delete /etc/ user@backup:/backups/$(hostname)/etc/ >> "$LOG" 2>&1

   Κάντε το εκτελέσιμο με chmod +x.

3. Μια καταχώριση cron για την εκτέλεσή του. Επεξεργαστείτε με crontab -e:

   0 2 * * * /usr/local/bin/rsync-backup.sh

   Αυτό εκτελεί το σενάριο κάθε βράδυ στις 02:00.

Δύο βελτιώσεις που αξίζει να γίνουν στην παραγωγή: τυλίξτε το σενάριο σε flock έτσι ώστε μια εργασία μακράς διάρκειας να μην επικαλύπτεται με την εκτέλεση της επόμενης νύχτας, και διοχετεύστε την έξοδο μέσω logger ώστε οι αποτυχίες να καταγράφονται στο ημερολόγιο του συστήματος, όπου η παρακολούθηση μπορεί να τις εντοπίσει.

Τελικές σκέψεις

Το Rsync είναι ένα από τα λίγα εργαλεία Linux όπου ο χρόνος που αφιερώνεται στην εκμάθηση των σημαδιών αποδίδει σχεδόν αμέσως. Τα κύρια σημεία:

• Οι σταδιακές μεταφορές και η υποστήριξη επανεκκίνησης καθιστούν το rsync την κατάλληλη επιλογή για οτιδήποτε εκτελείτε περισσότερες από μία φορές
• -a για τη λειτουργία αρχειοθέτησης, -z για συμπίεση, -P για συνέχιση και πρόοδο, --delete για πραγματικούς καθρέφτες
• Προσέξτε την τελική κάθετο στη διαδρομή προέλευσης, ειδικά με --delete
• Συνδυάστε το με cron και κλειδιά SSH για προγραμματισμένα αντίγραφα ασφαλείας χωρίς παρέμβαση

Για μεγάλες εργασίες δημιουργίας αντιγράφων ασφαλείας που μεταφέρουν δεδομένα μεταξύ εγκαταστάσεων, η εκτέλεση του rsync σε ένα VPS με απεριόριστο εύρος ζώνης σημαίνει ότι τα χρονικά παράθυρα δημιουργίας αντιγράφων ασφαλείας δεν περιορίζονται από όρια μεταφοράς.