Inkrementelle Vollbackups dank BtrFS
ButterBackup kann direkt von PyPI installiert werden:
pipx install butter-backup
Es ist aber auch möglich, das Projekt kann aus dem lokalen Quellcode zu installieren:
uv build
pipx install dist/butter-backup-<version>.whl
Momentan stehen zwei Module zum Anlegen von Sicherungskopien zur Verfügung. Weitere Module sind momentan nicht geplant, aber prinzipiell möglich. Anfragen dazu sind sehr willkommen!
Dieses Modul eignet sich besonders für Nutzer, die ihre Sicherungskopien
einfach im Dateimanager durchsuchen möchten. Es kombiniert die Vorteile von
BtrFS-Snapshots mit der Effizienz von rsync. Jeder Sicherungsvorgang legt ein
neues BtrFS-Subvolume an, indem ein Snapshot des jüngsten Subvolumes erstellt
wird. Dann wird mit rsync eine inkrementelle Kopie der Quelldateien in das
neue Subvolume angelegt. Dies hat den Vorteil, dass die Sicherungskopie sehr
schnell angelegt werden kann, da nur die geänderten Dateien kopiert werden
müssen. Gleichzeitig sind die Sicherungskopien sehr platzsparend, da nur die
geänderten Blöcke zusätzlich Speicherplatz benötigen.
Am Ende verhält sich jede Sicherungskopie wie eine Vollsicherung, da jedes Subvolume alle Dateien enthält. Gleichzeitig wird aber nur der Speicherplatz von inkrementellen Sicherungen benötigt.
Die Sicherungskopien können sehr einfach durchsucht werden, da jedes Subvolume
als normales Verzeichnis erscheint. Nach butter-backup open sind alle
Sicherungskopien direkt im Dateimanager verfügbar.
Achtung: Durch die konkrete Art der Verwendung von rsync werden Dateien,
die denselben Namen, dieselbe Größe und denselben Zeitstempel haben, nicht
kopiert. Sollte also z.B. ein Prozess auf einem Dateisystem ohne
Änderungszeitstempel wiederholt Dateien überschreiben, ohne deren Größe zu
ändern, so werden diese Dateien in der Sicherungskopie nicht aktualisiert.
Dieses Modul verwendet restic, um Sicherungskopien anzulegen. Das Programm
restic ist ein sehr ausgereiftes Programm zum Anlegen von verschlüsselten
Sicherungskopien mit fortgeschrittener Deduplizierung. Mehr Informationen zu
restic und seinen Fähigkeiten finden sich auf der offiziellen
Webseite. Für technisch versierte Nutzer wird dieses
Modul empfohlen.
Hier steht nach butter-backup open nur ein einzelnes Verzeichnis zur
Verfügung, in dem alle Sicherungskopien von restic enthalten sind. Der
Zugriff auf einzelne Sicherungskopien erfolgt über die restic-Kommandozeile.
ButterBackup wurde entworfen, um gegen eine Reihe spezieller Gefährdungsszenarien zu schützen. Die konkreten Bedrohungen und die entsprechenden Gegenmaßnahmen gibt die folgende Tabelle an. Auf die Übersichtstabelle folgt eine etwas ausführlichere Diskussion der Maßnahmen.
| Bedrohung | Gegenmaßnahme |
|---|---|
| Dateien verschlüsselnde Schadsoftware | physikalisch getrennte Aufbewahrung |
| fehlerhafte Sicherungskopien durch Fehlbenutzung | sehr einfache Benutzung |
| Verlust des Datenträgers | Vollverschlüsselung des Datenträgers |
| Zerstörung des Datenträgers durch Spannungsspitzen | physikalisch getrennte Aufbewahrung |
| zu seltene Sicherungskopien | sehr einfache Benutzung |
Diese Bedrohungen werden dadurch reduziert, dass eine sehr einfache Benutzung die physikalisch getrennte Aufbewahrung des die Sicherungskopien enthaltenen Datenträgers ermöglicht.
Eine einfach umzusetzende und verlässliche Maßnahme, um den Datenträger vor Zerstörung durch Spannungsspitzen zu schützen, ist, ihn vom Computer physikalisch getrennt aufzubewahren. Gleichzeitig schützt diese Maßnahme auch sehr gut vor der Zerstörung der Sicherungskopien durch Schadsoftware, da sich die Sicherungskopien außerhalb des Zugriffs der Schadsoftware befinden.
Durch die physikalisch getrennte Aufbewahrung ergibt sich aber eine Bedrohung durch Bequemlichkeit. Ein Prozess, für dessen Durchführung manuelle Schritte nötig sind, ist fehleranfällig und läuft Gefahr, im Zweifel nicht ausgeführt zu werden. Das Anlegen von Sicherungskopien stellt hier keine Ausnahme dar.
ButterBackup begegnet dieser Gefahr dadurch, dass es das Anlegen einer Sicherungskopie auf zwei manuelle Schritte reduziert. Es genügt, die Festplatte mit dem Computer zu verbinden und das Programm zu starten. Alle weiteren Schritte, z.B. Entschlüsselung, Kopie der Daten und Unmounten, werden von ButterBackup übernommen.
Insgesamt ermöglicht ButterBackup, Sicherungskopien so sicher wie möglich aufzubewahren ohne dabei zu verkomplizieren, neue Sicherungskopien anzulegen.
ButterBackup hat eine umfangreiche Testsuite, die viele relevanten Aspekte des
Programms abdeckt. Diese wird ergänzt durch die ähnlich umfangreichen
Testsuites der Abhängigkeiten storage-device-managers und shell-interface.
Diese beiden Abhängigkeiten sind aus ButterBackup hervorgegangen, womit deren
Testsuite weitere für ButterBackup wichtige Aspekte gründlich abdeckt.
Für die schnelle Ausführung während der Entwicklung bietet es sich an, die Testsuite direkt auszuführen. Dies ist wird im Abschnitt "schnell" erläutert. Spätestens vor einem Release sollten aber auch die distributionsübergreifenden Tests ausgeführt werden, da diese garantieren, dass ButterBackup auch unter Arch und allen unterstützten Pythonversionen funktioniert.
uv run ruff check .
uv run mypy .
uv run pytest
make check-format check-linters run-undockered-tests
Es existiert eine umfassende Testsuite, die auch gewisse Plattformabhängigkeiten erkennen kann. Die Docker-Tests existieren überhaupt nur, weil es Probleme mit Arch gab.
Die Testsuite kann mittels make ausgeführt werden. Es ist auch eine
Parallelisierung mittels make -j N möglich, wobei N die Anzahl der Prozesse
angibt.
Diese Tests werden ergänzt durch eine Testmatrix auf Github. Diese Testmatrix deckt Ubuntu mit allen unterstützten Pythonversionen ab. Dies erlaubt ggf., die sehr lang laufende Docker-Testsuite seltener auszuführen.
In den Konfigurationen müssen Zielordner und Dateien angegeben werden. Nun ist
es denkbar, dass einige dieser Ziele umbenannt oder entfernt werden. Als
Beispiel diene hier das Backup des Ordners Videos-Quelle nach Videos-Ziel.
Ein Nutzer könnte sich nun entscheiden, aus Platzgründen Videos-Quelle auf
eine externe Festplatte auszulagern. Die Backup-Anweisung könnte damit entfernt
werden.
In diesem Fall wird ButterBackup Videos-Ziel nicht löschen. Der
offensichtlichste Grund ist, dass dies das Programm verkomplizieren würde. Es
ist ohne weiteres möglich, über butter-backup open die Sicherungskopien zu
öffnen und nicht mehr benötigte Ordner händisch zu löschen.
Außerdem ist es vorstellbar, dass die Quelle zwar gelöscht wurde, aber im Backup archiviert werden soll. Dieser Anwendungsfall würde unmöglich gemacht, würden nicht mehr gelistete Ziele aus der Sicherungskopie entfernt.
- README schreiben und übersetzen
- Testsuite umstellen von Docker auf virtuelle Maschinen
- Alias für Einzelkonfigurationen?
- butter-backup exec / run
- nimmt Befehl als Zeichenkette und führt diesen im BackupRootDir aus
- butter-backup exec [] --> open; cd; cmd; cd -; close
- sollte Mapping auf Umgebungsvariablen unterstützen, z.B. RepoPassCmd -> RESTIC_PASSWORD_COMMAND
- Verbesserte Fehlermeldungen
- wenn unmount nicht möglich ist
- wenn BackupRepository nicht vorhanden ist
- SudoPassCmd
- Konfiguration der gewünschten Kompression ermöglichen (zlib, zstd, none, etc.)