Backup dauert viel zu lange

[Gerhard_HH]

Hallo,

ich habe seit kurzem Proxmox mit einigen Containern und VMs im Einsatz. Für die Sicherung setze ich den Proxmox-Backup-Server als VM ein. Das klappt technisch das auch. Allerdings bin ich mit der Laufzeit ziemlich unzufrieden.
Hauptaufgabe ist das Backup von meiner VM OpenMediaVault. Diese verfügt über 2 durchgereichte Festplatten mit jeweils 8TB Kapazität. Unter OMV habe ich BTRFS als Dateisystem im Einsatz und nutze dabei die Spiegelung mit Kompression. Der Backup-Server verfügt ebenfalls über eine durchgereichte Festplatte mit 8TB Kapazität. Genutzt wird das Dateisystem EXT4. Von den 8TB Nutzkapazität auf dem OMV sind derzeit etwa 2,1TB belegt.

Das Problem ist dabei, dass für diese Datenmenge der Snapshot über 24 Stunden dauert. Und zwar sowohl bei dem ersten als auch bei den nächsten. Aus dem Log kann ich erkennen, das der Backup Server immer beide Platten des Raids liest, also mal eben das doppelte Volumen. Ich habe auch schon probiert auf ZFS zu setzen, dort war es genauso.

Was kann ich tun, um das Tempo deutlich zu verbessern?

Vielen Dank im voraus
Gerhard_HH

Mein Server hat übrigens einen i7-Prozessor mit 16GB RAM. Keine der beiden beteiligten VMs sind überlastet. Sie langweilen sich eher.

 

[Falk R.]

Hallo,

ich habe seit kurzem Proxmox mit einigen Containern und VMs im Einsatz. Für die Sicherung setze ich den Proxmox-Backup-Server als VM ein. Das klappt technisch das auch. Allerdings bin ich mit der Laufzeit ziemlich unzufrieden.
Hauptaufgabe ist das Backup von meiner VM OpenMediaVault. Diese verfügt über 2 durchgereichte Festplatten mit jeweils 8TB Kapazität. Unter OMV habe ich BTRFS als Dateisystem im Einsatz und nutze dabei die Spiegelung mit Kompression. Der Backup-Server verfügt ebenfalls über eine durchgereichte Festplatte mit 8TB Kapazität. Genutzt wird das Dateisystem EXT4. Von den 8TB Nutzkapazität auf dem OMV sind derzeit etwa 2,1TB belegt.

Das Problem ist dabei, dass für diese Datenmenge der Snapshot über 24 Stunden dauert. Und zwar sowohl bei dem ersten als auch bei den nächsten. Aus dem Log kann ich erkennen, das der Backup Server immer beide Platten des Raids liest, also mal eben das doppelte Volumen. Ich habe auch schon probiert auf ZFS zu setzen, dort war es genauso.

Was kann ich tun, um das Tempo deutlich zu verbessern?

Vielen Dank im voraus
Gerhard_HH

Mein Server hat übrigens einen i7-Prozessor mit 16GB RAM. Keine der beiden beteiligten VMs sind überlastet. Sie langweilen sich eher.

HI die Durchgereichten Disks muss er einzeln lesen, da der Backupclient ja nicht weiß was da drauf ist.
Ich weiß nicht ob bei durchgereichten Disks überhaupt die Dirty Bitmap aufgezeichnet werden kann. Wenn nicht, dann muss er immer 100% lesen.
Wenn du da eh ein Raid1 hast, würde ich nur 1 Disk ins Backup aufnehmen.

 

[Gerhard_HH]

Hallo,

die Idee nur eine HDD ins Backup aufzunehmen ist eine gute Idee. Ich fürchte aber, dass meine Vorgehen grundsätzlich nicht sauber ist. Ich habe inzwischen die Log-Datei angesehe. Zu den dirty-bitmap steht dort folgendes: scsi1: dirty-bitmap status: created new. Ebenso bei scsi2. Und ich habe mir im PVE das Ergebnis angeschaut. Dort ist nur eine große Datei zu finden. Auf Dateiebene gibt es nichts. Ich vermute daher, dass der Ansatz mit BTRF im Zusammenspiel mit Proxmox nicht funktioniert. Die Frage die sich dann stellt, was wäre der richtige Ansatz?

 

[Falk R.]

Aus Backupsicht wäre es praktischer den Mirror vom PVE machen zu lassen und der VM einfach eine virtuelle Disk zu geben. Damit hast du schnelles Backup um maximale Flexibilität, wenn du mal migrieren möchtest.