Das Backup ist im lokalen Netzwerk. PBS und PVE hängen am gleichen Switch. Ohne Regeln auf dem Switch, ohne QoS, ohne Firewall.
Nachtrag: Im Kopiervorgang mit SCP erhalte ich nun run 7 Gbit/s. Rsync ist hier deutlich langsamer.
Hmm... scheint also nicht das bottleneck zu sein.
Eventuell die Firewall? Wird es schneller, wenn das backup im lokalen Netzwerk geschieht?
Komisch ist auch dieser Bottleneck:
eigentlich müssten ja locker 10GBit/s drinliegen.
PBS könnte ja laut...
Nun ZFS bietet einige Vorteile (die auch schon oft genug erwähnt wurden), hat aber auch Anforderungen (keine HW RAID) was es als default ausschliesst.
Der Hauptvorteil aber auf deine spezifische Frage (PVE auf ext4, storage aber auf ZFS) liegt...
Dann hast du kein modernes OS benutzt. Oder bist auf den Taskmanager von Windows reingefallen ;)
Der kaschiert Cache ziemlich gut, indem cache als weisser Balken darstellt mit einem feinen blauen Strich am Ende.
Eigentlich nicht. Wenn RAM knapp...
If your root file system is ZFS, you must update your initramfs every time this value changes:
# update-initramfs -u -k all
You must reboot to activate these changes.
Eigentlich nicht nein.
Das stimmt. Debian/Ubuntu erwähnen darum in ihrer SWAP Doku beide Alternativen wie zswap, zcache, zram. Oder halt einfach deaktivieren beim installieren.
Wenn ich Snapshots auf ext4 möchte, muss ich QCOW2 verwenden.
QCOW...
Sorry, habe gerade gemerkt, dass bei beiden Benchmarks der TLS speed fehlt.
Du müsstest wie Beisser oben beschrieben hat (oder in der Doku) den datastore angeben.
Gewinnst du viel mit ZRAM?
Verstehe schon nicht wirklich den Nutzen von SWAP.
RAM zurückgewinnen, indem wenig benutztes auf SSD/HDD rausgeschrieben wird, damit mehr andere Dinge im RAM liegen können und dadurch gecached werden?
Im absoluten best...
Das ist immer noch so. LVM snapshots sind ( ähnlich wie snapshots bei vmware exsi) nicht dafür gedacht lange aufbewahrt zu werden, sondern um eine schiefgegangene Änderung ( update o.ä. ) wieder zurückzurollen oder um vor einen Backup mit tar...
Jetzt bin ich noch verwirrter ab deinen proxmox-backup-client benchmarks.
Müsste normalerweise nicht ein TLS speed bei PVE sein, weil PVE per TLS die Daten senden und hingegen auf PBS kein TLS speed, weil du dort keine Daten sendest?
Bei dir...
Klar bremst der RAID Controller. Ich würde nie NVMe hinter einen RAID Controller packen. Die RAID Controller haben in der Regel 8 PCI Lanes und jede NVMe auch schon 4, somit ist der RAID Controller immer ein Bottleneck bei mehr als 2 NVMe.
Dann...
Also, ich benuze den NVR auf Windows wirklich wegen einem Altlast-Problem. Seit 5 Jahren läuft hier eben dieser NVR auf einem Windows PC der vor 3 Monaten kaputt gegangen ist.
Nachdem ich hier einen Server mit Proxmox VE betreibe auf dem noch...
Genau dafür sind ZFS Snapshots super.
Das Märchen „ZFS killt meine SSD“ wird nicht wahrer mit ständiger Wiederholung. Ein QCOW auf LVM kann genausogut mehr write amplification aufweisen als eine ZFS RAW.
Naja, ZFS implementiert diverse Features, die klassische Konstruktionen nicht bieten. Wenn ich mich richtig erinnere, bietet der klassische Stack dies nicht ohne weiteres: transparente Kompression, technisch billige¹ Snapshots, garantierte...
There is no reason why you need enterprise drives, just because of ZFS.
For 99% of use cases, running a ZFS mirror is perfectly fine and has almost no write amplification.
ZFS verursacht bei mirrors und default volblocksize keinen nenneneswert grösseren wearout als ext4 und läuft auch problemlos auf consumer.
wenn du Proxmox auf boot zfs installierst, ist SWAP deaktiviert.
Zum Thema Backup: Backup auf den...
Mich würde als erstes interessieren, warum dein NVME enterprise RAID so mies performt.
Mit 5GB/s ist es aber anscheinend nicht das bottleneck. Stellt sich halt die Frage ob 4 fio jobs repräsentativ für den workload sind.
Da bin ich leider...
Zusammengefasst:
- PVE sendet zu PBS mit 1.5GBit/s
- rsync (von PVE zu PBS?) erreicht aber 3GBit/s
- Iperf schafft 10GBit/s
- fio schafft 5GB/s write
Der write speed ist ziemlich enttäuschend für Enterprise und NVME. Bremst hier der Dell...