NVMe ZFS RAID 1 / Proxmox auf SSD HW Raid

T

thoand

Active Member
Apr 22, 2019
22
0
41
40
Hallo zusammen,

ich überlege derzeit wie mein nächster Server aussehen soll. Aktuell habe ich 2x 1TB SSDs an einem HW RAID Controller, dort liegt sowohl Proxmox als auch der Storage für die VMs drauf. Der ins Auge gefasste Server kann nun auch NVMe, weshalb ich zu folgendem Setup komme:
  • 2x 240 GB SSD an HW RAID für Proxmox
  • 2x 1TB NVMe SSD mit ZFS RAID 1 als Storage
Klingt das für Euch sinnvoll, oder fahre ich ggf. besser mit einem HW RAID 5 mit weiteren SSDs? Wie sieht das aus mit einem Cache für ZFS. Ich weiß das wir in einem Backupserver zur Deduplizierung eine SSD nur als Cache eingesetzt haben.

Danke für Eure Einschätzungen!

Gruß thoand
 
Hallo,

Technisch gesehen spricht nichts dagegen.
Proxmox VE ist nicht in der Lage mit UEFI auf eine NVMe wo ZFS läuft zu booten.

Raid5 würde ich generell nicht für Virtualisierung empfehlen, da es einfach nicht performant ist.
thoand said:
Wie sieht das aus mit einem Cache für ZFS.
Click to expand...
Das macht nur Sinn, wenn der schreib unterschied groß ist wie zum Beispiel bei HDD und SSD.
Bei einer NVMe mach das keinen Sinn.
 
Hallo,

wolfgang said:
Technisch gesehen spricht nichts dagegen.
Proxmox VE ist nicht in der Lage mit UEFI auf eine NVMe wo ZFS läuft zu booten.
Click to expand...

Danke. Deshalb hatte ich dafür den SSD Hardware RAID 1 angedacht.

Gruß thoand
 
LnxBil said:
Das kann man machen, ist aber reichlich overkill, da du maximal 10 GB für das OS brauchst, der Rest liegt brach.
Click to expand...
Die 240er ist die kleinste SSD die der Hoster im Angebot hat. Direkt auf die NVMe will ich nicht gehen, da mir dann die Redundanz fehlt (gibt dort keinen NVMe raid Controller), deshalb will ich die Redundanz dort per ZFS machen. Oder sehe ich da irgendwas falsch?

Gruß thoand
 
Hallo zusammen,

verstehe ich folgendes richtig:
Support für ZFS auf UEFI und auf NVMe: der Proxmox VE ISO-Installer unterstützt mit der neuen Version ‚ZFS root via UEFI‘; so kann zum Beispiel ein ZFS-Mirror auf NVMe SSDs gebootet werden. Durch die Verwendung von `systemd-boot` als Bootloader anstelle von Grub lassen sich alle Pool Level-Features auf dem Root-Pool aktivieren.​
Quelle: https://www.proxmox.com/de/news/pressemitteilungen/proxmox-ve-6-0

Das ich nun auf den separaten Raid1 für die beiden SSDs zusätzlich zu den zwei NVMes ohne Raid verzichten kann?

Gruß thoand
 
thoand said:
Das ich nun auf den separaten Raid1 für die beiden SSDs zusätzlich zu den zwei NVMes ohne Raid verzichten kann?
Click to expand...

Ja, wenn du vom NVMe aus booten kannst.

Der Installer ist nun automatisch in der Lage dort ein RAID zu machen UND über UEFI zu booten UND die beiden UEFIs durch PVE-Mittel manuell spiegelt.
 
@thoand:
Booten von einem ZFS-Mirror (RAID1) von NVMe ist ab Proxmox 6 kein Problem mehr, selbst getestet, funktioniert. In Verbindung mit ZFS solltest du allerdings noch auf folgende Dinge achten:

- Keinen Hardware-RAID Controller benutzen
- Je nach Anzahl / RAM-Bedarf der virtuellen Maschinen genügend RAM verbauen (~64-128 GB) und ECC-RAM verwenden
- Vorher prüfen, welche NVMe verbaut werden (Hersteller / Modell), das sollten welche in einer "Datacenter Edition" sein. Bei Consumer SSDs leidet die Performance sehr stark.
 
Hallo zusammen,

das ist ja klasse! Bezüglich der NVMe muss ich mal schauen, ob ich herausfinde welche der Hoster verbaut.

Gruß thoand
 
You must log in or register to reply here.

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Quick Navigation

Home Get Subscription Wiki Downloads Proxmox Customer Portal About

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!
Community platform by XenForo® © 2010-2024 XenForo Ltd.
Top Bottom
Back