ZFS lässt sich nicht entfernen

[EDSTOBI]

Hallo
Proxmox läuft mit der aktuellen Version.

Ich habe ein ZFS aus 2 Platten erstellt (Raid0). Eine Platte ist gestorben. Ich habe alle Daten aus dem ZFS entfernt und wollte jetzt das ZFS zerstören.

Hier bekomme ich aber immer die Meldung :
command 'zpool list -vHPL SSD4T' failed: unable to obtain information for disk 'nvme0n1p1'

Versuche ich das Konstrukt unter Disk zu whip bekomme ich
error wiping '/dev/nvme1n1p1': wipefs: error: /dev/nvme1n1p1: probing initialization failed: Device or resource busy

Unter Health im ZFS steht oben DEGRATED und dann unter mirror-0 "REMOVED"

Über die shell unter dev/disk/by-id/ sehe ich 3 Einträge zu der defekten platte welche als removed angezeigt wird.

Wie kann ich in Proxmox diese Situation bereinigen? Kann ich es nicht beseitigen weil es ausgefallen ist und somit nicht mehr zur Verfügung steht?

 

[Dunuin]

Wie kann ich in Proxmox diese Situation bereinigen? Kann ich es nicht beseitigen weil es ausgefallen ist und somit nicht mehr zur Verfügung steht?

Du könntest den Pool manuell per CLI mit "zpool destroy ..." zerstören und den Storage aus der /etc/pve/storage.cfg herauseditieren.
Im Normalfall würdest du aber die defekte Disk durch eine neue ersetzen mit einem "zpool replace ..." oder das Raid1 auflösen und mit "zpool detach ..." ein Single-Disk Vdev draus machen.

Ich habe ein ZFS aus 2 Platten erstellt (Raid0). Eine Platte ist gestorben. Ich habe alle Daten aus dem ZFS entfernt und wollte jetzt das ZFS zerstören.

Hier bekomme ich aber immer die Meldung :
command 'zpool list -vHPL SSD4T' failed: unable to obtain information for disk 'nvme0n1p1'

Versuche ich das Konstrukt unter Disk zu whip bekomme ich
error wiping '/dev/nvme1n1p1': wipefs: error: /dev/nvme1n1p1: probing initialization failed: Device or resource busy

Unter Health im ZFS steht oben DEGRATED und dann unter mirror-0 "REMOVED"

Das klingt aber als hättest du ein Raid1 und kein Raid0.

 

[EDSTOBI]

Danke news für den Befehl zpool status <zfs-pool> -v
Anbei die Ausgabe dazu

 

[EDSTOBI]

Du könntest den Pool manuell per CLI mit "zpool destroy ..." zerstören und den Storage aus der /etc/pve/storage.cfg herauseditieren.
Im Normalfall würdest du aber die defekte Disk durch eine neue ersetzen mit einem "zpool replace ..." oder das Raid1 auflösen und mit "zpool detach ..." ein Single-Disk Vdev draus machen.


Das klingt aber als hättest du ein Raid1 und kein Raid0.

Ich werde 3 Ave Maria beten und es rausoperieren, Die NVME 4TB werde ich zurücksenden, da eine Lebensdauer von 2 Tagen etwas gering ist und ich glaube das ich nicht diese Sonderangebote hätte kaufen sollen. Samsung und CO ist mindestens doppelt so teuer.

 

[Dunuin]

Für ZFS solltest du auch nur Enterprise SSDs mit einer Power-loss Protection nehmen. Wenn man da eine M.2 will, dann gibt es da nur eine Hand voll von Modellen von Samsung, Solidigm, Micron und Kingston. Und wenn man 4TB will, dann sogar nur noch 3 Modelle von 550-700€. Und alles über 1TB braucht einen 22110 kompatiblen M.2-Slot.
Und wenn du doch unbedingt eine Consumer SSD nehmen willst, dann guck wenigstens, dass diese keinen QLC-NAND verbaut haben kann.

 

[EDSTOBI]

Für ZFS solltest du auch nur Enterprise SSDs mit einer Power-loss Protection nehmen. Wenn man da eine M.2 will, dann gibt es da nur eine Hand voll von Modellen. Und wenn man 4TB will, dann sogar nur noch 3 Modelle von 550-700€.
Und wenn du doch unbedingt eine Consumer SSD nehmen willst, dann guck wenigstens, dass diese keinen QLC-NAND verbaut haben kann.

Es war ein Versuch der schief gegangen ist. Ich brauchte kurzfristig Platz. Mein HP DL 380G9 bekommt die Tage neue Platten und die werden schön altmodisch über den Raid Controller als Raid 5 bereitgestellt.
Danke für die professionelle Hilfe.
Im VMware Forum dauern Antworten Ewigkeiten
Aber ich habe noch viel bei Proxmox zu lernen

 

[muekno]

Es war ein Versuch der schief gegangen ist. Ich brauchte kurzfristig Platz. Mein HP DL 380G9 bekommt die Tage neue Platten und die werden schön altmodisch über den Raid Controller als Raid 5 bereitgestellt.
Danke für die professionelle Hilfe.
Im VMware Forum dauern Antworten Ewigkeiten
Aber ich habe noch viel bei Proxmox zu lernen

Dir ist aber schon klar, dass ZFS und Hardware Raid deines DL 380 absolut nicht zusammen passen, da handelst Du Dir nur Probleme ein.
Richtig wäre die HDs im Raid Controller alle als eine separate Platte zu konfigurieren, das geht habe ich hier auch so, und dann über diese Platten ein RaidZ im ZFS zu konfigurieren.
Read the Docs

 

[Falk R.]

Dir ist aber schon klar, dass ZFS und Hardware Raid deines DL 380 absolut nicht zusammen passen, da handelst Du Dir nur Probleme ein.
Richtig wäre die HDs im Raid Controller alle als eine separate Platte zu konfigurieren, das geht habe ich hier auch so, und dann über diese Platten ein RaidZ im ZFS zu konfigurieren.
Read the Docs

Aber das geht Performancetechnisch oft in die Hose. So ein Raid Controller kann schon eine Menge aus HDDs und langsamen SATA SSDs zaubern.
Mit Raidcontroller nutze ich im PVE LVM-Thin und beim PBS xfs. Was auch geht, wenn man einen Raid Controller mit vernünftiger Cachebatterie und ZFS Single nutzt und sich sicher ist, niemals ein zweites Gerät in den Pool zu packen, dann kann man das uch machen um Replikation nutzen zu können. Man muss nur wissen was man tut und wie der Controller korrekt eingestellt sein muss. 99% aller Probleme mit Raidcontrollern kommen durch fehlerhafte Einstellungen.

 

[muekno]

Aber das geht Performancetechnisch oft in die Hose. So ein Raid Controller kann schon eine Menge aus HDDs und langsamen SATA SSDs zaubern.
Mit Raidcontroller nutze ich im PVE LVM-Thin und beim PBS xfs. Was auch geht, wenn man einen Raid Controller mit vernünftiger Cachebatterie und ZFS Single nutzt und sich sicher ist, niemals ein zweites Gerät in den Pool zu packen, dann kann man das uch machen um Replikation nutzen zu können. Man muss nur wissen was man tut und wie der Controller korrekt eingestellt sein muss. 99% aller Probleme mit Raidcontrollern kommen durch fehlerhafte Einstellungen.

LVM und Raid Controller geht ja auch gut zusammen und nur ein ZFS Gerät hinter das Harware Raid und ZFS Single mag ja auch noch passen. Nur ist das nicht Sinn der Sache ZFS zu nutzen weil Du die meisten Vorteile von ZFS nicht nutzt. Und ob das auch wirklich sicher funktioniert ist nach meiner Meinung fraglich. Jedenfalls steht überall dick und fett ZFS und Hardware Raid passen nicht zusammen.
Frage mich da überhaupt warum Du ZFS überhaupt nimmst und nicht alles mit LVM machst.
Gut mir egal Deine Kisten, Dein Risiko, ich halte mich da ehr an die Empfehlungen und Performance Probleme habe ich nicht-

 

[Falk R.]

LVM und Raid Controller geht ja auch gut zusammen und nur ein ZFS Gerät hinter das Harware Raid und ZFS Single mag ja auch noch passen. Nur ist das nicht Sinn der Sache ZFS zu nutzen weil Du die meisten Vorteile von ZFS nicht nutzt. Und ob das auch wirklich sicher funktioniert ist nach meiner Meinung fraglich. Jedenfalls steht überall dick und fett ZFS und Hardware Raid passen nicht zusammen.
Frage mich da überhaupt warum Du ZFS überhaupt nimmst und nicht alles mit LVM machst.
Gut mir egal Deine Kisten, Dein Risiko, ich halte mich da ehr an die Empfehlungen und Performance Probleme habe ich nicht-

ZFS auf Raid hat einen einzigen Sinnvollen Anwendungsfall. Kleine 2 Node Cluster mit alten Disks oder SSDs, die mit Raid Controller ein vielfaches an Performance bringen, man aber Replikation und HA nutzen möchte. Wenn man das mit Wissen um beide techniken macht, hat das deutlich weniger Risiko als mach hingebastelte Setups mit RaidZ, welche ich schon sehen musste.

 

[muekno]

ZFS auf Raid hat einen einzigen Sinnvollen Anwendungsfall. Kleine 2 Node Cluster mit alten Disks oder SSDs, die mit Raid Controller ein vielfaches an Performance bringen, man aber Replikation und HA nutzen möchte. Wenn man das mit Wissen um beide techniken macht, hat das deutlich weniger Risiko als mach hingebastelte Setups mit RaidZ, welche ich schon sehen musste.

Wissen was man tut und know how sollte immer vorhanden sein wenn man Server aufsetzt und erst recht wenn man Virtualisierung egal ob mit VMware oder PROXMOX für mehr als den privaten Hobby Bereich betreibt und selbst da.