SSD in ZFS Raid 1 austauschen resilvern geht nicht

[goifalracer]

Hallo,

ich bräuchte mal bitte Rat.

Ich möchte eine vorhandene Sata SSD gegen einen neue im ZFS pool austauschen.
Ich habe den Server heruntergefahren und die alte gegen die neue getauscht, dann wieder hochgefahren.

Mit zpool status die ID der alten Platte ausfindig gemacht (Das habe ich vorher schon gemacht als Sie noch eingebaut war)

Jetzt mit ls -alh /dev/disk/by-id/ die ID der neuen heraufinden.

Dann habe ich folgenden Befehl eingegeben (Die Intenso ist die neue Platte)

zpool replace -f rpool ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T  ata-INTENSO_AA000000000000005437

Als Ergebnis kommt folgendes

cannot replace ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T with ata-INTENSO_AA000000000000005437: no such device in pool

Hier noch ein Screenshot von meinem Terminal.



Mache ich da was falsch, das ist jetzt nach Doku?????

 

[goifalracer]

Habs hinbekommen, habe ID mit Namen verwechselt.

Folgender Befehl führt zum Ziel

zpool replace -f rpool 11128056340177190322 ata-INTENSO_AA000000000000005437

 

[goifalracer]

Bei mir sieht das ganze jetzt so aus


dev/sda habe ich erfolgreich resilverd. Wenn jetzt aber die NVME ausfällt, was mache ich dann?
Da ist ja der Grub drauf.
Wie geht ihr mit sowas um?
Installiert ihr Grub da auf den 2 Platten??

Danke schon mal.

 

[Dunuin]

Du hättest das anders machen machen. Siehe Artikel "Changing a failed bootable device" im Wiki: https://pve.proxmox.com/wiki/ZFS_on_Linux#_zfs_administration

Also Intenso SSD wieder vom Pool entfernen, dann Partitionstabelle klonen, Bootloader syncen und erst dann dein zpool replace machen.

Ich habe im übrigen keine guten Erfahrungen mit Intenso SSDs und ZFS gemacht. Hatte da 3 Stück von und alle 3 inzwischen kaputt. Für ZFS kauft man am besten gleich richtige SSDs mit Power-loss Protection und ordentlich TBW/DWPD.

 

[goifalracer]

Oh man.
Ja nur durch testen wird man schlauer.
Inzwischen weiß ich was ich falsch gemacht habe.
Ich lese mich wieder in die Doku ein teste das ganze, falls ich Probleme habe melde ich mich.

Danke @Dunuin

 

[goifalracer]

@Dunuin
Hab mir die verlinkte Doku mal durchgelesen.

1. Warum soll ich die Intenso wieder entfernen, die kann ich ja jetzt wie eine defekte behandeln oder?

2. Du schreibst: 1 Partitionstable erstellen 2. Grub nachinstallieren 3. Dann rpool resilvern.

In der Doku kommt das resilvern bei Schritt 2, zuletzt erst den Grub installieren?
Oder ist das in der Doku nicht nach Reihenfolge?

 

[Dunuin]

1. Warum soll ich die Intenso wieder entfernen, die kann ich ja jetzt wie eine defekte behandeln oder?

Ich weiß nicht ob du eine Disk mit sich selbst ersetzen kannst, wenn du diese mit dem "zpool offline" Befehl vorher offline nimmst. Klingt jedenfalls unschön. Mit dem zpool detach Befehl kann man eine Disk ordnungsgemäß von einem Mirror zu entfernen (macht dann Mirror zu Single Disk Pool), dann Disk wipen und später wieder mit zpool attach hinzufügen (macht dann aus der Single Disk wieder einen Mirror).

2. Du schreibst: 1 Partitionstable erstellen 2. Grub nachinstallieren 3. Dann rpool resilvern.

In der Doku kommt das resilvern bei Schritt 2, zuletzt erst den Grub installieren?
Oder ist das in der Doku nicht nach Reihenfolge?

Das sollte egal sein in welcher Reihenfolge man das macht, solange man das Klonen der Partitionstabelle als erstes macht.

 

[goifalracer]

Es will einfach nicht funktionieren.
Ich habe es erst mit der Intenso getetest, jetzt habe ich wieder eine Samsung am Start.
Also ich habe die Platte mit detach aus dem Pool entfernt.
Dann gewipet.

Dann habe ich mit

sgdisk /dev/nvme0n1 -R /dev/sda

und

sgdisk -G /dev/sda

Die Partionstabelle erstellt.

/sda ist die neue Platte

Dann sieht es erst mal gut aus


Dann installiere und initialisiere ich grub

proxmox-boot-tool format /dev/disk/by-id/ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T-part2
proxmox-boot-tool init /dev/disk/by-id/ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T-part2

Grub auf sad2 weil mir nur EFi angeboten wird.

Dann mache das hinzufügen

zpool attach rpool nvme-eui.001b444a46cabde6-part3 ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T

Danach sieht es dann so aus,



Der Server bootet dann auch nicht mehr, erst wenn ich sda entferne.

Was mache ich da noch falsch, nutze ich die falschen Befehle?

Vielleicht nioch als Info der Screenshot mit meine Platten.


Danke.

 

[Dunuin]

zpool attach rpool nvme-eui.001b444a46cabde6-part3 ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T

Nicht die ganze Platte attachen, sondern nur Partition Nr. 3 der Platte (also vermutlich "ata-Samsung_SSD_870_EVO_500GB_S6PYNZ0W123159T-part3"). Wenn du ZFS sagst, es soll die ganze Platte nehmen, dann formatiert es die vorher mit Partition 1+9 und alles was du vorher gemacht hast geht natürlich dann verloren.

 

[goifalracer]

Besten dank, das wars. Eigentlich logisch wenn man darüber nachdenkt.
Hab mir jetzt ein how to gemacht, falls ich das wieder brauche.

Was ich aber nicht verstehe:
Grub konnte ich nicht mit dem Befehl installieren

grub-install /dev/sda

Es kam die Meldung das ich proxmox-boot-tool verwenden soll.

Also habe ich das hier gemacht

proxmox-boot-tool format /dev/disk/by-id/scsi-0QEMU_QEMU_HARDDISK_drive-scsi1-part2

Sollte diese Meldung nicht eigentlich aussagen, dass ich

grub-install /dev/sda

ausführen muss, oder verstehe ich da was falsch?