Volume Degraded

myssv · 2024-11-21T11:08:07+0100

Hallo zusammen,

bei mir ist das Datenlaufwerk scheinbar defekt:

Wie gehe ich da jetzt am besten vor?

Meine Idee:
Alle VM von diesem Gerät auf den 2. mittels HA migrieren.
Dann die HA auflösen
Die Festplatte tauschen
neues Volume erstellen
HA wieder einrichten
VM mirgrieren

Wäre das so ok?

Vielen Dank für Eure Zeit!

myssv · 2024-11-21T11:11:44+0100

Das sind die SMART Daten der Platte:

news · 2024-11-21T11:20:45+0100

Sorry, das fehlt mir doch der Gedanke an den Sinn nur eine Crucial MX 500 1 TB zu verwenden!
Also als erstes mal alle SATA Kabel gegen SATA 3 Qualität tauschen. Keine Knicke oder kleine Radien!
Dann den zpool clear <pool> ausführen.
Dann eine weitere SSD einbauen und je nachdem wie sie partitioniert wurde geht:
zpool attach <pool> <old-disk-part> <new-disk-part>
Wenn das durchgelaufen ist und die neue present ist:
zpool detach <pool> <old-disk-part>

# https://docs.oracle.com/cd/E19253-01/819-5461/gcfhe/index.html

Bei mir haben einige Crucial MX 500 schlechte Kontakte und SATA 3 Kabel mit Clip rasten nicht ein!

Ist es eine SSD mit BIOS und EFI Bootpartitionen? Dann bitte dies noch vorher beachten:

# https://www.thomas-krenn.com/de/wiki/Boot-Device_Replacement_-_Proxmox_ZFS_Mirror_Disk_austauschen

Denn von der alten SSD müssen och Ihre Bootpartitionen erstellt und die Daten übertragen, geschrieben werden!

myssv · 2024-11-21T11:23:37+0100

Vielen Dank. Das ist ein Freizeit-Projekt und einfach gewachsen. Es ist ein kleiner Lenovo Tiny PC mit Komponenten die gerade zur Hand waren. Daher passt da auch keine 2. SSD rein und ist auch vermutlich kein Anschluss für vorhanden.

news · 2024-11-21T11:25:18+0100

Zur not tut es für die Umstellung auch eine USB3 zu SATA3 Adapter.
Er sollte evtl. ein Markenprodukt sein und eine ext. Stromversorgung hilft bei der 500mA Grenze.

news · 2024-11-21T11:25:56+0100

Man könnte die SSD auch in einen PC packen, der sollte dann 2x SATA 3 besitzen.

myssv · 2024-11-21T11:28:49+0100

Ich bin Mausschubser und habe sonst keine Linuxkisten hier stehen. Aber ich kann ja auch ein Backup der Kisten machen und nach dem Umbau wieder zurück spielen.
Was für eine SSD würdest Du empfehlen?

myssv · 2024-11-21T11:40:32+0100

Gerade Deine Ergänzung gelesen:
Es ist eine reine Daten-Platte. Das ganze System liegt auf einer eigenen NVME Festplatte

news · 2024-11-21T11:48:33+0100

Ok, ich mache es "immer" so wie beschrieben.
Erstmal die Hardware check und Ersatz beschaffen und dann die ZFS Anweisungen laufen lassen.
Evtl. ist es dann nur das Kabel oder der Steckkontakt auf der SSD, den man dann verkleben könnte.

Beschaffbar sind einfach die Kingston DC600M Serie:
# https://www.kingston.com/de/ssd/dc600m-data-center-solid-state-drive

# https://www.alternate.de/Kingston/DC600M-960-GB-SSD/html/product/1916727
# https://www.alternate.de/Kingston/DC600M-1920-GB-SSD/html/product/1916728

Noch eine Anmerkung, wenn Du nur mit der GUI arbeiten wollen würdest, dann solltest Du mit Proxmox VE aufhören.
Dadurch entgehen Dir 90 % der Möglichkeiten.

news · 2024-11-21T11:50:29+0100

So gehen ich davon aus, der ZFS Pool hat kein zfs set atime=off <pool> und auch kein zfs set quota=<round-80percent-max-size> <pool>

myssv · 2024-11-21T11:51:16+0100

Vielen Dank für die Empfehlung.

Es ist ein Freizeitprojekt zum Lernen. Da stößt man halt immer an seine Grenzen.

news · 2024-11-21T11:52:10+0100

Das ist nicht schlimm, keep your mind open!

myssv · 2024-11-21T11:58:35+0100

news said:
zpool clear <pool>

Ich scheitere schon am Pool-Namen

Wo finde ich den Namen?

news · 2024-11-21T12:04:19+0100

Da steht "Daten".

In der Root-Konsole bitte eingeben und für uns posten:
zpool status
zpool list -v
lsblk
ls -lA /dev/disk/by-id/

myssv · 2024-11-21T12:04:22+0100

ok, hatte "daten" klein geschrieben. Erledigt!

news · 2024-11-21T12:06:14+0100

Wenn der Pool nicht automatisch getrimmt wird:
zpool get autotrim # check
zpool set autotrim=off # set off

Dann über einen Cronjob:
zpool trim Daten # run trim on Daten

myssv · 2024-11-21T12:06:22+0100

Code:

root@pve01:~# zpool clear Daten
root@pve01:~# zpool status
  pool: Daten
 state: ONLINE
  scan: scrub repaired 0B in 00:08:40 with 0 errors on Sun Oct 13 00:32:41 2024
config:

        NAME                                STATE     READ WRITE CKSUM
        Daten                               ONLINE       0     0     0
          ata-CT1000MX500SSD1_2136E5CF4504  ONLINE       0     0     0

errors: No known data errors
root@pve01:~# zpool list -v
NAME                                 SIZE  ALLOC   FREE  CKPOINT  EXPANDSZ   FRAG    CAP  DEDUP    HEALTH  ALTROOT
Daten                                928G   197G   731G        -         -    13%    21%  1.00x    ONLINE  -
  ata-CT1000MX500SSD1_2136E5CF4504   932G   197G   731G        -         -    13%  21.2%      -    ONLINE
root@pve01:~# lsblk
NAME               MAJ:MIN RM   SIZE RO TYPE MOUNTPOINTS
sda                  8:0    0 931.5G  0 disk
├─sda1               8:1    0 931.5G  0 part
└─sda9               8:9    0     8M  0 part
zd0                230:0    0   128G  0 disk
├─zd0p1            230:1    0    50M  0 part
└─zd0p2            230:2    0 127.9G  0 part
zd16               230:16   0  16.5G  0 disk
zd32               230:32   0   128G  0 disk
├─zd32p1           230:33   0   100M  0 part
├─zd32p2           230:34   0    16M  0 part
├─zd32p3           230:35   0 127.1G  0 part
└─zd32p4           230:36   0   837M  0 part
zd48               230:48   0     1M  0 disk
zd64               230:64   0     1M  0 disk
nvme0n1            259:0    0 238.5G  0 disk
├─nvme0n1p1        259:1    0  1007K  0 part
├─nvme0n1p2        259:2    0     1G  0 part /boot/efi
└─nvme0n1p3        259:3    0 237.5G  0 part
  ├─pve-swap       252:0    0     8G  0 lvm  [SWAP]
  ├─pve-root       252:1    0  69.4G  0 lvm  /
  ├─pve-data_tmeta 252:2    0   1.4G  0 lvm 
  │ └─pve-data     252:4    0 141.2G  0 lvm 
  └─pve-data_tdata 252:3    0 141.2G  0 lvm 
    └─pve-data     252:4    0 141.2G  0 lvm 
root@pve01:~# ls -lA /dev/disk/by-id/
total 0
lrwxrwxrwx 1 root root  9 Nov 17 02:08 ata-CT1000MX500SSD1_2136E5CF4504 -> ../../sda
lrwxrwxrwx 1 root root 10 Nov 17 02:08 ata-CT1000MX500SSD1_2136E5CF4504-part1 -> ../../sda1
lrwxrwxrwx 1 root root 10 Nov 17 02:08 ata-CT1000MX500SSD1_2136E5CF4504-part9 -> ../../sda9
lrwxrwxrwx 1 root root 10 Nov 17 02:08 dm-name-pve-root -> ../../dm-1
lrwxrwxrwx 1 root root 10 Nov 17 02:08 dm-name-pve-swap -> ../../dm-0
lrwxrwxrwx 1 root root 10 Nov 17 02:08 dm-uuid-LVM-lefS9MQw30amz5XoxQM18FUb85oqGIw83CAsANb7w1wnXqeMxIkTz81PGsHOwRUe -> ../../dm-0
lrwxrwxrwx 1 root root 10 Nov 17 02:08 dm-uuid-LVM-lefS9MQw30amz5XoxQM18FUb85oqGIw8UeV5AjCvkN2DM8lTLR63irsvqgyVVffp -> ../../dm-1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 lvm-pv-uuid-brjiJB-yyZQ-9AR6-omIg-mcT4-UBWf-3xh4kE -> ../../nvme0n1p3
lrwxrwxrwx 1 root root 13 Nov 17 02:08 nvme-eui.001b444a493f66c4 -> ../../nvme0n1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-eui.001b444a493f66c4-part1 -> ../../nvme0n1p1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-eui.001b444a493f66c4-part2 -> ../../nvme0n1p2
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-eui.001b444a493f66c4-part3 -> ../../nvme0n1p3
lrwxrwxrwx 1 root root 13 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208 -> ../../nvme0n1
lrwxrwxrwx 1 root root 13 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208_1 -> ../../nvme0n1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208_1-part1 -> ../../nvme0n1p1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208_1-part2 -> ../../nvme0n1p2
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208_1-part3 -> ../../nvme0n1p3
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208-part1 -> ../../nvme0n1p1
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208-part2 -> ../../nvme0n1p2
lrwxrwxrwx 1 root root 15 Nov 17 02:08 nvme-WDC_PC_SN530_SDBPMPZ-256G-1001_22203S476208-part3 -> ../../nvme0n1p3
lrwxrwxrwx 1 root root  9 Nov 17 02:08 wwn-0x500a0751e5cf4504 -> ../../sda
lrwxrwxrwx 1 root root 10 Nov 17 02:08 wwn-0x500a0751e5cf4504-part1 -> ../../sda1
lrwxrwxrwx 1 root root 10 Nov 17 02:08 wwn-0x500a0751e5cf4504-part9 -> ../../sda9

myssv · 2024-11-21T12:08:08+0100

Code:

root@pve01:~# zpool get autotrim
NAME   PROPERTY  VALUE     SOURCE
Daten  autotrim  off       default

news · 2024-11-21T16:39:01+0100

Danke, dann kann man immer wieder mal, z.B. 1x in der Woche: zpool trim Daten

myssv · 2024-11-21T18:02:32+0100

Ich hatte mir das schon als ToDo eingetragen. Allerdings einmal pro Monat. Macht es Sinn, wirklich jede Woche?

Vielen Dank noch mal für Deine Hilfe!

Volume Degraded

Member

Member

Active Member

Member

Active Member

Active Member

Member

Member

Active Member

Active Member

Member

Active Member

Member

Active Member

Member

Active Member

Member

Member

Active Member

Member