ZFS RAID Z1 Pool langsam

[spyfly]

Hallo,

Ich habe vor einigen Monaten meinen ersten Proxmox Node aufgesetzt, der hauptsächlich als Homeserver und teils für VMs genutzt werden sollte.

Spezifikationen sind die folgenden:
CPU: Xeon E3-1240L v3
RAM: 4x 8GB DDR3 1600Mhz
SSD: 4x Samsung EVO 850 500GB

Nun tritt leider das Problem auf, dass die Schreibraten auf der SSD Anfangs ca. 180 MB/s sind, aber dannach langsam einbrechen auf ca. 10 MB/s und ein IO-Delay von ca. 50% entsteht.

Die SSDs sind als RAID Z1 Pool konfiguriert.

pveperf /rpool
CPU BOGOMIPS:      32002.80
REGEX/SECOND:      2396826
HD SIZE:           601.50 GB (rpool)
FSYNCS/SECOND:     967.52
DNS EXT:           50.55 ms
DNS INT:           121.61 ms

zpool list
NAME    SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
rpool  1.81T   970G   886G         -    30%    52%  1.00x  ONLINE  -

zpool status
  pool: rpool
 state: ONLINE
status: Some supported features are not enabled on the pool. The pool can
    still be used, but some features are unavailable.
action: Enable all features using 'zpool upgrade'. Once this is done,
    the pool may no longer be accessible by software that does not support
    the features. See zpool-features(5) for details.
  scan: resilvered 18.3M in 0h0m with 0 errors on Sat Dec 16 22:24:02 2017
config:

    NAME        STATE     READ WRITE CKSUM
    rpool       ONLINE       0     0     0
      raidz1-0  ONLINE       0     0     0
        sdd2    ONLINE       0     0     0
        sde2    ONLINE       0     0     0
        sdb2    ONLINE       0     0     0
        sdc2    ONLINE       0     0     0

errors: No known data errors

Hat jemand eine Idee wie man dieses Problem lösen könnte?

Danke.

 

[fireon]

Hat jemand eine Idee wie man dieses Problem lösen könnte?

Natürlich! So hart die Wahrheit ist... EVO's raus Enterprise rein. EVO's sind nicht mal für den normalen PC Betrieb brauchbar. Wir wollten das zuerst auch nicht glauben, waren nach nem halben Jahr fast bei wearoutlevel 100%.

Guck mal nach wie hoch bei dir der Level ist. Vermutlich sind sie schon alle 4 aufgebraucht. Auf deine Note klicken und dann im Mittelmenü auf "Disks". Dort siehst du ganz reichts eine Tabelle die Wearout heist. Dort gehts von 0-100. 0 heist NEU, noch jede Menge Reserveblöcke. 100 heist totalschaden, weg werfen.

 

[spyfly]

Natürlich! So hart die Wahrheit ist... EVO's raus Enterprise rein. EVO's sind nicht mal für den normalen PC Betrieb brauchbar. Wir wollten das zuerst auch nicht glauben, waren nach nem halben Jahr fast bei wearoutlevel 100%.

Guck mal nach wie hoch bei dir der Level ist. Vermutlich sind sie schon alle 4 aufgebraucht. Auf deine Note klicken und dann im Mittelmenü auf "Disks". Dort siehst du ganz reichts eine Tabelle die Wearout heist. Dort gehts von 0-100. 0 heist NEU, noch jede Menge Reserveblöcke. 100 heist totalschaden, weg werfen.

Hab im Moment 3 Hetzner Server mit EVOs laufen, im RAID 1. Die IO Performance ist echt für die Tonne, bei 1 MB/s konstantem Write IO Delay von 20%. Die sind schon zu 60% durch, werden durch nen EPYC mit Enterprise SSDs ersetzt.

Werde mir wahrscheinlich paar Intel SSD DC S3520 480GB für meinen Home Server zulegen, sind zwar 40% teurer, dafür gehts wahrscheinlich. Wearout liegt erst bei 1%, da ist normalerweise kaum Schreiblast drauf.

 

[fireon]

Hab hier 4 Stück Samsung SM863 MZ7KM240HAGR im Raid10. Wir haben die überall verbaut. Gehen ab wie Hölle. I/O hier über 850MB/s

pveperf /ssd-pool
NAME         SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
ssd-pool     444G   264G   180G         -     4%    59%  1.00x  ONLINE  -
    
CPU BOGOMIPS:      40002.32
REGEX/SECOND:      1485155
HD SIZE:           166.29 GB (ssd-pool)
FSYNCS/SECOND:     4291.23
DNS EXT:           127.52 ms
DNS INT:           1.12 ms (osit.cc)
pveperf /ssd-pool  3.29s user 5.15s system 61% cpu 13.627 total