Wie kann man die Backup Geschwindigkeiten verstehen und verbessern?

[jstrauss]

Hallo,

wollte Fragen wie die folgenden Proxmox-Backup Task-Logs zu verstehen sind:

INFO: pruned 0 backup(s)
INFO: Finished Backup of VM 113 (00:00:12)
INFO: Backup finished at 2024-02-28 12:28:35
INFO: Starting Backup of VM 114 (qemu)
INFO: Backup started at 2024-02-28 12:28:35
INFO: status = running
INFO: VM Name: jstrauss-directadmin
INFO: include disk 'scsi0' 'nvme:vm-114-disk-0' 1000G
INFO: backup mode: snapshot
INFO: ionice priority: 7
INFO: creating Proxmox Backup Server archive 'vm/114/2024-02-28T11:28:35Z'
INFO: issuing guest-agent 'fs-freeze' command
INFO: issuing guest-agent 'fs-thaw' command
INFO: started backup task '99c7853e-a8f9-4050-9d54-d1a23a2adbf1'
INFO: resuming VM again
INFO: scsi0: dirty-bitmap status: existing bitmap was invalid and has been cleared
INFO:   0% (2.0 GiB of 1000.0 GiB) in 3s, read: 688.0 MiB/s, write: 246.7 MiB/s
INFO:   1% (10.3 GiB of 1000.0 GiB) in 44s, read: 207.1 MiB/s, write: 103.7 MiB/s
INFO:   2% (20.0 GiB of 1000.0 GiB) in 2m 8s, read: 118.1 MiB/s, write: 105.5 MiB/s
INFO:   3% (30.0 GiB of 1000.0 GiB) in 3m 41s, read: 110.6 MiB/s, write: 104.4 MiB/s
INFO:   4% (40.1 GiB of 1000.0 GiB) in 5m 19s, read: 105.2 MiB/s, write: 101.4 MiB/s
INFO:   5% (50.1 GiB of 1000.0 GiB) in 6m 32s, read: 140.0 MiB/s, write: 96.5 MiB/s
INFO:   6% (60.0 GiB of 1000.0 GiB) in 7m 55s, read: 122.5 MiB/s, write: 101.2 MiB/s
INFO:   7% (70.1 GiB of 1000.0 GiB) in 9m 28s, read: 111.2 MiB/s, write: 93.5 MiB/s
INFO:   8% (80.0 GiB of 1000.0 GiB) in 10m 37s, read: 147.1 MiB/s, write: 102.4 MiB/s
INFO:   9% (90.1 GiB of 1000.0 GiB) in 11m 55s, read: 131.6 MiB/s, write: 94.1 MiB/s
INFO:  10% (100.1 GiB of 1000.0 GiB) in 13m 36s, read: 101.5 MiB/s, write: 98.3 MiB/s
INFO:  11% (110.1 GiB of 1000.0 GiB) in 14m 9s, read: 309.8 MiB/s, write: 76.1 MiB/s
INFO:  12% (120.8 GiB of 1000.0 GiB) in 14m 24s, read: 735.2 MiB/s, write: 38.7 MiB/s
INFO:  13% (130.2 GiB of 1000.0 GiB) in 14m 34s, read: 958.4 MiB/s, write: 9.6 MiB/s
INFO:  14% (140.7 GiB of 1000.0 GiB) in 14m 45s, read: 981.8 MiB/s, write: 10.5 MiB/s
INFO:  15% (150.5 GiB of 1000.0 GiB) in 14m 55s, read: 1003.2 MiB/s, write: 9.2 MiB/s
INFO:  16% (160.5 GiB of 1000.0 GiB) in 15m 5s, read: 1021.6 MiB/s, write: 9.6 MiB/s
INFO:  17% (171.0 GiB of 1000.0 GiB) in 15m 15s, read: 1.1 GiB/s, write: 11.6 MiB/s
INFO:  18% (180.1 GiB of 1000.0 GiB) in 15m 24s, read: 1.0 GiB/s, write: 7.1 MiB/s
INFO:  19% (190.4 GiB of 1000.0 GiB) in 15m 34s, read: 1.0 GiB/s, write: 15.6 MiB/s
INFO:  20% (200.8 GiB of 1000.0 GiB) in 15m 45s, read: 976.7 MiB/s, write: 8.4 MiB/s
INFO:  21% (210.1 GiB of 1000.0 GiB) in 16m 54s, read: 136.6 MiB/s, write: 98.7 MiB/s
INFO:  22% (220.1 GiB of 1000.0 GiB) in 18m 42s, read: 95.1 MiB/s, write: 93.7 MiB/s
INFO:  23% (230.0 GiB of 1000.0 GiB) in 20m 23s, read: 101.0 MiB/s, write: 92.8 MiB/s
INFO:  24% (240.0 GiB of 1000.0 GiB) in 22m 16s, read: 90.7 MiB/s, write: 88.4 MiB/s
INFO:  25% (250.1 GiB of 1000.0 GiB) in 23m 38s, read: 125.2 MiB/s, write: 87.1 MiB/s
INFO:  26% (260.0 GiB of 1000.0 GiB) in 25m 5s, read: 117.3 MiB/s, write: 94.9 MiB/s
INFO:  27% (270.1 GiB of 1000.0 GiB) in 26m 16s, read: 145.2 MiB/s, write: 85.1 MiB/s
INFO:  28% (280.1 GiB of 1000.0 GiB) in 27m 59s, read: 99.7 MiB/s, write: 90.6 MiB/s
INFO:  29% (290.2 GiB of 1000.0 GiB) in 29m 17s, read: 131.8 MiB/s, write: 88.7 MiB/s
INFO:  30% (300.1 GiB of 1000.0 GiB) in 30m 44s, read: 117.3 MiB/s, write: 82.2 MiB/s
INFO:  31% (310.5 GiB of 1000.0 GiB) in 32m, read: 140.0 MiB/s, write: 86.3 MiB/s
INFO:  32% (320.2 GiB of 1000.0 GiB) in 32m 49s, read: 201.8 MiB/s, write: 88.8 MiB/s
INFO:  33% (330.0 GiB of 1000.0 GiB) in 34m 6s, read: 131.1 MiB/s, write: 91.4 MiB/s
INFO:  34% (341.0 GiB of 1000.0 GiB) in 35m 15s, read: 162.4 MiB/s, write: 77.4 MiB/s
INFO:  35% (350.1 GiB of 1000.0 GiB) in 35m 26s, read: 851.6 MiB/s, write: 8.0 MiB/s
INFO:  36% (360.3 GiB of 1000.0 GiB) in 35m 37s, read: 945.1 MiB/s, write: 8.7 MiB/s
INFO:  37% (370.8 GiB of 1000.0 GiB) in 35m 48s, read: 981.1 MiB/s, write: 8.0 MiB/s
INFO:  38% (380.1 GiB of 1000.0 GiB) in 36m 14s, read: 363.5 MiB/s, write: 87.7 MiB/s
INFO:  39% (390.3 GiB of 1000.0 GiB) in 37m 17s, read: 166.7 MiB/s, write: 76.1 MiB/s
INFO:  40% (400.2 GiB of 1000.0 GiB) in 37m 28s, read: 919.3 MiB/s, write: 8.0 MiB/s
INFO:  41% (410.6 GiB of 1000.0 GiB) in 37m 40s, read: 885.7 MiB/s, write: 10.0 MiB/s
INFO:  42% (420.3 GiB of 1000.0 GiB) in 37m 51s, read: 906.9 MiB/s, write: 7.6 MiB/s
INFO:  43% (430.4 GiB of 1000.0 GiB) in 38m 1s, read: 1.0 GiB/s, write: 10.4 MiB/s
INFO:  44% (440.0 GiB of 1000.0 GiB) in 38m 24s, read: 428.0 MiB/s, write: 84.5 MiB/s
INFO:  45% (450.1 GiB of 1000.0 GiB) in 39m 48s, read: 123.5 MiB/s, write: 88.4 MiB/s
INFO:  46% (461.0 GiB of 1000.0 GiB) in 40m 18s, read: 370.4 MiB/s, write: 58.3 MiB/s
INFO:  47% (470.4 GiB of 1000.0 GiB) in 40m 28s, read: 968.0 MiB/s, write: 7.6 MiB/s
INFO:  48% (480.3 GiB of 1000.0 GiB) in 40m 38s, read: 1012.4 MiB/s, write: 12.8 MiB/s
INFO:  49% (490.3 GiB of 1000.0 GiB) in 41m 11s, read: 308.2 MiB/s, write: 73.8 MiB/s
INFO:  50% (500.5 GiB of 1000.0 GiB) in 41m 22s, read: 956.0 MiB/s, write: 28.0 MiB/s
INFO:  51% (510.1 GiB of 1000.0 GiB) in 41m 38s, read: 610.5 MiB/s, write: 43.5 MiB/s
INFO:  52% (520.4 GiB of 1000.0 GiB) in 41m 53s, read: 705.1 MiB/s, write: 48.5 MiB/s
INFO:  53% (530.2 GiB of 1000.0 GiB) in 42m 6s, read: 773.5 MiB/s, write: 37.5 MiB/s
INFO:  54% (540.2 GiB of 1000.0 GiB) in 42m 16s, read: 1022.4 MiB/s, write: 10.8 MiB/s
INFO:  55% (550.7 GiB of 1000.0 GiB) in 42m 27s, read: 976.0 MiB/s, write: 12.0 MiB/s
INFO:  56% (560.7 GiB of 1000.0 GiB) in 42m 37s, read: 1022.0 MiB/s, write: 8.8 MiB/s
INFO:  57% (570.9 GiB of 1000.0 GiB) in 42m 47s, read: 1.0 GiB/s, write: 12.0 MiB/s
INFO:  58% (580.3 GiB of 1000.0 GiB) in 42m 56s, read: 1.0 GiB/s, write: 9.8 MiB/s
INFO:  59% (590.8 GiB of 1000.0 GiB) in 43m 7s, read: 981.1 MiB/s, write: 8.0 MiB/s
INFO:  60% (600.3 GiB of 1000.0 GiB) in 43m 16s, read: 1.1 GiB/s, write: 12.4 MiB/s
INFO:  61% (610.4 GiB of 1000.0 GiB) in 43m 26s, read: 1.0 GiB/s, write: 7.2 MiB/s
INFO:  62% (620.4 GiB of 1000.0 GiB) in 43m 45s, read: 541.1 MiB/s, write: 59.8 MiB/s
INFO:  63% (630.9 GiB of 1000.0 GiB) in 43m 55s, read: 1.0 GiB/s, write: 10.8 MiB/s
INFO:  64% (640.7 GiB of 1000.0 GiB) in 44m 5s, read: 1009.2 MiB/s, write: 28.4 MiB/s
INFO:  65% (650.1 GiB of 1000.0 GiB) in 44m 21s, read: 601.2 MiB/s, write: 84.8 MiB/s
INFO:  66% (660.1 GiB of 1000.0 GiB) in 44m 40s, read: 540.0 MiB/s, write: 53.5 MiB/s
INFO:  67% (670.3 GiB of 1000.0 GiB) in 44m 59s, read: 548.8 MiB/s, write: 76.4 MiB/s
INFO:  68% (680.3 GiB of 1000.0 GiB) in 45m 21s, read: 463.1 MiB/s, write: 64.5 MiB/s
INFO:  69% (691.1 GiB of 1000.0 GiB) in 45m 34s, read: 853.5 MiB/s, write: 43.4 MiB/s
INFO:  70% (700.5 GiB of 1000.0 GiB) in 45m 56s, read: 439.3 MiB/s, write: 72.4 MiB/s
INFO:  71% (710.0 GiB of 1000.0 GiB) in 46m 8s, read: 811.0 MiB/s, write: 50.0 MiB/s
INFO:  72% (720.5 GiB of 1000.0 GiB) in 46m 19s, read: 974.2 MiB/s, write: 10.9 MiB/s
INFO:  73% (730.9 GiB of 1000.0 GiB) in 46m 31s, read: 884.7 MiB/s, write: 11.0 MiB/s
INFO:  74% (740.9 GiB of 1000.0 GiB) in 46m 41s, read: 1022.8 MiB/s, write: 10.8 MiB/s
INFO:  75% (750.5 GiB of 1000.0 GiB) in 46m 51s, read: 992.8 MiB/s, write: 9.2 MiB/s
INFO:  76% (760.1 GiB of 1000.0 GiB) in 47m 1s, read: 978.0 MiB/s, write: 11.6 MiB/s
INFO:  77% (770.9 GiB of 1000.0 GiB) in 47m 12s, read: 1006.9 MiB/s, write: 8.4 MiB/s
INFO:  78% (780.4 GiB of 1000.0 GiB) in 47m 30s, read: 537.3 MiB/s, write: 60.2 MiB/s
INFO:  79% (790.8 GiB of 1000.0 GiB) in 47m 42s, read: 893.3 MiB/s, write: 5.0 MiB/s
INFO:  80% (800.1 GiB of 1000.0 GiB) in 48m, read: 530.2 MiB/s, write: 60.0 MiB/s
INFO:  81% (810.4 GiB of 1000.0 GiB) in 48m 10s, read: 1.0 GiB/s, write: 15.2 MiB/s
INFO:  82% (820.8 GiB of 1000.0 GiB) in 48m 20s, read: 1.0 GiB/s, write: 11.6 MiB/s
INFO:  83% (830.2 GiB of 1000.0 GiB) in 48m 35s, read: 639.7 MiB/s, write: 89.6 MiB/s
INFO:  84% (840.4 GiB of 1000.0 GiB) in 48m 47s, read: 875.7 MiB/s, write: 47.3 MiB/s
INFO:  85% (850.7 GiB of 1000.0 GiB) in 49m 1s, read: 750.6 MiB/s, write: 63.7 MiB/s
INFO:  86% (860.0 GiB of 1000.0 GiB) in 49m 10s, read: 1.0 GiB/s, write: 10.2 MiB/s
INFO:  87% (870.4 GiB of 1000.0 GiB) in 49m 20s, read: 1.0 GiB/s, write: 10.8 MiB/s
INFO:  88% (880.9 GiB of 1000.0 GiB) in 49m 31s, read: 979.6 MiB/s, write: 10.9 MiB/s
INFO:  89% (890.1 GiB of 1000.0 GiB) in 49m 40s, read: 1.0 GiB/s, write: 9.8 MiB/s
INFO:  90% (900.5 GiB of 1000.0 GiB) in 49m 50s, read: 1.0 GiB/s, write: 7.6 MiB/s
INFO:  91% (911.0 GiB of 1000.0 GiB) in 50m 1s, read: 976.4 MiB/s, write: 15.6 MiB/s
INFO:  92% (920.2 GiB of 1000.0 GiB) in 50m 10s, read: 1.0 GiB/s, write: 7.1 MiB/s
INFO:  93% (930.3 GiB of 1000.0 GiB) in 50m 20s, read: 1.0 GiB/s, write: 7.2 MiB/s
INFO:  94% (940.1 GiB of 1000.0 GiB) in 50m 48s, read: 357.3 MiB/s, write: 73.3 MiB/s
INFO:  95% (950.3 GiB of 1000.0 GiB) in 51m 37s, read: 213.0 MiB/s, write: 96.4 MiB/s
INFO:  96% (960.1 GiB of 1000.0 GiB) in 53m 11s, read: 106.9 MiB/s, write: 94.8 MiB/s
INFO:  97% (970.1 GiB of 1000.0 GiB) in 54m 23s, read: 142.4 MiB/s, write: 88.4 MiB/s
INFO:  98% (980.1 GiB of 1000.0 GiB) in 55m 44s, read: 125.3 MiB/s, write: 86.9 MiB/s
INFO:  99% (990.4 GiB of 1000.0 GiB) in 56m 59s, read: 140.7 MiB/s, write: 82.7 MiB/s
INFO: 100% (1000.0 GiB of 1000.0 GiB) in 57m 48s, read: 201.5 MiB/s, write: 91.1 MiB/s
INFO: backup is sparse: 4.43 GiB (0%) total zero data
INFO: backup was done incrementally, reused 735.49 GiB (73%)
INFO: transferred 1000.00 GiB in 3471 seconds (295.0 MiB/s)
INFO: adding notes to backup
INFO: prune older backups with retention: keep-last=5
INFO: running 'proxmox-backup-client prune' for 'vm/114'
INFO: pruned 0 backup(s)
INFO: Finished Backup of VM 114 (00:57:53)
INFO: Backup finished at 2024-02-28 13:26:28
INFO: Starting Backup of VM 115 (qemu)
INFO: Backup started at 2024-02-28 13:26:28
INFO: status = running
INFO: VM Name: jstrauss-docker
INFO: include disk 'scsi0' 'nvme:vm-115-disk-0' 180G
INFO: include disk 'scsi1' 'toshibaPool:vm-115-disk-0' 8000G
INFO: backup mode: snapshot
INFO: ionice priority: 7
INFO: creating Proxmox Backup Server archive 'vm/115/2024-02-28T12:26:28Z'
INFO: issuing guest-agent 'fs-freeze' command
INFO: issuing guest-agent 'fs-thaw' command
INFO: started backup task '9422d395-2f7e-4535-9001-d69104a4cafe'
INFO: resuming VM again
INFO: scsi0: dirty-bitmap status: existing bitmap was invalid and has been cleared
INFO: scsi1: dirty-bitmap status: existing bitmap was invalid and has been cleared
INFO:   0% (568.0 MiB of 8.0 TiB) in 3s, read: 189.3 MiB/s, write: 12.0 MiB/s
INFO:   1% (82.0 GiB of 8.0 TiB) in 1m 27s, read: 992.4 MiB/s, write: 4.4 MiB/s
INFO:   2% (163.6 GiB of 8.0 TiB) in 6m 42s, read: 265.4 MiB/s, write: 533.1 KiB/s
INFO:   3% (245.5 GiB of 8.0 TiB) in 11m 58s, read: 265.4 MiB/s, write: 155.5 KiB/s
INFO:   4% (327.2 GiB of 8.0 TiB) in 17m 20s, read: 259.9 MiB/s, write: 178.1 KiB/s
INFO:   5% (409.2 GiB of 8.0 TiB) in 23m 2s, read: 245.3 MiB/s, write: 119.8 KiB/s
INFO:   6% (490.8 GiB of 8.0 TiB) in 28m 27s, read: 257.4 MiB/s, write: 63.0 KiB/s
INFO:   7% (572.7 GiB of 8.0 TiB) in 34m 10s, read: 244.4 MiB/s, write: 215.0 KiB/s
INFO:   8% (654.4 GiB of 8.0 TiB) in 40m 40s, read: 214.5 MiB/s, write: 189.0 KiB/s
INFO:   9% (736.3 GiB of 8.0 TiB) in 46m 55s, read: 223.8 MiB/s, write: 251.2 KiB/s
INFO:  10% (818.1 GiB of 8.0 TiB) in 54m 7s, read: 193.7 MiB/s, write: 85.3 KiB/s
INFO:  11% (899.8 GiB of 8.0 TiB) in 1h 56s, read: 204.7 MiB/s, write: 160.2 KiB/s
INFO:  12% (981.7 GiB of 8.0 TiB) in 1h 8m 51s, read: 176.4 MiB/s, write: 69.0 KiB/s
INFO:  13% (1.0 TiB of 8.0 TiB) in 1h 13m 40s, read: 289.6 MiB/s, write: 155.9 KiB/s
INFO:  14% (1.1 TiB of 8.0 TiB) in 1h 18m 40s, read: 279.7 MiB/s, write: 136.5 KiB/s
INFO:  15% (1.2 TiB of 8.0 TiB) in 1h 23m 6s, read: 315.2 MiB/s, write: 77.0 KiB/s
INFO:  16% (1.3 TiB of 8.0 TiB) in 1h 27m 22s, read: 326.5 MiB/s, write: 32.0 KiB/s
INFO:  17% (1.4 TiB of 8.0 TiB) in 1h 31m 40s, read: 325.1 MiB/s, write: 31.8 KiB/s
INFO:  18% (1.4 TiB of 8.0 TiB) in 1h 36m 20s, read: 299.3 MiB/s, write: 14.6 KiB/s
INFO:  19% (1.5 TiB of 8.0 TiB) in 1h 40m 43s, read: 318.7 MiB/s, write: 31.1 KiB/s
INFO:  20% (1.6 TiB of 8.0 TiB) in 1h 44m 33s, read: 363.5 MiB/s, write: 53.4 KiB/s
INFO:  21% (1.7 TiB of 8.0 TiB) in 1h 47m 44s, read: 438.2 MiB/s, write: 0 B/s
INFO:  22% (1.8 TiB of 8.0 TiB) in 1h 52m 34s, read: 289.7 MiB/s, write: 28.2 KiB/s
INFO:  23% (1.8 TiB of 8.0 TiB) in 1h 56m 43s, read: 335.6 MiB/s, write: 65.8 KiB/s
INFO:  24% (1.9 TiB of 8.0 TiB) in 2h 59s, read: 327.1 MiB/s, write: 32.0 KiB/s
INFO:  25% (2.0 TiB of 8.0 TiB) in 2h 5m 7s, read: 338.2 MiB/s, write: 115.6 KiB/s
INFO:  26% (2.1 TiB of 8.0 TiB) in 2h 9m 34s, read: 313.3 MiB/s, write: 30.7 KiB/s
INFO:  27% (2.2 TiB of 8.0 TiB) in 2h 13m 57s, read: 319.2 MiB/s, write: 31.1 KiB/s
INFO:  28% (2.2 TiB of 8.0 TiB) in 2h 17m 59s, read: 345.5 MiB/s, write: 50.8 KiB/s
INFO:  29% (2.3 TiB of 8.0 TiB) in 2h 22m 25s, read: 314.6 MiB/s, write: 0 B/s
INFO:  30% (2.4 TiB of 8.0 TiB) in 2h 26m 49s, read: 318.5 MiB/s, write: 77.6 KiB/s
INFO:  31% (2.5 TiB of 8.0 TiB) in 2h 31m, read: 333.1 MiB/s, write: 32.6 KiB/s
INFO:  32% (2.6 TiB of 8.0 TiB) in 2h 35m 26s, read: 314.8 MiB/s, write: 46.2 KiB/s
INFO:  33% (2.6 TiB of 8.0 TiB) in 2h 40m 11s, read: 294.6 MiB/s, write: 100.6 KiB/s
INFO:  34% (2.7 TiB of 8.0 TiB) in 2h 43m 32s, read: 417.2 MiB/s, write: 101.9 KiB/s
INFO:  35% (2.8 TiB of 8.0 TiB) in 2h 47m 7s, read: 387.5 MiB/s, write: 19.1 KiB/s
INFO:  36% (2.9 TiB of 8.0 TiB) in 2h 51m 49s, read: 297.9 MiB/s, write: 14.5 KiB/s
INFO:  37% (3.0 TiB of 8.0 TiB) in 2h 56m 6s, read: 325.8 MiB/s, write: 63.8 KiB/s
INFO:  38% (3.0 TiB of 8.0 TiB) in 3h 21s, read: 328.8 MiB/s, write: 32.1 KiB/s
INFO:  39% (3.1 TiB of 8.0 TiB) in 3h 4m 46s, read: 315.3 MiB/s, write: 30.9 KiB/s
INFO:  40% (3.2 TiB of 8.0 TiB) in 3h 9m 11s, read: 316.3 MiB/s, write: 30.9 KiB/s
INFO:  41% (3.3 TiB of 8.0 TiB) in 3h 13m 4s, read: 359.5 MiB/s, write: 17.6 KiB/s
INFO:  42% (3.4 TiB of 8.0 TiB) in 3h 17m 4s, read: 348.6 MiB/s, write: 102.4 KiB/s
INFO:  43% (3.4 TiB of 8.0 TiB) in 3h 21m 59s, read: 283.7 MiB/s, write: 97.2 KiB/s
INFO:  44% (3.5 TiB of 8.0 TiB) in 3h 26m 34s, read: 305.0 MiB/s, write: 14.9 KiB/s
INFO:  45% (3.6 TiB of 8.0 TiB) in 3h 31m 15s, read: 297.9 MiB/s, write: 0 B/s
INFO:  46% (3.7 TiB of 8.0 TiB) in 3h 35m 21s, read: 341.1 MiB/s, write: 133.2 KiB/s
INFO:  47% (3.8 TiB of 8.0 TiB) in 3h 39m 51s, read: 309.6 MiB/s, write: 15.2 KiB/s
INFO:  48% (3.8 TiB of 8.0 TiB) in 3h 44m 24s, read: 307.6 MiB/s, write: 15.0 KiB/s
INFO:  49% (3.9 TiB of 8.0 TiB) in 3h 48m 59s, read: 303.9 MiB/s, write: 193.6 KiB/s
...

Wie muss man die "read" und "write" Werte verstehen?
Ist mit "read" die Lesegeschwindigkeit von der jeweiligen VM-Disk vom zugehörigen Pool gemeint?
Und "write" die Schreibgeschwindigkeit auf den Proxmox Backup Server?

Und zB.

INFO: transferred 1000.00 GiB in 3471 seconds (295.0 MiB/s)

295MiB/s ist dann der Durchschnitt der Lesegeschwindigkeit?

Die erste VM ist auf einem NVMe RaidZ1 Pool.
Die zweite VM ist auf einem HDD RaidZ1 Pool (mit Special Drives und ZIL und SLOG Cache auf der Proxmox Boot SATA SSD).

Ich möchte auch die Geschwindigkeit beim backuppen verbessern...
Auf dem Backup Server habe ich auch einen RaidZ1 Pool mit HDDs und einem ZIL und SLOG Cache auf einer alten Consumer Crucial NVMe SSD.

Mein Plan wäre den Backup Server mit 2x NVMe SSDs für Special Drives und einer Enterprise Samsung PCIe HHHL SSD upzugraden, und den Hauptserver auch mit einer Intel 900P HHHL PCIe SSD für jeweils die HDD Pools.

Würde das die Backupgeschwindigkeit verbessern sodass ich auch annähernd die 10Gbit Netzwerkkarte zwischen den Servern ausnutzen kann?

 

[Falk R.]

Wie muss man die "read" und "write" Werte verstehen?
Ist mit "read" die Lesegeschwindigkeit von der jeweiligen VM-Disk vom zugehörigen Pool gemeint?
Und "write" die Schreibgeschwindigkeit auf den Proxmox Backup Server?

Richtig.

Und zB.

INFO: transferred 1000.00 GiB in 3471 seconds (295.0 MiB/s)

295MiB/s ist dann der Durchschnitt der Lesegeschwindigkeit?

Auch richtig.

Die erste VM ist auf einem NVMe RaidZ1 Pool.
Die zweite VM ist auf einem HDD RaidZ1 Pool (mit Special Drives und ZIL und SLOG Cache auf der Proxmox Boot SATA SSD).

RaidZ1 ist eigentlich nicht empfohlen für VMs. Bei NVMe's ist die Performance meistens trotzdem OK, aber vorsicht mit Consumer NVMe's, die schreibst du so ganz schnell kaputt.
Normalerweise tendiert man bei VM Pools eher zu Mirror.

Ich möchte auch die Geschwindigkeit beim backuppen verbessern...
Auf dem Backup Server habe ich auch einen RaidZ1 Pool mit HDDs und einem ZIL und SLOG Cache auf einer alten Consumer Crucial NVMe SSD.

Für Backup nimmt man, je nachdem wie viele Disks da sind lieber RaidZ2.

Mein Plan wäre den Backup Server mit 2x NVMe SSDs für Special Drives und einer Enterprise Samsung PCIe HHHL SSD upzugraden, und den Hauptserver auch mit einer Intel 900P HHHL PCIe SSD für jeweils die HDD Pools.

Wenn die Special Device SSDs mit PLP sind, dann bringt das bestimmt einiges. Was willst du dann noch mit der PCI SSD machen?

Würde das die Backupgeschwindigkeit verbessern sodass ich auch annähernd die 10Gbit Netzwerkkarte zwischen den Servern ausnutzen kann?

Das kann dir keiner garantieren. Wenn du HDDs im Pool hast, sind die immer das Bottleneck, auch wenn man einigen I/O auf SSDs verlagern kann.
Wenn du Auf dem Server alles SSDs hättest und den Backupserver auch etwas getuned, dann ist 10GBit schnell das Bottleneck, zumindest beim ersten Vollbackup.
Bei den Inkrementellen Backups, kommen oft gar nicht so viele Daten zusammen und die Struktur der Daten ist auch immer unterschiedlich.
Ich habe bei einem Kunden Backups von VMs auf einem PVE, wovon die langsamste mit 200MB/s transfer und die schnellste 1GB/s transfer hat.
Alles gleicher Quellpool und gleicher Backuppool. Nur verschieden Daten in den VMs, die sich ganz unterschiedlich ändern.

 

[jstrauss]

NVMe's ist die Performance meistens trotzdem OK, aber vorsicht mit Consumer NVMe's, die schreibst du so ganz schnell kaputt.

Habe dort WD Red SN700 verbaut, also eig. so ein zwischen Ding zwischen Consumer und Enterprise… (wenn man das so zählen kann).

Normalerweise tendiert man bei VM Pools eher zu Mirror.

Wollte am Anfang eher auf Speichereffizienz usw. schauen und bin da auf RaidZ1 gestoßen da es die beste Performance für die Preis/Leistung bietet.

Wenn die Special Device SSDs mit PLP sind, dann bringt das bestimmt einiges. Was willst du dann noch mit der PCI SSD machen?

Als Special Devide SSDs sind auch WD Red SN700 verbaut als Mirror.
Die PCIe SSD sollte ja trotzdem seine Vorteile als ZFS Cache bringen oder nicht?
Das sollte den Pool aber schon bisschen tunen, wenn ich bei beiden Seiten SSD Caches mit guten Random I/O Werten einbaue.

Bzw. allgemein sollte eine Enterprise SSD wie eine Intel 900P die Performance des HDD Pools dann bei den VMs verbessern und auch nicht so einen großen I/O Delay während den Backups auslösen oder?

 

[Falk R.]

Habe dort WD Red SN700 verbaut, also eig. so ein zwischen Ding zwischen Consumer und Enterprise… (wenn man das so zählen kann).

Das ist auch so ne "dolle" Prosumer SSD. Consumer Technik mit Pro Preis. Die hat kein PLP und ist dadurch bei Virtualisierung und ganz besonders bei ZFS schnell durch.

Wollte am Anfang eher auf Speichereffizienz usw. schauen und bin da auf RaidZ1 gestoßen da es die beste Performance für die Preis/Leistung bietet.

Naja, geht so. Mit Mirror hast du doch einiges mehr an Performance.

Als Special Devide SSDs sind auch WD Red SN700 verbaut als Mirror.

Da sterben die noch schneller. Dann lieber gebrauchte Enterprise SSDs. Gerade als Special Device brauchst du nicht viel Volumen, aber gute Schreibperformance.

Die PCIe SSD sollte ja trotzdem seine Vorteile als ZFS Cache bringen oder nicht?
Das sollte den Pool aber schon bisschen tunen, wenn ich bei beiden Seiten SSD Caches mit guten Random I/O Werten einbaue.

Ja das bringt natürlich was, aber Cache kann dir trotzdem nicht den Read von der HDD komplett ersparen.

Bzw. allgemein sollte eine Enterprise SSD wie eine Intel 900P die Performance des HDD Pools dann bei den VMs verbessern und auch nicht so einen großen I/O Delay während den Backups auslösen oder?

Auf jeden Fall.

 

[jstrauss]

Ok danke auf jeden Fall mal für deine Hilfe.
Werde auf jeden Fall in der nächsten Zeit mal ein größeres Upgrade durchführen wo ich diese Aspekte beachten werde.

 

[jstrauss]

Hab jetzt mal als temporäre Lösung wie oben beschrieben eine Intel Optane 900P im Haupt-Server und eine Samsung PM1735 im Backup Server als SLOG und L2ARC Cache eingebaut und nutze nun vollständig die Gigabit Verbindung zwischen den Servern aus (Beim ersten initialen Backup auf einen PBS - Bin gespannt wie es sich dann bei den inkrementellen verhält). Es hat also sehr viel geholfen. Und der IO-Delay ist nun auch während dem backuppen nicht konstant hoch.