[SOLVED] Ceph Pool Speicherplatz wird weniger / active+remapped+backfill_wait wird nicht fertig

[johanng]

Hallo liebe Community,

ich habe vor ca. 4 Wochen von iSCSI (auf einem NAS) auf Ceph (RBD) umgestellt. Die Migration lief ohne Probleme.

Mein Cluster:
3 Nodes
pro Node 2x 1TB SATA SSD
als Ceph Network 10GBit/s

Heute habe ich eine 300GB VM Disk auf den Ceph Pool von iSCSI (auf einem NAS) migriert.
Ca. 10 min. später erschien folgendes (Screenshot 1)

Außerdem wird angezeigt, das Daten synchronisiert werden. Allerdings hängt der Fortschritt bei 0% (Screenshot 2).

Die Größe des Pools sinkt kontinuierlich (Screenshot 3).

Was kann ich hier machen?

Viele Grüße

 

[johanng]

Nachtrag:
Das Log zeigt folgendes:

2021-08-08T18:14:12.846863+0200 mgr.srv1 (mgr.203107) 835823 : cluster [DBG] pgmap v836451: 129 pgs: 1 active+remapped+backfilling, 13 active+remapped+backfill_wait, 115 active+clean; 1015 GiB data, 2.8 TiB used, 2.6 TiB / 5.5 TiB avail; 57 MiB/s rd, 360 KiB/s wr, 58 op/s; 44038/783183 objects misplaced (5.623%); 39 MiB/s, 10 objects/s recovering
2021-08-08T18:14:14.847581+0200 mgr.srv1 (mgr.203107) 835824 : cluster [DBG] pgmap v836452: 129 pgs: 1 active+remapped+backfilling, 13 active+remapped+backfill_wait, 115 active+clean; 1015 GiB data, 2.8 TiB used, 2.6 TiB / 5.5 TiB avail; 67 MiB/s rd, 359 KiB/s wr, 68 op/s; 44038/783183 objects misplaced (5.623%); 26 MiB/s, 6 objects/s recovering
2021-08-08T18:14:16.848290+0200 mgr.srv1 (mgr.203107) 835825 : cluster [DBG] pgmap v836453: 129 pgs: 1 active+remapped+backfilling, 13 active+remapped+backfill_wait, 115 active+clean; 1015 GiB data, 2.8 TiB used, 2.6 TiB / 5.5 TiB avail; 54 MiB/s rd, 392 KiB/s wr, 66 op/s; 43998/783183 objects misplaced (5.618%); 38 MiB/s, 10 objects/s recovering
2021-08-08T18:14:18.849052+0200 mgr.srv1 (mgr.203107) 835826 : cluster [DBG] pgmap v836454: 129 pgs: 1 active+remapped+backfilling, 13 active+remapped+backfill_wait, 115 active+clean; 1015 GiB data, 2.8 TiB used, 2.6 TiB / 5.5 TiB avail; 63 MiB/s rd, 445 KiB/s wr, 65 op/s; 43998/783183 objects misplaced (5.618%); 26 MiB/s, 6 objects/s recovering

 

[gurubert]

Das wird der PG Autoscaler sein, der mit mehr Daten im Pool mehr Placement Groups anlegt. Dabei werden Daten neu verteilt (backfilling misplaced). Das ist ganz normale Selbstorganisation von Ceph. Dem muss nur ein bisschen Zeit gegeben werden.

 

[johanng]

Okay, vielen Dank. Heute morgen ist alles wieder normal.