Proxmox PGs

[Christian95]

Hallo,

ich habe aktuell einen Ceph Pool auf PVE 7 mit Size/min 3/2 und 15 OSD.
Der PG Autoscaler ist aktiviert, jedoch sind die OSD ziemlich unregelmäßig gefüllt.

Ich habe 3.84TB NVMes mit einer weight von 3.49309 und 7.68TB NVMes mit einer weight von 6.9863, dabei ist die eine z.B. zu 68% gefüllt und eine andere zu 38.17% wieder eine andere zu 57.17%. Jeder Host mit OSDs ist so ausgelegt, dass insgesamt immer 11,52TB RAW Speicher pro System vorhanden sind.

Der Autoscaler hat 128PGs ausgewählt, in meinem alten PVE6 Cluster hätte ich bei 15*100/3=500 bereits 512PGs ausgewählt.
Sollte ich die PGs manuell hoch stellen, oder liegt die unterschiedliche Nutzung der 15 OSD an etwas anderem?

Anbei noch ein Screenshot.

 

[shanreich]

Ist denn auch eine Target Size/Ratio bei dem Pool eingestellt? Ohne das Setting funktioniert der Autoscaler nicht. Was ist denn der Output von folgenden Commands?

ceph osd df tree
pveceph pool ls

 

[aaron]

Als Nachtrag: Mit gesetzter target_ratio/target_size lässt man den Autoscaler wissen, wie der erwartet Platzverbrauch sein wird, so dass dieser dann gleich das in die Berechnung einfließen lässt, als nur den aktuellen Platzverbrauch des Pools.

Wenn optimal und aktuelle PG_num sich um einen Faktor 3 oder mehr unterscheiden, ändert der Autoscaler diese dann selber wenn er auf ON gesetzt ist.
Laut Screenshot ist das aber nur ein Unterschied von 2, deshalb wirst du die pg_num selber ändern müssen.