2 CEPH Systeme auf Proxmox

[mpatzwah]

Hallo zusammen,
ist evtl eine blöde Frage, aber sie beschäftigt mich trotzdem:
Ich habe ein 3 Node Proxmox System (neuste Version) mit je 2x4TB SSD pro Node. Jetzt stecken in den Nodes auch 2 * 4TB HDD Platten die ich für unwichtigere VM´s gerne verwenden würde. Kann ich da ein zweites Ceph System aufbauen ?
Ich habe bisher nicht gefunden wie die Zuordung von OSDs zu Pools ist.

Vielen Dank
Marco

 

[Falk R.]

Hi,
du musst da mit Device Klassen arbeiten.
https://pve.proxmox.com/pve-docs/chapter-pveceph.html#pve_ceph_device_classes

 

[mpatzwah]

Danke für den Link !
Setzt das jemand produktiv ein ?

 

[Falk R.]

Danke für den Link !
Setzt das jemand produktiv ein ?

Ja, ganz viele Unternehmen. Im Homebereich weniger, da die Hardwareanforderungen recht hoch sind.
Ich habe zuhause auch einen PVE Cluster mit Ceph, aber auch mit 40GBit für Ceph und 10GBit für die VMs.

 

[aaron]

Bevor du eine Regel für eine spezifische Device Class erstellst, muss mindestens eine OSD vorhanden sein, die diese verwendet. Dann kannst du diese Regel auch direkt beim erstellen eines Pools in der GUI verwenden.

Am besten machst du eine Regel für SSDs jetzt und weißt diese deinen aktuellen Pools zu. Das kann allerdings auch schon ein Rebalance auslösen. Dann fügst du die HDDs als OSDs hinzu und erstellst eine HDD Regel welche du dann für den neuen Pool verwendest.

Wichtig ist, sobald man Device Class spezifische Regeln verwendet, dass auch wirklich jeder Pool einer Device Class zugewiesen ist. Ansonsten kann der Autoscaler nicht arbeiten. Die Default "replicated_rule" unterscheidet nicht nach Device Class, wodurch es dann zu einem Überlapp kommt welcher vom Autoscaler nicht gelöst werden kann

 

[Falk R.]

Ich empfehle hierzu die PVE Advanced Schulung, da wurde das schön gezeigt.

 

[mpatzwah]

Bevor du eine Regel für eine spezifische Device Class erstellst, muss mindestens eine OSD vorhanden sein, die diese verwendet. Dann kannst du diese Regel auch direkt beim erstellen eines Pools in der GUI verwenden.

Am besten machst du eine Regel für SSDs jetzt und weißt diese deinen aktuellen Pools zu. Das kann allerdings auch schon ein Rebalance auslösen. Dann fügst du die HDDs als OSDs hinzu und erstellst eine HDD Regel welche du dann für den neuen Pool verwendest.

Wichtig ist, sobald man Device Class spezifische Regeln verwendet, dass auch wirklich jeder Pool einer Device Class zugewiesen ist. Ansonsten kann der Autoscaler nicht arbeiten. Die Default "replicated_rule" unterscheidet nicht nach Device Class, wodurch es dann zu einem Überlapp kommt welcher vom Autoscaler nicht gelöst werden kann

Puuh Danke, ich glaube das übersteigt meine Besoldungsklasse äh Wissensklasse