CEPH - Kalkulation RAM

[AST]

Moin,

gibt es eine Art Formel um den RAM-Verbrauch von Ceph sauber abzufedern?
Bei Ceph stand, dass jeder Dienst 1GB RAM benötigen würde, bei OSDs nur 500MB.
Wenn ich also mit 4 Journalen (1TB SSD) und 20 OSDs (1TB HDD) unterwegs bin, dann komme ich auf 14GB RAM für CEPH reservieren.

Haut das hin oder übersehe ich noch etwas?

Gruß!

 

[Alwin]

Hast schon die Hardware Empfehlung von Ceph durchgelesen?
http://docs.ceph.com/docs/luminous/start/hardware-recommendations/

Noch dazu gesagt, jede OSD verwendet ein Memory Limit unter anderem für Caching, Standard 4GB. Das kann natürlich Angepasst werden.

 

[AST]

Was zum ... ich hatte so ein Paper gelesen, da standen aber andere Werte darin.

Was ein kleiner und ein großer Cluster ist, ist leider nicht definiert.
Wenn ich nun von groß ausgehe:
Monitor 10GB + OSD: 20x5GB = 100GB, also 120GB RAM für das Storagesystem max.? Sparsam ist das jetzt nicht unbedingt.

 

[Alwin]

Monitor 10GB + OSD: 20x5GB = 100GB, also 120GB RAM für das Storagesystem max.? Sparsam ist das jetzt nicht unbedingt.

32 GB / node (Annahme 4 Nodes), liegt nicht im unmöglichen. Der RAM Verbrauch kann mittel Stellschrauben reduziert werden, aber natürlich geht das auf Kosten der Performance.

 

[tschanness]

Sparsam ist das jetzt nicht unbedingt.

..und im Vergleich zu manch anderen SDS Lösungen immernoch relativ wenig...

 

[Romsch]

Moin,

gibt es eine Art Formel um den RAM-Verbrauch von Ceph sauber abzufedern?
Bei Ceph stand, dass jeder Dienst 1GB RAM benötigen würde, bei OSDs nur 500MB.
Wenn ich also mit 4 Journalen (1TB SSD) und 20 OSDs (1TB HDD) unterwegs bin, dann komme ich auf 14GB RAM für CEPH reservieren.

Haut das hin oder übersehe ich noch etwas?

Gruß!

Hallo!

Grundsätzlich bei CEPH mit Version luminous/bluestore gilt für die Berechnung folgendes;

sind SSDs im Einsatz, kannst du pro SSD(OSD) 3GB RAM berechnen, sind es HDDs, gehen pro HDD (OSD) 1 GB RAM drauf (jede Festplatte hat sein eigenes Journal).

Es ist nicht empfohlen, mehr als drei (max. vier) Festplatten pro Journal zu konfigurieren, bei Dir wären es fünf pro Journal.

Viele Grüße,

Roman

 

[Alwin]

sind SSDs im Einsatz, kannst du pro SSD(OSD) 3GB RAM berechnen, sind es HDDs, gehen pro HDD (OSD) 1 GB RAM drauf (jede Festplatte hat sein eigenes Journal).

Das hat sich leider auch schon wieder geändert. Jetzt gibt's ein osd_memory_target.
http://docs.ceph.com/docs/luminous/start/hardware-recommendations/#osds-ceph-osd

 

[Romsch]

Oh, danke für die Info!
Gruß, Roman