Timeouts bei diversen Aktionen

[NothingTV]

Hallöchen,

ich habe hier einen Cluster mit knapp 40 Nodes und über 2k VMs mit rbd storage (ceph cluster), je mehr VMs und Nodes dazukommen, desto langsamer wird so gut wie jede Aktion (VM starten, stoppen, disk hinzufügen, löschen, vnc, etc.), sehr oft kommt es sogar zu Meldungen wie "cfs-lock 'storage-replica3' error: got lock request timeout" oder "ACL update failed: cfs-lock 'file-user_cfg' error: got lock request timeout". Hat jemand ähnliche Erfahrungen und kann ggf. Tipps zum optimieren geben?

Liebe Grüße

 

[dietmar]

Hast du ein physikalisch getrenntes cluster netzwerk?

 

[NothingTV]

Hast du ein physikalisch getrenntes cluster netzwerk?

ja, also uns gehen wirklich komplett die Ideen aus, was wir noch prüfen/optimieren können

 

[Falk R.]

Hi, das klingt extrem nach Netzwerk.
Bei einem Cluster mit 40 Nodes muss man das Netzwerk schon gut sizen und monitoren.
Kannst du uns dein Netzwerksetup etwas erklären?