Search results

Hallo zusammen, in der Firma betreiben wir einen Proxmox/Ceph Cluster mit 5 Nodes. Ceph läuft auf 4 Nodes, der 5. wurde nachträglich zwecks Quorum hinzugefügt. Am Wochenende habe ich auf allen Nodes die aktuellen PVE Updates installiert. Hierbei ist mir an der IPMI Konsole aufgefallen, dass...

Hallo Udo, vielen Dank für deine Antwort. Ich hatte das BIOS zuletzt im Februar 2019 aktualisiet, als die Server in Betrieb gingen. Damals war die Verison 3.0a aktuell. Inzwischen gibt es die Version 3.1a. Mal schauen, ob der Server damit stabil läuft. Viele Grüße Patrick

Hallo zusammen, wir haben in der Firma einen 4-Node-Cluster laufen. Seit einigen Monaten startet der Node PVE01 nach einer Uptime von ca. 20-25 Tagen unerwartet neu. Wir nutzen kein HA und der Hardware Watchdog ist im BIOS ausgeschaltet, daher kann ich mir nicht erkären, was den Neustart...

Sieht gut aus. Jetzt kannst Du mit apt-get dist-upgrade die Pakete aktualisieren.

Hallo saeft_3004, es sieht so aus, als hättest Du jetzt beide Repositories (Enterprise und No-Subscription) aktiviert. Probiere mal das Enterprise Repository in der /etc/apt/sources.list.d/pve-enterprise.list auszukommentieren und mach dann noch mal ein apt-get update. Gruß Patrick

Ja. Ich habe verstanden, dass die 4k Single Thread IO Perormance bei Ceph sehr stark von der Latenz abhängt. Man muss also versuchen, die Latenz zu veringern. Das habe ich bereits durch die Tuning Maßnahmen erreicht. Weitere Performancesteigerung lässt sich also nur durch schnellere CPUs...

Thanks @Alwin. I have also found some rados bench results on the ceph mailinglist. These were close to mine, so I think my performance is ok. I have learned that it's all about latency and to increase the 4K IOPS I would need faster CPUs (higher clock) and network with lower latency like 40/100GbE.

Hello, I'm struggling with the same issue. After some tuning I managed to increase 4k write IOPS from 539 (2158.2KB/s) to 1288 (5154.3KB/s) but I'm not sure if that's fine for a 10GE setup. Maybe the latency is too high and 40GE would increase IOPS but it feels like there is a bottleneck...

Mit etwas Ceph und sysctl Tuning konnte ich die IOPS noch etwas steigern. write: io=309260KB, bw=5154.3KB/s, iops=1288, runt= 60001msec Leider fehlen mir die Vergleichswerte und ich kann das Ergebnis nicht quantifizieren. Könnte vielleicht jemand mit einem vergleichbaren Setup seine...

Hallo zusammen, ich teste seit einigen Wochen ein hyperkonvergentes Proxmox/Ceph Setup bestehend aus 4 Nodes mit je 10 SSD als OSD. Die Performance von Ceph ist bei 4M ganz gut und entspricht auch ungefähr den Ergebnissen aus dem Proxmox Ceph Benchmark. Bei 4K sieht es jedoch schon anders aus...