Search results

  1. S

    Verständnisfrage zu Ceph Full Mesh

    Hi Aaron, ok danke Dir für die Infos. Ich betreibe übrigens ebenfalls einen 2 Node Cluster mit Replication. Was mich immer schon gestört hat war das Thema Storage und Verfügbarkeit. Auf der einen Seite hat man ein (einigermaßen) hochverfügbares Cluster für die VMs auf der anderen Seite hängt es...
  2. S

    Verständnisfrage zu Ceph Full Mesh

    Hi Nochmal, ok vielen Dank für deine ausführliche Antwort. Ich glaube dann weiß ich wie ich vorgehe. 1) Hardwareseitig werde ich das mit den beiden CEPH Netzen (Public & Cluster :) ) direkt auf der Fabrik jetzt einfach mal ausprobieren und sehen wie es läuft. Ist wie gesagt sowieso erstmal...
  3. S

    Verständnisfrage zu Ceph Full Mesh

    Hi Aaron, vielen Dank für die Informationen und den Link. Das hat sehr weitergeholfen. Dann nochmal diese beiden Fragen um das final einschätzen zu können. - Wenn ich mit beiden Ceph Netzen auf dem Ring bleibe (25G) dann habe ich verstanden seht ihr erstmal keine großen bedenken bei einer...
  4. S

    Verständnisfrage zu Ceph Full Mesh

    Guten Morgen Zusammen, vielen Dank erstmal an alle Nachteulen :-) Ich bin gerade erst dabei mich mit dem Thema auseinanderzusetzen. Aus etlichen unterschiedlichen Quellen habe ich rausgelesen das man diese Netze trennen sollte. Gar nicht mal nur aus Gründen der gesamt möglichen Bandbreite...
  5. S

    Verständnisfrage zu Ceph Full Mesh

    Hallo Zusammen, vielleicht kann jemand hier etwas Licht ins Dunkle bringen. Ich habe ein 3 Node Cluster gebaut. Jeder der Knoten hat einen 2 x 10G Bond zu 2 Switchen (Im Stack). Zusätzlich habe ich jedem Knoten noch eine 25G Karte mit 2 Ports eingebaut. Diese sind im Ring verbunden. Nach...
  6. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi again, after a tests I found out that: cat /sys/devices/system/cpu/cpu0/cpuidle/state*/name POLL C1_ACPI C2_ACPI C3_ACPI I see only the C1 - C3 Power states. I checked the Bios and found one setting (C-States Limit) which I changed from Auto to C10. But that did not help. Is there any...
  7. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi Colin, the issue I had that it was not possible to install Linux. The first thing you have to do is updating to the latest BMC and BIOS. After that it still does not work but There's an IPMI command you can then apply. After applying this it is possible to install Linux. The reason is a...
  8. S

    3 Knoten Cluster + Ceph / Empfehlung für Aufteilung der SSDs

    Ok Danke für den Hinweis. Wegen der Fehlerdomäne: Ich hatte verstanden dass man hier Host nehmen soll. Oder hast du das gemeint? Das war der Originaltext den ich gelesen hatte: "CRUSH failure domain = host"
  9. S

    3 Knoten Cluster + Ceph / Empfehlung für Aufteilung der SSDs

    Guten Morgen Zusammen, Vielen Dank für eure Hilfe. Damit kann ich schonmal gut arbeiten. Abgesehen vom Netzwerk (Bottleneck) habe ich verstanden dass wohl die Anzahl der Knoten das größte Thema sind. Heißt: Aufstocken auf 4 mit entsprechender Config sollte für die Datensicherheit ein großes...
  10. S

    3 Knoten Cluster + Ceph / Empfehlung für Aufteilung der SSDs

    Hallo Zusammen, ich bin gerade dabei mich mit Ceph zu beschäftigen und möchte für mein LAB ein 3 Knoten Cluster bauen. Mit Proxmox habe ich bereits einige Erfahrungen gesammelt. Ceph fehlt noch. Ich möchte das so Nahe wie möglich an einem Produktiv Cluster bauen um auch Performance Test etc...
  11. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Finally with a Tool from Supermicro I could install it. They sent me detailed instructions and a IPMI Reprogrammer. I am not sure if they can update the Bios but I requested to do so. So if someone has the same Board and issues. - Just let me know and I can share the instructions. Have a good...
  12. S

    No replication on ZFS Possible

    Thank you very much. The Problem was that I did not activate the local-zfs. After activating it and moving to that pool it worked. Thanks Alex
  13. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi all, I have a long support ticket open with SuperMicro now. They sent me lot's of things to do but it did not help. There's an IPMI tool which can reprogram some things in the Firmware, unfortunately that did not work. So all in all I am still working on that but nor result. Thanks Alex
  14. S

    No replication on ZFS Possible

    Hi All, I wanted to setup replication for a VM which ist hosted on a local ZFS Storage. I get the attached error message. Attached is the Hardware Config of the VM and also the ZFS Pool information. Is there any flag feature that I have to enable in teh File System. All topics I found here in...
  15. S

    New Mainboard Supermicro X14SAV / No Installation possible

    I will keep you updated hoping SuperM takes my ticket serious. At least they had specified Ubuntu Desktop in their Matrix. What I can confirm already, ECC (sideband) is active and works with Kingston DDR5 SO-DIMM. The other interesting feature is the MCIO 8 Interface. According to the paper it...
  16. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi, I already opened a ticket with Supermicro. According to the OS Matrix, the board ist tested with Ubuntu Desktop. Before I stopped my tests yesterday, I tried exactly this release and it had the same issue. I hope, they react on this. There must be something wrong with the firmware (Or a...
  17. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi, I think I give up now. It's only waste of time. I deactivated every Single option in the BIOS but there's no change. The error is always the same. Thanks a lot for your help and support I will return the board, maybe give a try in a few month and see if it is working then. Alex
  18. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi, good idea but same Problem - See attached. I installed PVE 9.01 on another (UEFI) system than updated it to the latest kernel 6.14.11-4. Then removed the disk and added to the Supermicro System. You see the Proxmox Welcome Screen and then tries to load and have the same issue. Maybe here we...
  19. S

    New Mainboard Supermicro X14SAV / No Installation possible

    HI thanks again. Very much appreciate. I tried again and now, it looks a little different but still hangs. First I set the bios back to factory (Just to be sure) and applied all the parameters you see in my Blue screenshot. (Secure Boot is disabled anyway in default so did not have to change...
  20. S

    New Mainboard Supermicro X14SAV / No Installation possible

    Hi, many thanks for your support and efforts. But it does not work. Could not find all settings in BIOS but most of it. I entered all the parameters you mentioned tried to boot (F10] but still the same error message EFI stub: Loaded initrd from LINUX_EFI_INITRD_MEDIA_GUID device path EFI stub...