Hallo in die Runde!
Auch wir überlegen, einen Übergang von VMWare zu Proxmox zu realisieren.
Stand bisher:
VMWare Cluster 5 Nodes, 2 Storages mit SAS Anbindung
Nun zu unseren Überlegungen:
Unter Beibehaltung der bestehenden 5 Nodes wollen wir die bestehenden Storages gegen ein Ceph-Cluster tauschen.
3 bzw. 4 Ceph Nodes (512 GB, 32C - 3,85 Ghz, 6 NVMe ~7,68 TB)
Ceph private Net 100G geplant für Storage Sync;
public Net 25 bzw. 100G zur Kommunikation zwischen Virt-Node und Ceph-Node
VM Net 25G Kommunikation VM und "extern", sowie PBE
CoroSync 2x
alles getrennt; LACP/ Bond usw.
Da wir ja einerseits die 5 Virt-Nodes behalten wollen und die Ceph-Nodes integrieren wollen, stellen sich einige Fragen:
Kann alles sinnvoll im Sinne von Einheitlichkeit, Support usw. mit Proxmox VE umgesetzt werden, sprich auch die Ceph-Nodes mit PVE und dann keine Virtualisierung? Oder it es sinnvoll dies vollständig von Proxmox abzulösen (Integration RBD)? Wie stellt man dann ggf. den Support sicher?
Besteht die Möglichkeit bzw. ist es sinnvoll ein weiteres Netz VM - > "öffentliches Netz VLAN´s" einzuplanen, sodass die Kommunikation der VM untereinander und mit den CLients usw. dediziert läuft?
In welches Netz integriert man sinnvollerweise PBE, um ggf. kein Bottleneck zu verursachen?
Ist es bei Ceph sinnvoll, eher 6 NVMe ~7,68 TB oder 12 NVMe ~ 3,84 TB zu nutzen?
Viele Fragen und ich hoffe ihr könnt etwas Licht ins Dunkeln bringen?
Vielen Dank dafür schon einmal.
vg Fidschitown
---
Hello everyone!
We are also considering implementing a transition from VMWare to Proxmox.
Status so far:
VMWare Cluster 5 nodes, 2 storages with SAS connection
Now to our considerations:
While retaining the existing 5 nodes, we want to swap the existing storage for a Ceph cluster.
3 or 4 Ceph nodes (512 GB, 32C - 3.85 Ghz, 6 NVMe ~7.68 TB)
Ceph private Net 100G planned for Storage Sync;
public Net 25 or 100G for communication between Virt node and Ceph node
VM Net 25G communication VM and "external", as well as PBE
CoroSync 2x
everything separate; LACP/Bond etc.
Since on the one hand we want to keep the 5 Virt nodes and integrate the Ceph nodes, a few questions arise:
Can everything be implemented sensibly in terms of uniformity, support, etc. with Proxmox VE, i.e. also the Ceph nodes with PVE and then no virtualization? Or does it make sense to completely replace this from Proxmox (integration RBD)? How do you ensure support if necessary?
Is it possible or does it make sense to plan an additional network VM -> "public network VLANs" so that the communication between the VMs and with the clients etc. is dedicated?
In which network does it make sense to integrate PBE so as not to cause a bottleneck?
With Ceph, does it make sense to use 6 NVMe ~7.68 TB or 12 NVMe ~ 3.84 TB?
Lots of questions and I hope you can shed some light on them?
Thank you very much for that.
best regards Fidschitown
Auch wir überlegen, einen Übergang von VMWare zu Proxmox zu realisieren.
Stand bisher:
VMWare Cluster 5 Nodes, 2 Storages mit SAS Anbindung
Nun zu unseren Überlegungen:
Unter Beibehaltung der bestehenden 5 Nodes wollen wir die bestehenden Storages gegen ein Ceph-Cluster tauschen.
3 bzw. 4 Ceph Nodes (512 GB, 32C - 3,85 Ghz, 6 NVMe ~7,68 TB)
Ceph private Net 100G geplant für Storage Sync;
public Net 25 bzw. 100G zur Kommunikation zwischen Virt-Node und Ceph-Node
VM Net 25G Kommunikation VM und "extern", sowie PBE
CoroSync 2x
alles getrennt; LACP/ Bond usw.
Da wir ja einerseits die 5 Virt-Nodes behalten wollen und die Ceph-Nodes integrieren wollen, stellen sich einige Fragen:
Kann alles sinnvoll im Sinne von Einheitlichkeit, Support usw. mit Proxmox VE umgesetzt werden, sprich auch die Ceph-Nodes mit PVE und dann keine Virtualisierung? Oder it es sinnvoll dies vollständig von Proxmox abzulösen (Integration RBD)? Wie stellt man dann ggf. den Support sicher?
Besteht die Möglichkeit bzw. ist es sinnvoll ein weiteres Netz VM - > "öffentliches Netz VLAN´s" einzuplanen, sodass die Kommunikation der VM untereinander und mit den CLients usw. dediziert läuft?
In welches Netz integriert man sinnvollerweise PBE, um ggf. kein Bottleneck zu verursachen?
Ist es bei Ceph sinnvoll, eher 6 NVMe ~7,68 TB oder 12 NVMe ~ 3,84 TB zu nutzen?
Viele Fragen und ich hoffe ihr könnt etwas Licht ins Dunkeln bringen?
Vielen Dank dafür schon einmal.
vg Fidschitown
---
Hello everyone!
We are also considering implementing a transition from VMWare to Proxmox.
Status so far:
VMWare Cluster 5 nodes, 2 storages with SAS connection
Now to our considerations:
While retaining the existing 5 nodes, we want to swap the existing storage for a Ceph cluster.
3 or 4 Ceph nodes (512 GB, 32C - 3.85 Ghz, 6 NVMe ~7.68 TB)
Ceph private Net 100G planned for Storage Sync;
public Net 25 or 100G for communication between Virt node and Ceph node
VM Net 25G communication VM and "external", as well as PBE
CoroSync 2x
everything separate; LACP/Bond etc.
Since on the one hand we want to keep the 5 Virt nodes and integrate the Ceph nodes, a few questions arise:
Can everything be implemented sensibly in terms of uniformity, support, etc. with Proxmox VE, i.e. also the Ceph nodes with PVE and then no virtualization? Or does it make sense to completely replace this from Proxmox (integration RBD)? How do you ensure support if necessary?
Is it possible or does it make sense to plan an additional network VM -> "public network VLANs" so that the communication between the VMs and with the clients etc. is dedicated?
In which network does it make sense to integrate PBE so as not to cause a bottleneck?
With Ceph, does it make sense to use 6 NVMe ~7.68 TB or 12 NVMe ~ 3.84 TB?
Lots of questions and I hope you can shed some light on them?
Thank you very much for that.
best regards Fidschitown
Last edited: