Erste Proxmox Ceph cluster installation in labor, wie würdet ihr es aufsetzen

[gmservice]

Wir haben 4 R730 rumstehen mit denen wir ein Lab bauen wollen um vsan mit proxmox ceph zu vergleichen:

HArdware:
4x R730 8 core Xeon 96GB DDR4 each with 8 SFF slots for disks HBA330 sas controller

6x 480GB SAS SSD
27x 1.92TB SAS SSD
1x R530 32GB Ram (Proxmox Backup) server
4x 10TB SAS Disks 3.5”

8x Mellanox Connectx 4 LX 25gbe nics
8x BCM57404 nics

1x SN2010 Mellanox 25gbe switch

Tendiere zu einem 4 node cluster mit 480 GB ssd für OS und 6x 1.92TB disks als storrage mit dem Proxmox Backup Server als zusätzliche quorum stimme.

Was würdet ihr machen?

 

[Falk R.]

DAs kannst du so machen, aber bitte daran denken. Das Quorum auf dem PBS ist nur für Corosync (PVE Cluster).
Der Ceph Cluster hat sein eigenes Quorum über die Monitor Services. Somit hättest du 3 Monitor auf den 4 Hosts.

 

[gmservice]

Hey, muss ich irgendetwas bestimmtes configurieren um ein sinnvolles quorum zu erhalten?

 

[Falk R.]

Eigentlich nur an die Installationsaleitungen und ans Wiki halten.

 

[gmservice]

Eigentlich nur an die Installationsaleitungen und ans Wiki halten.

ok, wie viel ram bleibt nach CEPH und Proxmox effektiv über?

 

[Falk R.]

Den PVE kalkuliere ich mit 2GB und bei Ceph kalkuliere ich 5GB pro OSD.
Offizielle Werte habe ich nicht im Kopf, aber damit komme ich immer klar.