Verständnis Frage bezüglich eines 2 Node-Cluster

micha86

New Member
Apr 28, 2024
12
1
3
Hallo zusammen,

ich habe ein 2-Node Cluster + Quorum aufgebaut und das funktioniert soweit auch.
Jetzt haben meine beiden Notes jeweils 1x 1Gbit und 1x 2,5 Gbit NICs verbaut. Jeweils ein internes Storage, kein shared Storage.

Wie kann ich die NIC einstellen, über die eine Replikation der VMs stattfindet? Ziel ist es für mich die Replikation über die 2,5Gbit NIC zu senden.

Danke schon mal im Voraus .

Gruß,
Micha
 
Anderes Subnet auf den NICs konfigurieren und dieses dann als Migration Netzwerk in Datacenter->Options->Migration setzen. Die Replication berücksichtig die gleiche Einstellung wie die Migration.

Ein extra Subnet, da es mit mehreren IPs im gleichen Subnet auf mehreren NICs nicht mehr deterministisch ist, welche NIC verwendet wird.
 
OK, danke, habe ich eben eingestellt und mal testweise eine Migration gestartet.
Die läuft ziemlich schleppend.
Kann man irgendwo die aktuelle Bandbreite einer bestimmten NIC auswerten?

Es kommt mir so vor, als ob nur 1/4 einer 1Gbit NIC verwendet wird obwohl die 2,5Gbit NIC ausgewählt wurde.
 
Stell mal in der datacenter.conf das Migration auf insecure. Dann teste bitte noch einmal.
 
Ich habe mal iperf3 verwendet:
Node1 (server):
root@prox01:~# iperf3 -s -p 3000
-----------------------------------------------------------
Server listening on 3000 (test #1)
-----------------------------------------------------------
Accepted connection from 172.16.0.4, port 42124
[ 5] local 172.16.0.3 port 3000 connected to 172.16.0.4 port 42132
[ ID] Interval Transfer Bitrate
[ 5] 0.00-1.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 1.00-2.00 sec 42.7 MBytes 359 Mbits/sec
[ 5] 2.00-3.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 3.00-4.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 4.00-5.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 5.00-6.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 6.00-7.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 7.00-8.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 8.00-9.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 9.00-10.00 sec 42.8 MBytes 359 Mbits/sec
[ 5] 10.00-10.00 sec 134 KBytes 352 Mbits/sec
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bitrate
[ 5] 0.00-10.00 sec 428 MBytes 359 Mbits/sec receiver

Node2:
root@prox02:~# iperf3 -c 172.16.0.3 -p 3000
Connecting to host 172.16.0.3, port 3000
[ 5] local 172.16.0.4 port 42132 connected to 172.16.0.3 port 3000
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-1.00 sec 43.6 MBytes 366 Mbits/sec 0 170 KBytes
[ 5] 1.00-2.00 sec 42.5 MBytes 357 Mbits/sec 0 170 KBytes
[ 5] 2.00-3.00 sec 43.0 MBytes 361 Mbits/sec 0 170 KBytes
[ 5] 3.00-4.00 sec 42.7 MBytes 359 Mbits/sec 0 180 KBytes
[ 5] 4.00-5.00 sec 42.7 MBytes 358 Mbits/sec 0 180 KBytes
[ 5] 5.00-6.00 sec 43.0 MBytes 361 Mbits/sec 0 180 KBytes
[ 5] 6.00-7.00 sec 42.6 MBytes 357 Mbits/sec 0 180 KBytes
[ 5] 7.00-8.00 sec 42.8 MBytes 359 Mbits/sec 0 180 KBytes
[ 5] 8.00-9.00 sec 43.0 MBytes 360 Mbits/sec 0 180 KBytes
[ 5] 9.00-10.00 sec 42.6 MBytes 357 Mbits/sec 0 180 KBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bitrate Retr
[ 5] 0.00-10.00 sec 429 MBytes 360 Mbits/sec 0 sender
[ 5] 0.00-10.00 sec 428 MBytes 359 Mbits/sec receiver

iperf Done.


scheint mir für 2,5Gbit zu wenig.
 
Ja, 360 MBIt ist deutlich zu wenig. Auf was für einem Switch ist das denn gesteckt?
 
Dann würde ich auf Treiber oder Firmware tippen. Kannst ja mal gucken ob es etwas neues für deine Netzwerkkarten gibt.
 
Dann würde ich auf Treiber oder Firmware tippen. Kannst ja mal gucken ob es etwas neues für deine Netzwerkkarten gibt.
Wo kann ich die aktuellen Treiber denn auslesen?
Meinst du es könnte auch an der direkte Verbindung liegen? Hab mal einen Switch zum testen bestellt.
 
Mit Switch hast du mehr Troubleshooting Möglichkeiten (wenn der managed ist). Dann teste mal mit Switch.
 
Mit Switch hast du mehr Troubleshooting Möglichkeiten (wenn der managed ist). Dann teste mal mit Switch.
Ist leider unmanaged, könnte aber mal einen 1gbit managed Switch nutzen um zumindest mal 1gbit zu testen....das hat ja auch schon nicht funktioniert
 
Mit Switch hast du mehr Troubleshooting Möglichkeiten (wenn der managed ist). Dann teste mal mit Switch.
Also auch mit dem 1 Gbit Switch wird es nicht besser und bleibt bei dem gleichen Geschwindigkeiten wie schon weiter oben geschrieben.
Kann es noch ein Treiber Thema sein?
Es handelt sich um USB 3 to Ethernet mit einem Realtek Chipsatz R8156/R8156B.
Komischerweise wird aber angezeigt, dass er einen r8152 Treiber nimmt, glaub ich zumindest :)
 
Wenn es eine USN NIC ist, kann auch der USB Treiber oder der USB Hub mit reinspielen. Mal einen anderen USB Port probiert?
 
Wenn es eine USN NIC ist, kann auch der USB Treiber oder der USB Hub mit reinspielen. Mal einen anderen USB Port probiert?
Mehrere andere Ports hatte ich probiert, es wird kein USB Hub dazwischen genutzt. Ich vermute langsam das es am Treiber liegen könnte, da das Verhalten an beiden nodes identisch ist. Weißt du wie man die Treiber aktualisieren kann?
 
Viele Computer haben intern oder onboard auch Hubs.
Da musst du beim Hersteller deiner NIC mal gucken ob die neuere Treiber oder ein Firmwareupdate anbieten.
 
Viele Computer haben intern oder onboard auch Hubs.
Da musst du beim Hersteller deiner NIC mal gucken ob die neuere Treiber oder ein Firmwareupdate anbieten.
Woher weiß ich denn welcher Treiber bei der NIC genutzt wird?
 
Damit bekommst du alle Netzwerkkarten und Treiber angezeigt.
lspci -k | grep -EA3 net
 

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!