Netzwerkbandbreite voll ausschöpfen beim Zurückspielen von Backups

[ferhat.oekten]

Moin,

wir haben einen PBS-Server, der über zwei Netzwerkkarten durch ein separates Netz (Backupnetz) an einem Switch an geschlossen ist.
Sowohl die Netzwerkkarten, als auch die Switchport können 10G/s.

Weil ich an dem Switch jetzt nichts konfigurieren möchte, habe ich bei beiden Servern (PBS und Prox) den Bond Modus "balance-alb" ausgewählt.
Dennoch ist die Datentransferrate sehr niedrig (siehe Screenshot).

Habt Ihr eine Idee, woran es liegen könnte, oder wie man die Leistung am höchsten erreichen kann?

 

[SirStephanikus]

Bonding muss natürlich auch am Switch mit konfiguriert werden. Mit LACP fährt man da meiner Meinung nach am besten.

Anyway:

Konfiguration bitte posten und auch Informationen zu dem Switch und dessen Konfiguration.

 

[ferhat.oekten]

Die GUI Konfigs

 

[Falk R.]

Das sieht soweit OK aus. Stecken beide Kabel am gleichen Switch oder verschiedene Switches? Bei Balance-ALB wir ein Lastausgleich mithilfe von ARP gemacht. Das bringt dir nur etwas wenn mehrere Server (MAC Adressen) taffic erzeugen wollen. Wenn du die beiden Links auf zwei Switches verteilt hast, kann das durch die permanenten ARP changes zu Verzögerungen kommen.

 

[Neobin]

Bezüglich des Bondings würde ich mal checken (cat /proc/net/bonding/bondN), ob alle Bonds überhaupt funktionieren wie angedacht.

Zumindest auf dem PBS wurden/sind die Slaves per Komma separiert.
Kann es gerade nicht testen, aber zumindest auf dem PVE ist(/war?) das über die GUI, wenn ich mich richtig erinnere, gar nicht zulässig.
Würde die Slaves, wie in all den Referenzen, per Leerzeichen separieren.

 

[ferhat.oekten]

Ich habe jetzt auch LACP umgestellt und jetzt ist die Datenrate noch weiter gesunken???
Füge mal die Konfig's mit bei.

 

[Falk R.]

Was hast du denn vor? Willst du einen Backupjob auf einem PVE laufen lassen und das auf einen PBS schicken?
In dem Fall hilft dir auch LACP nicht, denn du hast dann einen Stream zwischen den beiden Endpunkten. Hast du viele PVE die parallel auf einen PBS schreiben, dann bringt dir das Bonding tatsächlich mehr Bandbreite.
Falls es nur ein PVE ist, kannst du den auch direkt auf den PBS stecken und LACP funktioniert da auch.

 

[ferhat.oekten]

Wir haben einen 5-Knoten-Cluster. Sowohl das Backup, als auch die Wiederherstellung sollen möglichst die volle Bandbreite ausschöpfen können.

 

[Falk R.]

Wie sieht denn die LACP Konfiguration auf dem Switch aus?

 

[ferhat.oekten]

Die habe ich schon hochgeladen hier. Group 2 und 20.

 

[ferhat.oekten]

Hier noch mehr Info zum Switch.

 

[Falk R.]

Das sind die Informationen des Interfaces und nicht die Konfiguration. Aber anhand der Informationen Sieht das OK aus.
Jetzt müsstest du mit mehreren Streams vonb einem Server oder mit Backups von mehreren Hosts, die 20GBit auf dem PBS auslasten können, wenn die SSDs schnell genug sind.

 

[ferhat.oekten]

Es sind HDDs drinne. Könnte es daran liegen?

 

[UdoB]

Es sind HDDs drinne. Könnte es daran liegen?

Naja..., je nach Konstruktion (worst case: Raid6 oder eben nur eine einzige Platte) hast du vielleicht nur die IOPS einer einzelnen Spindel. Mit einer mittleren Chunksize von 2MB und 200 IOPS schaffst du dann eben nur ~400 MB/s, vollkommen unabhängig vom LAN.

Wenn die Chunks nicht vernünftig gespeichert wurden, sondern in 4 KByte auf der Platte verteilt sind, sinkt das auf 4 KB * 200 = weniger als 1 MB/s.

Ja, das ist vielleicht eine Milchmädchenrechnung, aber...