Wechsel weg vom HP DL 380p Gen 8

[klausseemann]

Moin ich habe einen HP DL 380p gen 8 mit 2 xeon 2680v2 und 96 GB RAM ECC und 24 TB als RAID 5.
Darauf habe ich opnsense,adguard,docker und einige VM am laufen wie z.b. win11pro.
Ich habe keine extra GPU verbaut.
Win11 läuft bei mir träge,was wohl an der fehlenden GPU liegt.
Meine 24 TB sind zu 99% für meine Nextcloud .
Ein Nas habe ich nicht.
Was ich merke ist wenn ich eine VM ein Backup erstelle geht die I/O auf 40% sie liegt sonst so auf 0-2% und mein Internet bricht kurzzeitig zusammen.
Mein Plan ist es nun meine Firewall und Adguard aus dem proxmox raus zunehmen und eine Firewall-Hardware zu erstellen.
da dachte ich an ein n305 Board mit 2x sfp+ und 2x 2,5 tb Netzwerk.
Soweit so gut.
Nun denke ich das die „Firewall“ sehr viel Langeweile haben wird und damit ein ch die besser warten kann wollte ich sie dann als Cluster mit in Proxmox dazunehmen.
Wie ein Cluster funktioniert ist mir bekannt.meine Frage ist meinen proxmox Server werde ich ersetzen nur wie viel Power benötigte ich?
Sollte ich mir ein 2. Board für meine nextcloud holen daran mein Raid5 mit den 24Tb hängen.
Der neue proxmox Server würde dann nochmal weniger machen müssen und die hauptlast wäre dann nur noch das win11 pro sauber läuft dafür müsste wohl eine Grafikkarte rein und ich baue als Hobby an meiner Webseite und habe deshalb auch gitlab auf dem Server .
Also nichts wildes mehr.
Nun stellt sich mir die frage ob ich dann noch ecc ram benötige.
Oder soll ich mein jetziges System nicht auf 3 aufteilen.
Jeder soll seine ihm zugewiesenen VM befeuern und es sollen auf allen eben Backups von den Maschinen sein .

 

[floh8]

Also erstmal wäre es schön, wenn du ordentliches Deutsch schreibst. Was mir auffällt, ist, dass du nicht die Ursache suchst, sondern gleich auslagern willst etc. Dein Server ist ja schnell genug. Das Problem liegt wohl am Storage . Zu dem hast du aber nicht viel geschrieben, außer dass es ein Raid5 ist. Wie du backupst weiß man auch nicht. Also ergänze doch deinen Post erstmal.

 

[klausseemann]

Das dir mein deutsch nicht gefällt mag evtl. Daran liegen das ich auf meinem Handy schreibe und nicht am pc .
Liegt wohl auch daran das ich auf der Arbeit bin und nicht so viel Zeit zum korrigieren habe.

 

[klausseemann]

Meine VMs liegen alle auf einem ssd Storage und das Problem ist erst seid 1-2 Monaten.
Auf dem 24 tb Hdd ist nur nextcloud

 

[bluesite]

was für SSD sind da verbaut?

 

[klausseemann]

was für SSD sind da verbaut?

Gute Frage , die sind von sandisk .
Keine Enterprise so wie Hdd, die sind für 24/7 geeignet.
Kann man mit einem Tool die Platten auslesen ob sie schon zu alt sind ?

 

[mikee]

Kann man mit einem Tool die Platten auslesen ob sie schon zu alt sind ?

In der GUI. Knoten / Disks / deineSSD / SMART Werte - Power_on_Hours

 

[jim_os]

Ich gebe auch mal kurz meinen "Senf" dazu.

Da es sich ja um ein "HomeLab" handelt und der Schwerpunkt wohl auf der Win 11 Pro VM liegt: Das

einen HP DL 380p gen 8 mit 2 xeon 2680v2 und 96 GB RAM ECC und 24 TB als RAID 5.

ersetzen mit irgendeiner Kiste die:
a) genug Einschübe bietet um darin Deine 24 TB (vermutlich ja HDDs) und vielleicht auch noch die ein oder andere SSD unterbringen zu können
b) eine Intel Core CPU ab der 10-ten Generation hat. Je nachdem was das Budget so hergibt.
c) mind. einen NVMe PCIe Steckplatz hat in dem Du dann eine NVMe SSD packst um Deine Sandisk SSD zu ersetzen. Wobei Du hier von "die" gesprochen hast?
d) (ggf.) auch einen PCIe 4.0 Steckplatz hat um darin ggf. noch eine zusätzlich Grafikarte einbauen zu können falls Dir die GPU der CPU ggf. doch zu leistungsschwach sein sollte
e) 64 GB RAM hat denn das sollten m.M.n. für das was bisher läuft bereits reichen und ECC wäre für ein "HomeLab" dann ein nice to have
f) ansonsten eh noch vorhandenen PCIe Steckplätze kannst Du dann für eine oder mehr NICs nutzen

Ob Du dann Deine Firewall (OPNSense) weiterhin unter Proxmox laufen lässt, oder Dir dafür noch eine extra Kiste hinstellst, musst Du selber entscheiden. In letzter Zeit nutzen wohl viele User dafür irgendeine von den üblichen China-Mini-PC mit N100 CPU und ein paar LAN-Ports, die es wohl ab rund € 200 aufwärts gibt. Aber auch irgendeine ausgemusterte ältere Kisten eigenen sich dafür, sofern sich darin NICs einbauen lassen, oder z.B. auch so etwas wie eine ältere Intel i350-T4 wie ich sie hier habe.

Ansonsten gibt es hier im Forum natürlich div. Beiträge bei denen es um die Planung der benötigten/richtigen Hardware für Proxmox geht.

VG Jim

 

[klausseemann]

Hallo zu:
Das bekomme ich bei allen RAIDs und Platten gezeigt.

S.M.A.R.T. Status Unbekannt

Error getting S.M.A.R.T. data: Exit code: 1 (500)


A
Die 24 TB sind nur als Storage für die Nextcloud , brache davon jetzt im Endeffekt nur ca 6TB davon aber 24 war das max. was ich mit dem Board machen konnte.
B
Ob AMD oder Intel ist wohl hier ein Bauchgegühl. Wichtig ist nur das ECC vom Board und der CPU unterstütz wird.4 Riegel sollen rein gehen können wobei erstmal nur 2 eingesetzt werden (kostet alles Geld).
C hier kommt es darauf an ob ich wieder Spiegel oder nicht.
2 bzw. NVME wären dann nice.
Einmal das System als RAID 1 und dann ein Raid1 für die VMs.
Das habe ich zur Zeit mit SSD für meine Maschine.
Die 24 TB Hängen an einem Hardware RAID-Controller, ob das beim neues System noch Sinn macht oder per Software gemacht wird ist noch die Frage.
E
Mehr ist immer gut
F
Ich habe im ganzen Haus CAT 7 Duplex gelegt und möchte nun wenn ich einmal anfange umzubauen so weit wie es geht auf 5/10gb kommen.
Mein alter Server hat SFP+ was ich nicht nutze ( der Switch fehlt noch ).
Die neue Hardware soll aber SFP+ können damit der ganze Serverschrank untereinander 10gb kann.
Bei der Firewall , die möchte ich auslagern damit ich am Server basteln kann.
Ich war so dumm und habe den Server verschlüsselt und immer wenn der Strom weg ist ( steht im Schuppen am Garten FI) muss das Passwort eingegeben werden.
Meine Frau macht ab und zu Wasserspiele und der FI fliegt raus, das Problem wird die Tage beseitigt mit usv und eigenem FI.
Wir haben ein 2Familienhaus und teilen uns den Telefonanschluss mit der Schwiegermutter (77).
Wenn die nicht ins Internet kommt schreit sie sofort.
Das ist eben auch mit ein Grund zum umbauen.
Ich arbeite ab und zu mal zuhause für meinem Chef und muss mit Hagercad stromlaufpläne erstellen.
Auf einem Windows pc läuft das.
Das habe ich mal auf meinem Linux Laptop in Virtualbox installiert und es läuft die Schaltplanvorschau nicht. Da denke ich das Virtualbox Windows 11 nicht richtig unterstützt.
Deshalb habe ich win 11 auf meinem Server in Proxmox installiert aber hier muss ich noch eine Grafikkarte an die VM Durchreichen. Da stellt sich die Frage welche GPU soll es werden?
Wenn ich wieder spielen wollen würde,wären es Elderscrols ,WOW oder sowas wie Overwatch.
Mein Monitor an dem ich arbeite ist ein 49“ curved mit 5120x1440

 

[jim_os]

auf 5/10gb kommen.
Mein alter Server hat SFP+ was ich nicht nutze ( der Switch fehlt noch ).

Oben war aber noch von nur 2.5GbE die Rede. Ein 10GbE Managed Switch mit z.B. 8 Ports und von einem hier in DE eher bekannteren Hersteller, geht dann natürlich auch ins Geld (ab ca. € 250 + X). Auch die entsprechenden NIC kosten.
BTW: Ich habe vor einigen Monaten auf nur 2,5GbE aufgerüstet und dabei auf einen eher günstigen Switch mit dem dafür üblichen Realtek Chipsatz gesetzt. Gibt es über Ali als Bestandkunde für ca. € 80. Diskussion zu dem Teil incl. der div. baugleichen Modelle. In der 10bE Variante liegen solche Teile dann bei ca. € 120.

mit usv

Sofern Du die bisher noch nicht haben solltest wäre eine USV m.M.n. auf jeden Fall Pflicht.

Ansonsten hatte ich ja geschrieben wie ich an Deiner Stelle so etwas für mich aufbauen würde und in erster Linie hängt das natürlich auch von dem Budget ab was Du dafür eingeplant hast.

Hagercad stromlaufpläne erstellen.
Auf einem Windows pc läuft das.

Ehrlich gesagt wenn es primä darum geht und das auf dem bereits vorhandenen PC läuft, warum musst/willst Du Deine bisherige Proxmox HP Kiste dann unbedingt ersetzen und zwar so das auf der neuen Kiste dann auch eine Win 11 Pro VM performant genug läuft? Wenn es nicht um so eine "blöde" Win 11 VM ginge brauchtest Du längst nicht so viel Geld in performantere Hardware investieren. Für Proxmox mit ein paar VM und LXC würde die HP Kiste ja dicke reichen. OK die frisst ziemlich viel Strom und jeder ein, zwei oder drei Jahre alte PC wäre vermutlich stromsparender, aber man könnte die HP Kiste ja auch mit einem refurbished Business-PC/Server von den üblichen Herstellern (HP, Lenovo, Fujitsu, Dell) ersetzen - sprich diese Leasing-Rückläufer die wie Sand am Meer angeboten werden. Da müsste Du halt nur schauen wie es mit der Anzahl der Einschübe für HDD/SSD aussieht. PS: So eine refurbished Business-PC von Fujitsu nutze ich hier selber für Proxmox.

Aber fragen wir mal anders: Was für ein Budget hast Du denn so eingeplant, bzw. mit was für Gesamtkosten rechnest Du denn so? Sprich für:
- Neuen Proxmox Server
- Aufrüstung auf 10GbE = 10GbE Switch
- USV
- OPNSense Hardware-Firewall

Weil Du ja bereits auch schon das

wobei erstmal nur 2 eingesetzt werden (kostet alles Geld).

geschrieben hast. 64 GB RAM liegen bei nur rund € 100, wohingegen Du z.B. für 64 GB ECC RAM schon wieder mit ca. € 200 aufwärts rechnen kannst/musst.

Ich kenne natürlich nicht alle Deine Beweggründe für einen Austausch der HP Kiste, aber eine Win 11 Pro VM wäre für mich an Deiner Stelle ganz sicher kein Grund dafür.

VG Jim

 

[klausseemann]

wenn der Server keine zicken machen würde wäre mir der Umbau schon fast egal. Nur nervt es ab und an schon das die Firewalls auf dem selben system sind. also Auslagern will ich die gerne.
Habe mich da auch schon umgesehen und da gibt es 2 lösungen für mich.

Die switche sehen nett aus bin da gerade am schauen.

der für meine maschinen untereinander
Horaco 10GB Smart Web
Den als verbindung zum normalen 1gb netz (wlan)
HORACO 2,5 GbE Managed

1.
ein chinaboard mit 2 x SFP+ und 2x 2,5 gb. cpu i3-n305.Das board kann 32 GB DDR5 aber kein ECC
die 2,5gb ports nehme ich dann am Anfang für WAN und alle VLANs sollen später sollen die SFP+ als BOND alle VLANs übernehmen.
Habe 5 VLan am laufen. Clienten, Wlan, IOT, Servernetz und Gäste.

Hier würde Proxmox als Host ,Opnsense als Firewall Pi-Hole als Werbeblocker und Unify-Controller für die ACCESS-Points drauf kommen.

2.
Mainboard:
GIGABYTE MC12-LE0
oder
GIGABYTE B550M DS3H

dann wie oder nur AM4 Kann aber ECC, das obere ist ein Serverboard das untere nicht.

Hier ist der Preis nur das entscheidende. Hier komme ich egal wie ich es drehe auf 500 bis 600 euro pro system.
Das chinaboard ist aber unterm strich sparsamer und kleiner.
Denke aber mit den 32 gb Ram kann genügen oder nicht das ist eben die frage und benötige ich da ECC ?
Es läuft ja Proxmox drauf und ist somit ein miniserver.

Ein Kleiner 8er SFP+ switch ? der muss aber VLan können, alles was ich gefunden habe sind große Switche bei denen SFP+ und normale RJ485 zusammen drauf sind in der Preisklasse von 300 - 600.
das wäre dann Anschaffung 2.
Somit wäre mein Heimnetz mit der Firewall sauber und meine Netzwerkanschlüsse könnten weiter laufen.
Dann kann ich alle meine VMs sichern und die Nextcloud zur not auf die firewall umlegen mit einem kleinen speicher bis der server wieder fertig ist.
Hier muss ich nach den platten schauen wo das problem ist.
Wenn ich den Server neu baue ist die Frage AM4 oder AM5.
Hier würde ich gerne weg von SSD und alles auf NVME legen.
Was darf der Server kosten ?
gute frage das was er eben kostet.
Denke er wird im Bereich 1000 - 2000 landen.
Sehe das als Hobby und man lernt immer was dazu, das ist der Hauptgrund warum ich einen Server habe.
Beim Server stellt sich dann auch die frage baue ich für die Nextcloud eine eigenen Miniserver mit (proxmox)Truenas ( hier kann zuerst auf nvme gespeichert werden und wird dann auf die HDD weiter gegeben wenn ich das so richtig gelesen habe.)

 

[jim_os]

Moin

Erst einmal solltest Du Deine Überlegungen hier besser etwas genauer trennen zwischen Proxmox Server und der Kiste die Du als Hardware-Firewall auch noch aufbauen willst. Zumindest ich kann Deinen "Sprüngen" hier zwischen der einen Kiste und dann wieder der anderen Kiste, nicht so ganz folgen.

Das chinaboard ist aber unterm strich sparsamer und kleiner.

Welches "China-Board" auch immer damit gemeint ist, aber wenn ich mir hier ein neue Proxmox Server aus Einzelkomponenten aufbauen würde, würde ich ganz sicher nicht beim Motherboard anfangen zu sparen. D.h. ich würde immer zu einem Motherboard eines bekannteren Herstellers greifen, es sei denn es gebe zu dem "China-Board" schon lange und umfangreiche positive Erfahrungen von anderen Usern.

nur AM4

Zu AMD oder Intel kann ich gar nichts sagen weil mich AMD ehrlich gesagt noch nie wirklich interessiert hat. Ich habe hier in rund 30 Jahren noch nie eine Kiste mit einer AMD CPU besessen sondern immer auf Intel gesetzt. Wobei das jetzt keine Wertung sondern eher nur eine Feststellung ist.

Denke aber mit den 32 gb Ram kann genügen

Hier ist wieder der oben bereits angesprochene Punkt: Redest Du jetzt von dem Proxmox Server oder der Hardware-Firewall? Vermutlich von der Hardware-Firewall denn 32 GB wären für den Proxmox Server natürlich zu wenig. Auch wenn es bei Deinem momentanen Verwendungszweck gerade noch so reichen sollte. Falls es um die Hardware-Firewall gehen sollte: Ja 32 GB RAM sollten reichen.

ECC

Was ECC ist, bzw. was es macht, wirst Du ja sicherlich wissen. Wie schon geschrieben sehe ich es bei einem "HomeLab" als nice to have. Auch hier wieder: In rund 30 Jahren hatte ich hier auch mal den ein oder anderen IBM- oder HP-Server die bereits ab Werk ECC verbaut hatten. Ja fein, aber all meine unzähligen PCs und Server die hier in der ganzen Zeit im Einsatz waren hatten halt kein ECC RAM verbaut und ich kann mich nicht daran erinnern das ich irgendwann/jemals mal zu mir selber sagen musst: Mist hättest Du bloß ECC RAM verbaut.
D.h. willst Du die zusätzliche Sicherheit von ECC haben musst Du das Geld dafür halt investieren. Spielt Geld nicht so eine große Rolle umso besser und Du kannst Dir auch ECC RAM Module gönnen. Ich selber würde das durch No-ECC RAM Module eingesparte Geld lieber in hochwertige HDD und SSD investieren.

Beim Server stellt sich dann auch die frage baue ich für die Nextcloud eine eigenen Miniserver mit (proxmox)Truenas ( hier kann zuerst auf nvme gespeichert werden und wird dann auf die HDD weiter gegeben wenn ich das so richtig gelesen habe.)

Ich weiß jetzt natürlich nicht was Du mit Nextcloud alles so anstellst und da speicherst, aber falls es nur um die reine Datenspeicherung geht würde ich mir dafür nicht noch eine extra Kiste zusammenbasteln. Denk daran das Du dann auch drei Kisten (Proxmox Server + Hardware-Firewall + Nextcloud-Server) warten und administrieren musst. Ich habe hier z.B. Proxmox am laufen weil ich damit u.a. zwei Synolgoy NAS außer Betrieb nehmen konnte. Die Aufgaben der beiden NAS erledigt jetzt Proxmox mit. Also statt Dir für Nextcloud noch einen extra Server hinzustellen solltest Du das Geld m.M.n. lieber für eine vernünfige und gute Backup-Lösung für den Proxmox Host investieren. Wie auch immer die dann am Ende aussehen wird.

Mit einem Budget von bis zu € 2.000 solltest Du schon einiges an guter Ausstattung zusammenbekommen. Ob es am Ende dann auch noch für eine kompl. Umrüstung auf ein 10GbE LAN reicht musst Du sehen. Das man für 10GbE "Marken-"Switch mit entsprechenden Features ggf. richtig Kohle auf den Tisch legen musst hast Du ja auch schon festgestellt. Das war für mich auch der Grund für gewisse Kompromisse, sprich nur 2.5GbE und einen China-Switch. Hier bei mir jetzt alles auf 10GbE umzustellen war mir jetzt einfach zu kostspielig und das passiert dann irgendwann einmal in X Jahren.

VG Jim