Proxmox stürzt nach wenigen stunden ab.

[Solarstorm]

Hallo,

ich habe aktuell das Problem das mein Proxmox Server nach wenigen Stunden abstützt. Über ein angeschlossenes Display werden einige dinge angezeigt womit ich nichts anfangen kann. Steht da irgendwo die Ursache des absturzes ? Was kann ich tun? Mein Plan wäre jetzt einfach Proxmox neu aufzusetzen. Da ich alle VMs mit dem Backup Server gesichert habe, sollte dies schnell erledigt sein.

Grüße Marcel

 

[Dunuin]

Hast du PCI passthrough am laufen?

 

[Solarstorm]

ja, eine SATA Karte geht direkt an eine VM mit Openmediavault.

 

[Solarstorm]

Vieleicht sind folgende Angaben noch hilfreich: Der Servier lief nun einige Monate ohne probleme. Vor kurzem hatte ich den Cluster gelöscht da ich falsche werte eingetragen hatte. 2 Tage später ist der Server das erste mal hängen geblieben. Nach einem Reboot lief er aber wieder 2 Wochen. Nun habe ich vor wenigen Tagen ein USB Gerät an eine VM weitergeleitet. 3 Tage später, also Heute, stürtzt der server mehrmals täglich ab.

 

[Solarstorm]

Seit Montag läuft der Server bisher ohne Probleme. Heute bekam ich allerdings eine Meldung auf dem Display welche mir überhaupr nix sagt.

 

[Solarstorm]

Hallo,

heute habe ich seit langem mal wieder eine Meldung auf der Console bekommen. Kann mir jemand sagen was das bedeuten soll?

Grüße Marcel

 

[CoolTux]

Ich tippe auf defekte Festplatte

 

[Solarstorm]

Aktuell laufen alle Systeme aber ohne probleme. Ein defekt einer Festplatte kann ich mir nicht vorstellen. Die System Festplatte ist eine NVME SSD die nichtmal ein Jahr im Betrieb ist. Die Speicher HDDs sind ebenfalls nichtmal ein Jahr alt.

 

[CoolTux]

Nun es scheint zu mindest Probleme mit dem Raid dm-17 zu geben. Schau Dir doch das log an, steht doch da.
Und nur weil etwas nur ein paar Monate alt ist heißt es nicht das es defekt sein kann.

 

[Solarstorm]

Ich habe vor kurzem eine VM mit Nextcloud gestartet welche auf dem Raid liegt. Ich vermute nun das die Nextcloud VM irgendwelche Probleme auf dem Raid verursacht. kann das sein?

 

[CoolTux]

Ohne genaue Logs kann man das nicht wirklich sagen.

 

[maxprox]

Ich habe vor kurzem eine VM mit Nextcloud gestartet welche auf dem Raid liegt. Ich vermute nun das die Nextcloud VM irgendwelche Probleme auf dem Raid verursacht. kann das sein?

nein. schreib doch bitte mal, was für ein Raid du gebaut hast. Hast du das Raid direkt per Proxmox Install erstellt?
Dann wäre der nächste Schritt die Befehle zur Anzeige des Raids und dessen Status sowie die smartctl Ausgabe pro Festplatte
Was nie schaden kann, wenn der Server nicht zwingend 24/7 produktiv laufen soll, ist ein RAM Test, der ist direkt in den Proxmox boot eingebaut, ansonsten nimmst du ein Live System wie die geniale: https://www.ultimatebootcd.com/
Den MEMTEST aber zu 100% durchlaufen lassen, was länger dauert, im Zweifel, einfach mal 'ne Nacht durchlaufen lassen.

durchsuch auch das Log auf errors :

 cat /var/log/syslog | grep -iE "error|warn"

und das gleiche mit "dmesg"
dann berichte mal ;-)

 

[maxprox]

zusätzlich würde ich per dmesg, lspci, "ip link show" oder auch lsusb rausfinden, was das für devices sind, die in deinem Screen zu sehen sind (vmvic, fwln112i0, fwbr112i0 ...) laufen da noch irgendwelche Schnittstellen für den Cluster?
Spätestens in so einem Fehlerfall würde ich das System von allem "befreien" was zZ nicht zwingend benötigt wird.

 

[Solarstorm]

So, habe das log nach errors durchsuchen lassen.

sdd ist eine Festplatte aus dem Raid verbund.

wie das mit dmesg geht weiß ich nicht da ich damit noch nie gearbeitet habe.

Per Usb ist nur eine Zinto 800 USV und ein USB keyboard angeschlossen.

 

[maxprox]

sieht aus als ob deine "sdd" Festplatte bald aussteigt
Wie schon geschrieben:
schreib doch bitte mal, was für ein Raid du gebaut hast. Hast du das Raid direkt per Proxmox Install erstellt?
Dann wäre der nächste Schritt, die Befehle zur Anzeige des Raids und dessen Status sowie die smartctl Ausgabe pro Festplatte
Was nie schaden kann, wenn der Server nicht zwingend 24/7 produktiv laufen soll, ist ein RAM Test, der ist direkt in den Proxmox boot eingebaut, ansonsten nimmst du ein Live System wie die geniale: https://www.ultimatebootcd.com/

Wenn natürlich klar ist, dass eine Festplatte aussteigt, ist der Lösungsweg natürlich klar: "Pizza & Bier bestellen" ;-)
EDIT copy&past fehler

smartctl -a /dev/sda
smartctl -a /dev/sdb
...
smartctl -a /dev/sdd
...

## falls nix kommt musst du "apt install hddtemp" machen
## EDIT: doppelt falsch: 1, es müsste "apt install smartmontools" heissen, 2, ist bei Proxmox out-of-the-box drauf ;-)
dmesg | grep -iE "error|warn"

 

[CoolTux]

Ok das es ein Raid ist war etwas voreilig von mir. Wenn Du aber sagst das die Platte Teil eines Raids ist dann schau mal nach dem Status

mdadm --detail /dev/md/???

 

[CoolTux]

dm gehört zum Kernel Device Mapper und wird vorrangig von LVM verwendet. Aber ich denke das die eigentliche Ursache wirklich die HDD /dev/sdd ist. Die sollte mal mit den smarttools angeschaut werden.

 

[Solarstorm]

Sorry, ich war jetzt durch das log durchsuchen so abgelenkt das ich die Frage bezüglich des Raids vergessen hatte. Ich habe ein Raid 0 mit 3 Festplatten a 3TB erstellt. Dort speichert eine Videoanlage die Daten der Sicherheitskameeras. Gemacht habe ich das über die shell mit:

zpool add RAID0 raid0 /dev/

ausgabe von HDDTemp:


dmesg error:


Zpool Status:

 

[CoolTux]

Ich sehe da nirgends sdd stehen. Wo gehört die Platte hin?
Die Frage was eine Videoaufzeichnung auf einem Virtualisierungs Host zu suchen hat spare ich mir lieber.

 

[maxprox]

ls -alh /dev/disk/by-id/
## und:
smartctl -a /dev/sda
smartctl -a /dev/sdb
...
smartctl -a /dev/sdd
...