Nach Update auf 8... nach kurzer Zeit nicht mehr erreichbar

[josch700]

Hey,

ähnliche Probleme hier.
Ich habe jetzt einiges an Zeit rein gesteckt das Problem einzugrenzen. Leider bin ich mir nicht sicher ob ihr das selbe Problem habt.
Um das zu Prüfen, achtet einfach mal nach einem Neustart auf euer IO delay von der Node.

Hier ist das Problem auf jeden Fall folgendes. Mit der Zeit steigt das IO delay immer weiter an. Das führt dann irgendwann dazu, dass nichts mehr erreichbar ist. Nur über IPMI oder eben direkt per Bildschirm kann man noch irgendwas mit der Maschine anfangen. Der Reboot dauert dann auch ewig.
Es lag nicht an VMs oder LXCs oder ähnlichem, sondern am pmxcfs. iotop zeig schön wie der disk write einfach immer höher steigt. Woran das liegt konnte ich leider noch nicht herausfinden, mit Kernel 5.15.116 passiert es auf jeden Fall nicht.

Auf anderen ähnlichen Nodes passiert das nicht. Wobei sich alle leicht unterscheiden.
Zum System mit den Problemen:
- es ist in einem Cluster aber andere Nodes in dem Cluster scheinen kein Problem zu haben
- iommu ist aktiviert, aber würde mich wundern, wenn das irgendwie mit dem Problem zusammenhängt
- die Boot-Partition ist ein ZFS pool

 

[UselessWolf]

Hiho Ihr Menschen.

Ich kann das gleiche behaupten von meiner Pmox Installation. Seit dem upgrade auf 8 und einem 6. kernel sind die Maschienen nicht mehr erreichbar sowie Proxmox.

Mit einer ausnahme meine Opnsense VM mit IMMou durchgereichter Netzwerkkarte läuft dann immernoch fröhlich weiter. Ohne größere Probleme.

wenn ich euch noch etwas an logs oder so darbieten kann sagt bescheid. Seit gestern auf dem 5er Kernel läuft alles (bis jetzt sauber)