Abstürze virtueller Desktops mit "[TTM] Buffer eviction failed" und qxl Allocation

[René Pfeiffer]

Liebes Forum,
wir verwenden einen Proxmox Cluster (Version 8.1.x) wo unter anderem vier virtuelle Desktops (2 Xubuntu 20.04, ein 22.04 und ein 24.04 jeweils mit Xfce) verwendet werden. Die Desktops haben bis März gut funktioniert. Angesprochen werden sie mit SPICE und lokale Clients haben teilweise zwei Monitore. Die Xubuntu 22.04 und 24.04 Versionen stoppen ab und zu mit dieser Fehlermeldung:

2024-04-26T09:02:59.564022+02:00 devel kernel: [TTM] Buffer eviction failed
2024-04-26T09:02:59.564040+02:00 devel kernel: fbcon: Taking over console
2024-04-26T09:02:59.564041+02:00 devel kernel: qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
2024-04-26T09:02:59.564041+02:00 devel kernel: [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO
2024-04-26T09:03:14.924055+02:00 devel kernel: [TTM] Buffer eviction failed
2024-04-26T09:03:14.924080+02:00 devel kernel: qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
2024-04-26T09:03:14.924081+02:00 devel kernel: [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO
2024-04-26T09:03:14.924083+02:00 devel kernel: Console: switching to colour frame buffer device 128x48
2024-04-26T09:03:30.284042+02:00 devel kernel: [TTM] Buffer eviction failed
2024-04-26T09:03:30.284067+02:00 devel kernel: qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
2024-04-26T09:03:30.284069+02:00 devel kernel: [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO
2024-04-26T09:03:45.643999+02:00 devel kernel: [TTM] Buffer eviction failed
2024-04-26T09:03:45.644016+02:00 devel kernel: qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
2024-04-26T09:03:45.644017+02:00 devel kernel: [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO
2024-04-26T09:04:01.004032+02:00 devel kernel: [TTM] Buffer eviction failed
2024-04-26T09:04:01.004056+02:00 devel kernel: qxl 0000:00:01.0: object_init failed for (23441408, 0x00000001)
2024-04-26T09:04:01.004058+02:00 devel kernel: [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO

Vor einem Upgrade war die Meldung leicht anders:

Apr 22 10:12:42 devel kernel: [265559.971166] [TTM] Buffer eviction failed
Apr 22 10:12:42 devel kernel: [265559.971184] qxl 0000:00:01.0: object_init failed for (954368, 0x00000001)
Apr 22 10:12:42 devel kernel: [265559.971189] [drm:qxl_gem_object_create [qxl]] *ERROR* Failed to allocate GEM object (952340, 1, 4096, -12)
Apr 22 10:12:42 devel kernel: [265559.971204] [drm:qxl_alloc_ioctl [qxl]] *ERROR* qxl_alloc_ioctl: failed to create gem ret=-12
Apr 22 10:12:57 devel kernel: [265575.074744] [TTM] Buffer eviction failed
Apr 22 10:12:57 devel kernel: [265575.074761] qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
Apr 22 10:12:57 devel kernel: [265575.074766] [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO
Apr 22 10:13:12 devel kernel: [265590.178128] [TTM] Buffer eviction failed
Apr 22 10:13:12 devel kernel: [265590.178143] qxl 0000:00:01.0: object_init failed for (3149824, 0x00000001)
Apr 22 10:13:12 devel kernel: [265590.178147] [drm:qxl_alloc_bo_reserved [qxl]] *ERROR* failed to allocate VRAM BO

Es fällt auf, dass object_init immer exakt mit 3 MB fehlschlägt. Im qemu ist der Grafikkartenspeicher auf 128 MB konfiguriert (Fehler tritt mit allen Größen auf). Es gibt diverse Tickets dazu, aber das war teilweise eine Regression in bestimmten Linuxkernversionen. Ich vermute, dass irgendwelche Desktopapplikationen den Fehler mit bestimmten Operationen auslösen, habe aber keine Idee mehr wie man das weiter einengen kann.

Viele Grüße,
René.

 

[René Pfeiffer]

Die plausibelste Ursache scheint laut diesem Posting ein Effekt im qxl Treiber zu sein, welcher bei "hoher" Last auftritt:
https://lists.archive.carbon60.com/linux/kernel/5325444

Ich teste das System jetzt mit dem neuesten 6.8 Kern und mit einem Älteren (sofern sich der auf den Ubuntu 22.04/24.04 Versionen kompilieren lässt).

Viele Grüße,
René Pfeiffer.

 

[René Pfeiffer]

Liebes Forums,
das Problem tritt mit dem Linuxkern 5.15 (noch verfügbar für Ubuntu 20.04/22.04) und dem Linuxkern 6.8.8 (installiert per Mainline Pakete auf Ubuntu 24.04) nicht (mehr) auf.

Viele Grüße,
René Pfeiffer.