Grüss euch
Folgendes Thema habe ich leider seit heute. Ich habe mir eine HBA LSI Karte (Broadcom / LSI SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]) organisiert, die an meinem Silverstone Case CS380 mit einer SAS/SATA Backplane hängt. Die Karte wird in Proxmox erkannt
Das Commando lscpi -knn zeigt
Soweit so gut. Aber wenn ich die Karte in eine VM durchschleife und dort versuche die erkannten SAS Disken zu formatieren oder in einen Pool zusammenzufassen stürzt die VM mit einem internal Error ab.
Das Proxmox Log zeigt mir jedesmal:
Interessanterweise ist es egal ob die VM TrueNAS core, Scale, OpenMediaVault oder ein Windows Server ist. Bei allen tritt das gleiche Problem auf. Jetzt bin ich auf die Fehlersuche gegangen, aber kann mir einfach keinen Reim draus machen woran es liegen kann. Die Disken werden in allen OS System richtig erkannt, aber weder Wipen noch initialisieren (im Windows) funktioniert.
Mein Mainboard ist aktuell ein ASUS Pro Q570M-C/CSM, die Karte hängt derzeit an einem x1 <-> x16 Riser Adapter, aber das dürfte ja (ausser vlt eine Geschwindigkeitseinbuße) kein Thema sein. Die Karte selbst dürfte vom Verkäufer richtig geflashed - IT Mode worden sein (Der Screenshot zeigt im CLI von TrueNAS einen Fehler, da sieht man die Firmwareversion).
Jetzt die große Frage, weiss jemand von euch woran das liegen kann? Ist das vlt das Mainboard das die Karte nicht richtig unterstützt? Oder hat die Karte etwas? (Muss zugeben die war bei ebay über einen Chinesen Händler, der aber 100% Weiterempfehlung für diese Karten hatte) Ich will mir jetzt nicht eine neue Karte kaufen, nur um dann feststellen zu müssen das es vlt nicht die Karte war :/
Proxmox ist die aktuellste Version inkl. aller notwendigen Patches.
Folgendes Thema habe ich leider seit heute. Ich habe mir eine HBA LSI Karte (Broadcom / LSI SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon]) organisiert, die an meinem Silverstone Case CS380 mit einer SAS/SATA Backplane hängt. Die Karte wird in Proxmox erkannt
Das Commando lscpi -knn zeigt
Code:
0b:00.0 RAID bus controller [0104]: Broadcom / LSI SAS2008 PCI-Express Fusion-MPT SAS-2 [Falcon] [1000:0072] (rev 03)
Subsystem: Fujitsu Technology Solutions HBA Ctrl SAS 6G 0/1 [D2607] [1734:1177]
Kernel driver in use: vfio-pci
Kernel modules: mpt3sas
Soweit so gut. Aber wenn ich die Karte in eine VM durchschleife und dort versuche die erkannten SAS Disken zu formatieren oder in einen Pool zusammenzufassen stürzt die VM mit einem internal Error ab.
Das Proxmox Log zeigt mir jedesmal:
Code:
Feb 03 19:47:04 host1 QEMU[1716166]: kvm: vfio_err_notifier_handler(0000:0b:00.0) Unrecoverable error detected. Please collect any data possible and then kill the guest
Feb 03 19:47:04 host1 kernel: pcieport 0000:00:1c.7: DPC: containment event, status:0x1f05 source:0x0b00
Feb 03 19:47:04 host1 kernel: pcieport 0000:00:1c.7: DPC: ERR_FATAL detected
Feb 03 19:47:06 host1 QEMU[1716166]: kvm: vfio_err_notifier_handler(0000:0b:00.0) Unrecoverable error detected. Please collect any data possible and then kill the guest
Feb 03 19:47:06 host1 kernel: pcieport 0000:00:1c.7: DPC: Data Link Layer Link Active not set in 1000 msec
Feb 03 19:47:06 host1 kernel: pcieport 0000:00:1c.7: AER: subordinate device reset failed
Feb 03 19:47:06 host1 kernel: pcieport 0000:00:1c.7: AER: device recovery failed
Feb 03 19:47:06 host1 kernel: pcieport 0000:00:1c.7: DPC: containment event, status:0x1f05 source:0x0b00
Feb 03 19:47:06 host1 kernel: pcieport 0000:00:1c.7: DPC: ERR_FATAL detected
Feb 03 19:47:07 host1 kernel: pcieport 0000:00:1c.7: AER: device recovery successful
Interessanterweise ist es egal ob die VM TrueNAS core, Scale, OpenMediaVault oder ein Windows Server ist. Bei allen tritt das gleiche Problem auf. Jetzt bin ich auf die Fehlersuche gegangen, aber kann mir einfach keinen Reim draus machen woran es liegen kann. Die Disken werden in allen OS System richtig erkannt, aber weder Wipen noch initialisieren (im Windows) funktioniert.
Mein Mainboard ist aktuell ein ASUS Pro Q570M-C/CSM, die Karte hängt derzeit an einem x1 <-> x16 Riser Adapter, aber das dürfte ja (ausser vlt eine Geschwindigkeitseinbuße) kein Thema sein. Die Karte selbst dürfte vom Verkäufer richtig geflashed - IT Mode worden sein (Der Screenshot zeigt im CLI von TrueNAS einen Fehler, da sieht man die Firmwareversion).
Jetzt die große Frage, weiss jemand von euch woran das liegen kann? Ist das vlt das Mainboard das die Karte nicht richtig unterstützt? Oder hat die Karte etwas? (Muss zugeben die war bei ebay über einen Chinesen Händler, der aber 100% Weiterempfehlung für diese Karten hatte) Ich will mir jetzt nicht eine neue Karte kaufen, nur um dann feststellen zu müssen das es vlt nicht die Karte war :/
Proxmox ist die aktuellste Version inkl. aller notwendigen Patches.
Code:
root@host1:~# pveversion -v
proxmox-ve: 7.3-1 (running kernel: 5.15.83-1-pve)
pve-manager: 7.3-4 (running version: 7.3-4/d69b70d4)
pve-kernel-helper: 7.3-3
pve-kernel-5.15: 7.3-1
pve-kernel-5.15.83-1-pve: 5.15.83-1
pve-kernel-5.15.74-1-pve: 5.15.74-1
ceph-fuse: 15.2.17-pve1
corosync: 3.1.7-pve1
criu: 3.15-1+pve-1
glusterfs-client: 9.2-1
ifupdown2: 3.1.0-1+pmx3
ksm-control-daemon: 1.4-1
libjs-extjs: 7.0.0-1
libknet1: 1.24-pve2
libproxmox-acme-perl: 1.4.3
libproxmox-backup-qemu0: 1.3.1-1
libpve-access-control: 7.3-1
libpve-apiclient-perl: 3.2-1
libpve-common-perl: 7.3-2
libpve-guest-common-perl: 4.2-3
libpve-http-server-perl: 4.1-5
libpve-storage-perl: 7.3-2
libspice-server1: 0.14.3-2.1
lvm2: 2.03.11-2.1
lxc-pve: 5.0.2-1
lxcfs: 5.0.3-pve1
novnc-pve: 1.3.0-3
proxmox-backup-client: 2.3.2-1
proxmox-backup-file-restore: 2.3.2-1
proxmox-mini-journalreader: 1.3-1
proxmox-widget-toolkit: 3.5.3
pve-cluster: 7.3-2
pve-container: 4.4-2
pve-docs: 7.3-1
pve-edk2-firmware: 3.20220526-1
pve-firewall: 4.2-7
pve-firmware: 3.6-3
pve-ha-manager: 3.5.1
pve-i18n: 2.8-2
pve-qemu-kvm: 7.1.0-4
pve-xtermjs: 4.16.0-1
qemu-server: 7.3-3
smartmontools: 7.2-pve3
spiceterm: 3.2-2
swtpm: 0.8.0~bpo11+2
vncterm: 1.7-1
zfsutils-linux: 2.1.9-pve1
Attachments
Last edited: