Eine VM startet, eine andere nicht

[tmatthaeus]

Hallo zusammen,


aktuell habe ich ein spannendes Phänomen. Ich habe eine handvoll VMs, die starten auf 3 von 4 Nodes wunderbar. Aber auf dem 4ten Node starten nur wenige VMs. Einen sinnigen Unterschied kann ich zwischen den VMs nicht erkennen. Daher ergibt das ganze für mich auch keinen wirklichen Sinn. Wenn alle VMs nicht gehen würden, okay. Aber wenn nur einige nicht gehen....? Das komisch!


Die VM 106 bspw startet auf dem Host "db02". Die VM 104 hingegen startet nicht auf dem Host. Wenn ich das versuche, kriege ich als Fehlermeldung:


kvm: -drive file=rbd:rbd/vm-104-disk-2:mon_host=10.2.19.11;10.2.19.12;10.2.19.13:id=admin:auth_supported=cephx:keyring=/etc/pve/priv/ceph/ceph.keyring,if=none,id=drive-virtio0,format=raw,cache=none,aio=native,detect-zeroes=on: error reading header from vm-104-disk-2: Function not implemented


Die Konfiguration der VMs sieht so aus:

root@db02 /etc/pve # cat nodes/stor01/qemu-server/104.conf
balloon: 0
bootdisk: virtio0
cores: 2
memory: 4096
name: backup
net0: e1000=9A:E0:7A:F8:5B:07,bridge=vmbr1
numa: 0
onboot: 1
ostype: l26
scsihw: virtio-scsi-pci
smbios1: uuid=442cff8e-6eae-4f36-b0db-8ced69260ae5
sockets: 1
virtio0: ceph:vm-104-disk-2,size=16G
virtio1: ceph:vm-104-disk-3,backup=0,size=1000G
virtio2: ceph:vm-104-disk-4,backup=0,size=1500G


root@db02 /etc/pve # cat nodes/db02/qemu-server/106.conf
balloon: 0
bootdisk: virtio0
cores: 2
memory: 2048
name: monitoring
net0: e1000=DE:3E:C8:79:AB:B3,bridge=vmbr1
numa: 0
ostype: l26
scsihw: virtio-scsi-pci
smbios1: uuid=abcf77bc-2268-4bae-a0c0-ed8674c6927b
sockets: 1
virtio0: ceph:vm-106-disk-1,size=16G
root@db02 /etc/pve #


Die Versionen sind schon recht alt, allerdings kann ich da gerade auch nicht sinnig updaten.

root@stor01 ~ # pveversion
pve-manager/4.4-15/7599e35a (running kernel: 4.4.67-1-pve)


root@db02 ~ # pveversion
pve-manager/4.4-24/08ba4d2d (running kernel: 4.4.134-1-pve)


root@stor01 ~ # lsb_release -a
No LSB modules are available.
Distributor ID: Debian
Description: Debian GNU/Linux 8.8 (jessie)
Release: 8.8
Codename: jessie

root@db02 ~ # lsb_release -a
No LSB modules are available.
Distributor ID: Debian
Description: Debian GNU/Linux 8.11 (jessie)
Release: 8.11
Codename: jessie

 

[aPollO]

Hi,

ich hab keine Ahnung von Ceph. Aber das sieht doch sehr nach einem Fehler aus der mit Ceph zu tun hat. Hast du also mal die Ceph Versionen und die Ceph Konfiguration der beiden Nodes verglichen?
Wenn ich diese Fehlermeldung in eine Suchmaschine einhacke dann kommen zu Hauf irgendwelche Leute die ähnliche Probleme hatten und bei denen die rbd_default_features in der ceph.conf auseinander liefen.

Viele Grüße