osd.0 startet nicht

[CoolTux]

Hallo,

So nun muß ich mich doch outen. Ich hatte eben eine gruslige Erfahrung gemacht. Nach dem gestrigen Update von Proxmox 5.4 auf 6.0 und Ceph Update von Luminous nach Nautilus habe ich heute eine Node neugestartet (gestern im übrigen auch innerhalb des Updates auf Buster, aber nicht nach dem Ceph Update) und dabei kam dann der OSD für diese Node nicht mehr hoch. Nach etwas suchen und probieren kam raus das die entsprechende Partition nicht unter /var/lib/ceph/osd/osd-0 eingebunden war.
Ich finde zum mount nichts in der fstab, wie und wo steht das mounten für die Partition und wieso ging es unter Proxmox 5.4 ohne Probleme?


Grüße

 

[Alwin]

Hast Du das ceph-volume wie in der Anleitung ausgeführt?
https://pve.proxmox.com/wiki/Ceph_Luminous_to_Nautilus#Restart_the_OSD_daemon_on_all_nodes

 

[CoolTux]

Ja habe ich.
Das outen bezog sich im übrigen auf meine Partition für Ceph. Es ist sda4

 

[Alwin]

Warum genau sda4? OSD haben im Normalfall nur zwei Partitionen oder LVs wenn mit Nautilus erstellt.

 

[CoolTux]

Das ganze wurde vor 1,5 Jahren erstellt. Es sind kleine Tischrechner mit nur Platz für eine SSD. Ist halt alles Privat.

 

[Alwin]

Versuch nochmals mit dem ceph-volume.

ceph-volume simple scan /dev/sda4
ceph-volume simple activate --all

 

[CoolTux]

root@n1-pve-cluster:~# ceph-volume simple scan /dev/sda4
-->  RuntimeError: Device must be the ceph data partition, but PARTLABEL reported: ""
root@n1-pve-cluster:~# ceph-volume simple activate --all
root@n1-pve-cluster:~#

Device         Start       End   Sectors   Size Type 
/dev/sda1       2048      4095      2048     1M BIOS boot 
/dev/sda2       4096    528383    524288   256M EFI System 
/dev/sda3     528384 100663296 100134913  47.8G Linux LVM 
/dev/sda4  100665344 500118158 399452815 190.5G Ceph OSD

 

[Alwin]

Da fehlt das Partitions Label für Ceph. Am besten die OSD zerstören und neu erstellen, falls möglich.

ceph-volume lvm create --data /dev/sda4

 

[CoolTux]

Meinst Du das

/dev/sda4  100665344 500118158 399452815 190.5G Ceph OSD

Hatte die Partitionstabelle oben noch nachgereicht.

 

[Alwin]

Device must be the ceph data partition, but PARTLABEL reported: ""

Hier ist "" und da sollte etwas drinnen stehen. Wie gesagt, am einfachsten die OSD neu machen.

 

[CoolTux]

Alles klar. Dann Versuche ich mal mein Glück. Noch geht es ja.
Danke Dir für die schnelle Hilfe.

Grüße

 

[CoolTux]

Vermelde Vollzug. Hat alles super geklappt.

Über das Webfrontend das OSD Volume auf out setzen. Warten bis alle Daten auf die anderen OSD Volumes kopiert wurden. Danach:

systemctl stop ceph-osd@0
umount /var/lib/ceph/osd/osd.0
ceph osd crush remove osd.0
ceph auth del osd.0

Danach kann man dann mittels

ceph-volume lvm create --data /dev/sda4

Ein neues OSD Volume anlegen.




Grüße