Ceph seltsame Speicherberechnung

DaniDD

Member
Nov 4, 2019
3
1
8
44
Hallo,

ich habe einen Ceph Cluster mit 45TB Raw SSD-Kapazität. Darunter habe ich 3 Pools wo der mir jeweils nur 1,4TB freien Platz anzeigt obwohl RAW mäßig noch 14TB frei sind. Bei Replica 2 sollten da ja 7TB sein. Was stimmt hier nicht? Ich habe auch schon versucht die Größe der Pools anzupassen, aber es hat sich praktisch nichts geändert außer das der 1h lang PGs umsortiert hat.
ceph df zeigt folgendes an:
RAW STORAGE:
CLASS SIZE AVAIL USED RAW USED %RAW USED
ssd 45 TiB 14 TiB 31 TiB 31 TiB 69.71

POOLS:
POOL ID STORED OBJECTS USED %USED MAX AVAIL
ssd_pool 2 15 TiB 3.84M 29 TiB 91.11 1.4 TiB
iscsi_ssd 11 792 GiB 418.35k 1.5 TiB 35.14 1.4 TiB
k8s-ssd-pool 14 151 GiB 80.67k 301 GiB 9.34 1.4 TiB

Nachtrag, die OSDs sind auch ungleich belegt. Meistens ca 70%, eine ist aber zu 88% voll. Ist das vielleicht der Grund?
 
Last edited:
Tw hab ich das gelöst indem ich die OSDs neu ausbalanciert habe und sich dadurch auch der Füllstand der vollsten OSD verringert hat.
 
  • Like
Reactions: Alwin
Nachtrag, die OSDs sind auch ungleich belegt. Meistens ca 70%, eine ist aber zu 88% voll. Ist das vielleicht der Grund?
Nachträglich, yup. Ceph berechnet anhand der "vollsten" OSD die Belegung der Pools.
 

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!