Hallo,
Das erklärt es (leider viel Gelaber, aber die Essenz ist) : 8k volblocksize entspricht ~50% mehr Verbrauch bei raidz
https://www.youtube.com/watch?v=45loJ1QYPbQ
Erschreckend (nicht das Video, die Tatsache) ;-)
Bfo
Hallo,
nochmal herzlichen Dank für die Erklärung. Soweit auch so klar.
Der Zusammenhang zwischen den Blockgrößen und der Hardware ist doch auch relevant, oder?
Die NVME's haben
Sector size (logical/physical): 512 bytes / 4096 bytes
Ich habe mich zwischenzeitlich in diversen Seiten kundig...
Danke für die Info. Das rewrite des Systems wäre kein Problem.
Welche Blocksize wäre zu empfehlen?
Die Daten bestehen tatsächlich aus sehr vielen kleinen Dateien in der Größe von 50Kb bis 50Mb.
Bfo
Hallo,
ich bin verwirrt... das heisst jetzt, dass 13,5Tb von einem "Mirror" mindestens 10-n% mehr Speicher brauchen?
OMG ... das ist ein Problem, ein großes Problem - dafür ist kein Platz.
Kann man das in irgendeiner Weise verhindern - an den ZFS Einstellungen tunen (notfalls mit nochmaligen...
Hallo,
danke für die schnelle Info. Langsam wirds eng auf dem Ziel ...
Die Quelle
zpool get all store
NAME PROPERTY VALUE SOURCE
store size 14.5T -
store capacity 93%...
Hallo Fabian,
die Replikation läuft Standard über die Oberfläche. Die beiden ZFS Pools sind vom gleichen Typ und Version (auch Kernel).
Es handelt sich jeweils um raidz1 aus 4 Platten, ahsift ist überall 0, kompression ist bei beiden "Vorgabe", also vermutlich aus und keine Deduplizierung...
Hallo,
Ich repliziere seit 2 Tagen rund 13,5 TB - inkl Snspashots (eine große ZFS Datenpartition) auf einen neuen Server.
Dort sind mittlerweile rund 15TB verbraucht und der repliziert immer noch.
Quelle:
store/proxmox/vm/vm-60100-disk-0 776G 13.5T 366G 13.2T 0B...
Hallo,
ich habe ein Cluster aus 5 Nodes. 1 Node fährt sich Nachts herunter, ein weiterer ist ein mal am Tag für ~30min nicht verfügbar.
Nachdem das Cluster "gestern" erstellt wurde, waren alle Nodes verfügbar.
*Heute* nicht mehr. Die beiden betreffenden Nodes (bzw. die VMS dort) sind...
Dann hat man es aber nicht in der UI aber nicht im Blick und muss es manuell überprüfen usw. Wenn die Replikation fehl schlägt, ist das sofort zu sehen ...
Hallo,
auf einem Host existiert u.a. ein ZFS storage, welches Daten per NFS in VM's weiter gibt. Dieses storage muss groß Dimensioniert sein weil es hohe Fluktuationen gibt.
Eine "VM" mit einer explizitem Partition wäre nicht zielführend, da es sonst sehr viel ungenutzten Platz belegen...
Ahhh... danke. Ich bin geborener SysVinit User ... tue mich immer noch schwer mit systemd.
Mein "store" war disabled, ich habe ihn jetzt eingeschaltet... mal sehen, wie es wirkt ...
DANKE!!!
Bfo
Wegen diesem Verhalten:
systemctl status zfs-import
○ zfs-import.service
Loaded: masked (Reason: Unit zfs-import.service is masked.)
Active: inactive (dead)
systemctl unmask zfs-import
systemctl status zfs-import
○ zfs-import.service
Loaded: masked (Reason: Unit...
Danke für die Klarstellung.
Da ich wenig Einfluss auf die import Services habe (oder nicht wüsste, wie ich diese für meine Zwecke anpassen sollte), habe ich jetzt einfach einen Eintrag erstellt, welcher beim booten ausgeführt wird:
"echo "/usr/sbin/qm start 2165"|at now + 2 min"
Bfo
Hallo Fabian,
Dazu zwei Fragen:
1.) würde ein fstab Eintrag mit z.B.
store /store zfs defaults 0 0
den Pool beim booten korrekt mounten?
2.) (ein wenig offtopic): Ist das ein Problem, wenn 2x storages auf den selben pool zeigen (aber auf verschiedene datasets)?
Bfo
Wie kommst du darauf?
zfspool: vm
pool store/proxmox/vm
content images
sparse 1
zfspool: ssd
pool ssd/proxmox/vm
content images
mountpoint /ssd/proxmox/vm
sparse 1
das eine liegt in store/proxmox/vm, das andere im ssd/proxmox/vm - das sind 2 vollkommen getrennte...
Das klingt plausibel. Ist auch nur genau an diesem einen Proxmox (wir haben ~25 Proxmox Server mit fast identischer Hardware im Einsatz).
Grundsystem ist wie gesagt Debian. Dieser eine Rechner wurde vor längerem upgedatet. Ob das Problem dann erst auftrat oder vorher schon bestand, kann ich...
Zur Erklärung meinerseits: dieser Proxmox Server hat nur eine VM, die dort laufen soll. Das Storage selbst ist aber ein backup eines anderen zfs storages, daher ist auf dem "store" viel mehr drauf. Es ist kein LVM installiert.
Habe jetzt das Log seit "start" des Rechners angefügt.
Grüße aus...
Hallo,
anbei das Log. Dort ist aber auch nichts anderes zu erkennen. Relevant ist dann diese Zeile:
Jul 26 07:33:01 cb3 pvesh[2054]: Starting VM 2165 failed: could not activate storage 'vm', zfs error: cannot mount 'store/sweet/proxmox/lxc/subvol-10>
wobei wir wieder bei meiner ursprünglichen...
This site uses cookies to help personalise content, tailor your experience and to keep you logged in if you register.
By continuing to use this site, you are consenting to our use of cookies.