Just for fun, we can do the math for your setup and what you should get with 128k.
Let's look at a 132k write.
First block is an incompressible 128k write. Second is also a 128k block but with only 4k data, the rest zeros. LZ4 can compress that...
That question is an oversimplification ;) But most likely, it would rise of course.
Since a lets say from 128k down to 100k compressed block can make use of wider stripes and easier fit the pool geometry, padding has less impact and so on. But...
This is another big trap. I already explained that one:
So no you are correct, of course won't see 96TByte for your 8 wide 18TB RAIDZ2. You will see 6*18=108TB as your rightfully said
so far we agree.
But if you create a zvol with the 16k...
That is correct, it is a oversimplification.
But it does not get that much better if the data actually is compressible.
What if a 16 block can be compressed to 4k?
Then you have one padding & one data = 50% efficiency.
Congrats you are now down...
@IsThisThingOn,
du triffst den Nagel auf den Kopf. Das ist der klassische "Perfect Storm": Der Windows-NFS-Client ist per se ineffizient (Locking/Sync), und das dann kombiniert mit VM-Disk-Images auf einem ZFS-Dataset (CoW-on-CoW) potenziert die...
That is not what it does. I unrealistically assumes that a 16k volblock is not compressable and because of that always a 16k write.
It does not assume every write to be a tiny 4k block. It assumes a 4k sector size.
I did not know about that. Do...
Sorry, I misunderstood. In that case you can leave it.
Sure. So Proxmox uses the good default of 16k volblocksize.
That means that all your VMs ZFS raw disks, are offered 16k blocks.
Now lets look how ZFS provides 16k blocks.
You have RAIDZ1...
Ich kenne mich null aus mit VMWare. Aber verstehe ich das richtig, dass du unter VMware eine disk ähnlich wie QEMU2 inter Proxmox erstellst und diese dann auf den NFS share von TrueNAS schiebst?
Das kann fast nur in die Hose gehen. Ausser du...
Wenn ich das richtig verstehe, greifst du mit Windows per NFS zu. Das ist immer langsam, da der Windows NFS Client nicht so doll ist.
Bitte mal mit Linux oder direkt mit Proxmox testen.
I would recommend you to do
- Backup the VMs
- Backup your Proxmox settings
- destroy, reinstall Proxmox
- use mirrors!
- reimport the VMs
I would not use 5 drives as a RAIDZ1. With the default of 16k volblocksize you only get 66% and not your...
Das ist definitiv seltsam uns sollte nicht sein. Von welchem Client aus ist das?
Du hast aber hoffentlich nicht dedup am laufen?
Klar, sync ausschalten macht auch nur sync writes schneller, weil du den client belügst. Lass besser die Finger...
Hi,
For deduplication YMMV, for example, if I look at our PBS, it's pretty good with more than 90% of Linux VMs (more than 60% of these Linux machines are Debian), and retention from 14 to 365 days.
We have critical VMs which backups run every...
Obviously that depends on the modified data per interval and the "prune"-settings. And it needs a number of backups present to work at all :-)
Both my dayjobs cluster and my homelab show around 30 - with basically "everything daily". If I would...
Clickbait headline, but I think it is true :)
Maybe others can chime in with their setups and why they need beefy hardware.
Here is my PBS testimonial.
Reading the documentation I was a little bit scared. Especially the storage part seemed...
You have four (or is it five?) technically different devices which leads to a lot of possible combinations regarding a PVE cluster and a PBS. I can not give you one single way to go. But I have some hint from my point of view:
The problematic...
Ich denke, die Entscheidung ist gefallen - TrueNAS nativ auf der UGreen. TrueNAS ist schon eine andere Hausnummer als UGOS, habe es mal in einer VM angetestet. Werde aber die Boot-SSD wechseln, sicher ist sicher.
Von UGOS wollte ich gerade mal...
Both (!) is suboptimal. (You know that, right?)
But if I am forced to choose: the PBS (or any backup system) should be independent from the source it will backup. You'll probably want the backup to be available and usable when (not: if!) the...
Ist generell auch bei nicht so wichtigen Diensten eigentlich immer eine gute Sache. Hilft auch enorm beim troubleshooten.
Der ganz grosse Vorteil von LXC ist die Nutzung von files anstelle von blockstorage. Das ist eine kompliziertes Thema und...
Ich tu es nicht. Ein bash-Skript aus dem Internet als root ausführen, wenn man nicht weiß wie es funktioniert, ist NIE eine gute Idee. Wenn man dagegen weiß, wie es funktioniert, braucht man es höchstwahrscheinlich nicht :) Dazu kommt, dass die...
Für den beschriebenen use case würde ich falls Lust auf ZFS da ist TrueNAS SCALE oder ansonsten openmediavault verwenden.
UGOS und Synology traue ich nicht, deren Software scheint doch schon sehr Gebastel zu sein.