Search results for query: ZFS

  1. H

    First Proxmox homelab build - sanity check on hardware, service layout, and storage

    ...the OS mirror (read intensive is fine, mostly logs) and S4610/SM883/Micron 5300 MAX for the VM mirror (mixed use, around 3 DWPD, which is where ZFS write amplification actually bites). Thanks again for the detailed input. Fair point on paper, but thinking through the actual usage pattern...
  2. T

    [SOLVED] No /etc/kernel/proxmox-boot-uuids found, skipping ESP sync

    Hi just caught this message after running an adhoc update Setting up zfsutils-linux (2.4.1-pve1) ... Installing new version of config file /etc/default/zfs ... Installing new version of config file /etc/zfs/zfs-functions ... Setting up zfs-initramfs (2.4.1-pve1) ... Setting up corosync...
  3. J

    First Proxmox homelab build - sanity check on hardware, service layout, and storage

    ...to link the thread where lnxbil described his way to use special_small_blocks, so I edited my post to link it: https://forum.proxmox.com/threads/zfs-metadata-special-device.129031/post-699290 Please note that a dedicated OS mirror is helpful but not always needed. It can also be a valid...
  4. Daniel-Doggy

    Proxmox and ZFS Storage

    ...loss and total disks as mirrors are basicly raid 1.) This is due to both the complexity it brings to users who are new or less experienced to ZFS and zRaid 5 will also eat non enterprise (and to a lesser extent enterprise) disks for lunch. This is due to zRaid 5 adding a lot of write...
  5. leesteken

    Proxmox and ZFS Storage

    ...so unless you want to store other stuff there like ISOs, templates and/or VMs, 2TB sounds like overkill. As mentioned before, setup Proxmox's ZFS replication to keeps the various nodes relatively up to date for redundancy. This is independent of the ZFS configuration for each Proxmox node...
  6. J

    [SOLVED] Proxmox 9 - IO error ZFS

    ...a new VM. Nothing helped. We can confirm, after we disabled, everything was fine and we was able to import our Data without any issue to our Mysql-Database. zfs set direct=disabled data But what is, if the Host reboot? How we can set it permanent? Thanks. Also we should report it as Bug?
  7. H

    First Proxmox homelab build - sanity check on hardware, service layout, and storage

    Hi Johannes, thanks a lot for the detailed write-up - that actually clears up a lot for me. Good to know the ECC/ZFS thing isn't as dramatic as it's sometimes made out to be. I'll definitely keep the RAIDZ-for-VMs caveat in mind for later upgrades. That article was quite interesting! Good to...
  8. P

    RAIDZ-1 PBS Mismatched Disk Sizes

    ...PBS test server with 3 x 2TB disks and a single 1TB disk, with the idea that once my 4th 2TB disk arrives I would swap it out, at which point the ZFS would resilver and the pool would auto-expand to 6TB usable. I have this configured but during the setup when I attempt to proceed it gives me...
  9. F

    Proxmox and ZFS Storage

    ...on 3 different machines, but have failover between them, without shared storage (different locations on campus). I have read a lot about using ZFS for this, but I keep going down rabbit holes on what settings should be, and have read things about using mirrored vdevs instead of just the...
  10. B

    Hardware aus Zeiten von DDR3

    ...ich das. Damit gibts kein Filesystem auf Filesystem, wie bei einer VM, sondern PBS bekommt direkt zugriff auf einen pfad in einem der truenas-zfs-pools (bei mir ein eigener Pool nur für PBS). Läuft bisher (etwa 3 Monate) rund und performt auch ordentlich, allerdings verwende ich dieses...
  11. P

    snap shots Backup script

    ...hier nicht verstanden wird. Es ist ein generelles Konzept, das überhaupt nicht Proxmox-spezifisch ist und sich beispielsweise sehr gut mit zwei ZFS NAS Systemen umsetzen lässt. Aber es funktioniert nicht nur mit ZFS, sondern auch mit simplen Tools wie Rsync. Der Grund, warum man es in...
  12. Impact

    [SOLVED] Proxmox - VM io-error

    You generally want to use the ZFS storage type when you have a ZFS pool. The IO error can have a lot of reasons. Overprovisioning and then attempting to use it all might be one. You might be able to find relevant logs with something like journalctl -b0 -krp 0..5. Otherwise check node > System >...
  13. M

    [SOLVED] Proxmox - VM io-error

    ...Because the QCOW2 is the default format used when a new VM is created. We can convert it to RAW without problem. We just realized that the ZFS disks aren't in RAID. We'll be doing some tweaking to fix this. At the moment we cannot add an SSD or other disks. Which fs is the better for this...
  14. K

    Host memory exhaustion: Shmem ~= AnonPages, no ZFS

    ...6,1Gi All our nodes are installed via ansible with same configuration and are running the mentioned PVE version and kernel. This is not a ZFS problem since all have zfs_arc_max 17179869184 and arcstats is virtually zero. I will provide data for only one of the bad nodes since the other is...
  15. J

    snap shots Backup script

    Fair enough Ja, aber der Witz ist ja, dass das nur in eine Richtung geht, der remote PBS ist (Firewall passend konfiguriert vorausgesetzt) bleibt ja unerreichbar. Und nur per VPN erreichbar ist schon was anders als wenn das ganze Internet darauf kommt, vor allen weil man auf VPN-Ebene ja auch...
  16. J

    Offsite Backup Wo?

    ...) über eine vergleichsweise lahme WAN-Verbindung wird das nicht besser. Dazu kommt, dass die storageboxen durch HDDs mit ZFS-Raidz implementiert werden, die PBS-Dokumentation empfiehlt ja aus guten Grund als Speichermedium lokale SSDs zu nutzen und für die offsite-Replikation dann einen...
  17. I

    snap shots Backup script

    Meine damit eher den Gewinn verglichen mit einem zweiten Medium. Ein ZFS send liesse sich für ähnliche Hardware Kosten einrichten, würde aber massiv mehr bringen. Gut, aber VPN ist nun mal nicht "keine Verbindung". In der Praxis ist es vermutlich ein: - Allow all incoming UDP traffic on port...
  18. S

    Ram report issue to multiple Hosts

    ...Socket, 24 cores) X86-64-v2-AES NUMA=1 VCPU=18 Memory 86016, Minimum 65536, Shares default, Baloon and KSM = ON Guest 31003 (Ubuntu) 48 (2 Socket, 24 cores) X86-64-v2-AES NUMA=1 VCPU=28 Memory 16384, Minimum 8192, Shares default, Baloon and KSM = ON Not using any ZFS, All LVM-Thin...
  19. P

    snap shots Backup script

    Also eigentlich ging es mir ja nur darum zu sagen, dass ZFS Repplikation eine valide Art ist um Backups zu machen und, dass wenn man ZFS Pull Repplikationen macht, man im Prinzip das zusätzliche 1 für offline oder unveränderbar, quasi gratis mit dabei hat, auch wenn ich mit "immutable" hier...
  20. J

    snap shots Backup script

    Das hilft einen aber nicht bei einem Bug im PBS, mit dem bereits das initiale Backup vor dem zfs sync kaputt gemacht wurde. Für solche Szenarien gibt es ja auch noch pve-zsync, was einen die VMs und lxcs direkt auf einen anderen PVE (oder anderen Server mit ZFS-unterstützung) repliziert. Das...