[SOLVED] Proxmox 7, Ceph Mesh?

Toranaga

Well-Known Member
Jun 17, 2017
60
9
48
56
Hallo zusammen,


ich habe gerade versucht den ersten Server meines Proxmox-Clusters zu aktualisieren. Leider gab/gibt es Probleme.

Vorab, das sind Debian die auf Proxmox hochgezogen wurden.

Alles wurde nach der Anleitung abgearbeitet: https://pve.proxmox.com/wiki/Upgrade_from_6.x_to_7.0

1. /boot ist mit 237MB evtl. zu klein, die Anzahl installierter Kernel vor dem Upgrade manuell reduzieren, sonst gibts einen initramfs-tools error.
2. meine bonds für die Mesh-Verbindung zwischen den Servern mag nicht mehr nach dem Reboot.

Sowohl Proxmox als als Ceph laufen hier per Mesh-Verkabelung.
Sich selbst kann der Server auch pingen, die Bonds sind up. Es kann also nur eine Kleinigkeit sein.


Ohne die MTU 900 hatte ich es schon probiert, aber hatte leider keine Wirkung.

Die Bridges sind ok.

Vor dem reboot war noch alles ok, somit schliesse ich Kabelprobleme mal aus.
War der Fehler mit der initramfs evtl. Auslöser?
Hat jemand eine Idee wo ich da anfange zu suchen?

Vielen Dank im Voraus
Andreas

/etc/network/interfaces
Code:
# network interface settings; autogenerated
# Please do NOT modify this file directly, unless you know what
# you're doing.
#
# If you want to manage parts of the network configuration manually,
# please utilize the 'source' or 'source-directory' directives to do
# so.
# PVE will preserve these directives, but will NOT read its network
# configuration from sourced files, so do not attempt to move any of
# the PVE managed interfaces into external files!

auto lo
iface lo inet loopback

iface eno1 inet manual
    mtu 9000
#Default 1Gb

iface eno2 inet manual
    mtu 9000
#Backup 1Gb

auto eno3
iface eno3 inet manual
    mtu 9000
#NFS-HA, pfsense-HA 1Gb

auto eno4
iface eno4 inet manual
    mtu 9000
#NFS-HA, pfsense-HA 1Gb

auto eno5
iface eno5 inet manual
    mtu 9000
#PROXMOX 1Gb

auto eno6
iface eno6 inet manual
    mtu 9000
#PROXMOX 1Gb

auto eno7
iface eno7 inet manual
    mtu 9000
#Ceph/Migration 10Gb

auto eno8
iface eno8 inet manual
    mtu 9000
#Ceph/Migration 10Gb

auto ens1f0
iface ens1f0 inet manual
    mtu 9000
#LAN90 1Gb

auto ens1f1
iface ens1f1 inet manual
    mtu 9000
#LAN90 1Gb

auto bond0
iface bond0 inet static
    address 192.168.1.3/24
    bond-slaves eno7 eno8
    bond-miimon 100
    bond-mode broadcast
    mtu 9000
    network 192.168.1.0
#Ceph/Migration 10Gb

auto bond1
iface bond1 inet static
    address 192.168.2.3/24
    bond-slaves eno5 eno6
    bond-miimon 100
    bond-mode broadcast
    mtu 9000
    network 192.168.2.0
#PROXMOX 1Gb

auto bond2
iface bond2 inet manual
    bond-slaves eno3 eno4
    bond-miimon 100
    bond-mode broadcast
    mtu 9000
    pre-up ip link set dev eno3 mtu 9000
    pre-up ip link set dev eno4 mtu 9000
#NFS-HA, pfsense-HA 1Gb

auto bond3
iface bond3 inet manual
    bond-slaves ens1f0 ens1f1
    bond-miimon 100
    bond-mode broadcast
    mtu 9000
    pre-up ip link set dev ens1f0 mtu 9000
    pre-up ip link set dev ens1f1 mtu 9000
#LAN90 1Gb

auto vmbr0
iface vmbr0 inet static
    address 192.168.100.3/24
    gateway 192.168.100.99
    bridge-ports eno1
    bridge-stp off
    bridge-fd 0
    bridge-vlan-aware yes
    bridge-vids 2-4094
    mtu 9000
    network  192.168.100.0
    pre-up ip link set dev eno1 mtu 9000
#Default 1Gb

auto vmbr1
iface vmbr1 inet static
    address 192.168.10.3/24
    bridge-ports eno2
    bridge-stp off
    bridge-fd 0
    bridge-vlan-aware yes
    bridge-vids 2-4094
    mtu 9000
    network 192.168.10.0
    pre-up ip link set dev eno2 mtu 9000
#Backup 1Gb

auto vmbr2
iface vmbr2 inet static
    address 192.168.4.3/24
    bridge-ports bond2
    bridge-stp off
    bridge-fd 0
    bridge-vlan-aware yes
    bridge-vids 2-4094
    mtu 9000
    network 192.168.4.0
#NFS-HA, pfsense-HA 1Gb

auto vmbr3
iface vmbr3 inet static
    address 192.168.5.3/24
    bridge-ports bond3
    bridge-stp off
    bridge-fd 0
    bridge-vlan-aware yes
    bridge-vids 2-4094
    mtu 9000
    network 192.168.5.0
#LAN90 1Gb

auto vmbr0.11
iface vmbr0.11 inet static
    address 192.168.11.3/24
    mtu 9000
#test second bridge on interface
 
Last edited:

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!