Ceph-IP laut ARP-Tabelle auch bei vmbr0

herzkerl

Member
Mar 18, 2021
94
10
13
Hallo zusammen,

mein UniFi-Switch informierte mich darüber, dass IP-Adressen doppelt vergeben wären und zeigte ähnliche MAC-Adressen an. Nun habe ich testweise auf 2 der 5 der Server die ARP-Tabelle gecheckt und gesehen, dass die für Ceph verwendeten IP-Adressen sowohl beim für Ceph verwendeten Interface eno2 als auch auf den anderen Interfaces angezeigt wird – sollte das so sein?

Darüber hinaus wird bei einem der Server vmbr0 nicht angezeigt und (daher fett markiert) bei einem der Server ist eine andere (die falsche) MAC-Adresse für eno2 angezeigt (fett markiert).

Code:
10.10.62.42              ether   c8:1f:66:d9:c9:f3   C                     eno4
10.10.62.42              ether   c8:1f:66:d9:c9:f3   C                     eno2
10.10.62.42              ether   c8:1f:66:d9:c9:f3   C                     vmbr0

10.10.62.43              ether   c8:1f:66:db:32:c6   C                     eno4
10.10.62.43              ether   c8:1f:66:db:32:c6   C                     eno2

10.10.62.44              ether   14:18:77:2b:7a:70   C                     vmbr0
10.10.62.44              ether   14:18:77:2b:7a:70   C                     eno2
10.10.62.44              ether   14:18:77:2b:7a:70   C                     eno4

10.10.62.51              ether   14:18:77:45:e8:93   C                     vmbr0
10.10.62.51              ether   14:18:77:45:e8:97   C                     eno2
10.10.62.51              ether   14:18:77:45:e8:93   C                     eno4

10.10.62.52              ether   44:a8:42:36:80:f8   C                     eno2
10.10.62.52              ether   44:a8:42:36:80:f8   C                     vmbr0
10.10.62.52              ether   44:a8:42:36:80:f8   C                     eno4

Was würdet ihr hier als Ursache vermuten?
 
Bitte die kompletten Netzwerkconfigs posten (/etc/network/interfaces) von allen betroffenen Nodes.
 
Code:
root@pve2:~# cat /etc/network/interfaces

auto lo
iface lo inet loopback

auto eno4
iface eno4 inet static
    address 10.10.11.12/24

iface eno1 inet manual
    mtu 9000
#Ceph (test)

auto eno2
iface eno2 inet static
    address 10.10.62.42/24
    mtu 9000
#Ceph

iface eno3 inet manual

auto eno3.333
iface eno3.333 inet manual

auto vmbr0
iface vmbr0 inet static
    address 10.10.10.12/24
    gateway 10.10.10.254
    bridge-ports eno3
    bridge-stp off
    bridge-fd 0

auto vmbr333
iface vmbr333 inet static
    address 10.11.33.1/24
    bridge-ports eno3.333
    bridge-stp off
    bridge-fd 0

source /etc/network/interfaces.d/*

Code:
root@pve3:~# cat /etc/network/interfaces

auto lo
iface lo inet loopback

auto eno4
iface eno4 inet static
    address 10.10.11.13/24

iface eno1 inet manual
    mtu 9000

auto eno2
iface eno2 inet static
    address 10.10.62.43/24
    mtu 9000
#Ceph

iface eno3 inet manual

auto eno3.333
iface eno3.333 inet manual

auto vmbr0
iface vmbr0 inet static
    address 10.10.10.13/24
    gateway 10.10.10.254
    bridge-ports eno3
    bridge-stp off
    bridge-fd 0

auto vmbr333
iface vmbr333 inet static
    address 10.11.33.2/24
    bridge-ports eno3.333
    bridge-stp off
    bridge-fd 0

source /etc/network/interfaces.d/*

Code:
root@pve4:~# cat /etc/network/interfaces

auto lo
iface lo inet loopback

iface eno3 inet manual

iface eno1 inet manual
    mtu 9000

auto eno2
iface eno2 inet static
    address 10.10.62.44/24
    mtu 9000
#Ceph

auto eno3.333
iface eno3.333 inet manual

auto eno4
iface eno4 inet static
    address 10.10.11.14/24

auto vmbr0
iface vmbr0 inet static
    address 10.10.10.14/24
    gateway 10.10.10.254
    bridge-ports eno3
    bridge-stp off
    bridge-fd 0

auto vmbr333
iface vmbr333 inet static
    address 10.11.33.3/24
    bridge-ports eno3.333
    bridge-stp off
    bridge-fd 0

source /etc/network/interfaces.d/*

Code:
root@pvs1:~# cat /etc/network/interfaces

auto lo
iface lo inet loopback

iface eno3 inet manual

auto eno1
iface eno1 inet manual
    mtu 9000

auto eno2
iface eno2 inet static
    address 10.10.62.51/24
    mtu 9000
#Ceph

auto eno3.333
iface eno3.333 inet manual

auto eno4
iface eno4 inet static
    address 10.10.11.21/24

auto vmbr0
iface vmbr0 inet static
    address 10.10.10.21/24
    gateway 10.10.10.254
    bridge-ports eno3
    bridge-stp off
    bridge-fd 0

auto vmbr333
iface vmbr333 inet static
    address 10.11.33.4/24
    bridge-ports eno3.333
    bridge-stp off
    bridge-fd 0

source /etc/network/interfaces.d/*

Code:
root@pvs2:~# cat /etc/network/interfaces

auto lo
iface lo inet loopback

iface eno3 inet manual

auto eno1
iface eno1 inet manual
    mtu 9000

auto eno2
iface eno2 inet static
    address 10.10.62.52/24
    mtu 9000
#Ceph

auto eno3.333
iface eno3.333 inet manual

auto eno4
iface eno4 inet static
    address 10.10.11.22/24

auto vmbr0
iface vmbr0 inet static
    address 10.10.10.22/24
    gateway 10.10.10.254
    bridge-ports eno3
    bridge-stp off
    bridge-fd 0

auto vmbr333
iface vmbr333 inet static
    address 10.11.33.5/24
    bridge-ports eno3.333
    bridge-stp off
    bridge-fd 0

source /etc/network/interfaces.d/*
 
Das sieht auf den ersten Blick gut aus.

Mit welchem Tool wurde denn der Output im 1. Post erstellt?
Welche MAC Adresse ist falsch? Diese Information ist leider durch die Code Tags verloren gegangen.

Wie sieht denn der Output von ip r und ip neigh von allen Nodes aus?
 
Mit welchem Tool wurde denn der Output im 1. Post erstellt?
Welche MAC Adresse ist falsch? Diese Information ist leider durch die Code Tags verloren gegangen.
Mit arp – und dann habe ich die entsprechenden Einträge rauskopiert. Bei dem Server mit der .51 ist die MAC-Adresse korrekt, die nicht dem Ceph-Interface zugeordnet ist.

Wie sieht denn der Output von ip r und ip neigh von allen Nodes aus?
Code:
root@pve2:~# ip r
default via 10.10.10.254 dev vmbr0 proto kernel onlink
10.10.10.0/24 dev vmbr0 proto kernel scope link src 10.10.10.12
10.10.11.0/24 dev eno4 proto kernel scope link src 10.10.11.12
10.10.62.0/24 dev eno2 proto kernel scope link src 10.10.62.42
10.11.33.0/24 dev vmbr333 proto kernel scope link src 10.11.33.1

root@pve3:~# ip r
default via 10.10.10.254 dev vmbr0 proto kernel onlink
10.10.10.0/24 dev vmbr0 proto kernel scope link src 10.10.10.13
10.10.11.0/24 dev eno4 proto kernel scope link src 10.10.11.13
10.10.62.0/24 dev eno2 proto kernel scope link src 10.10.62.43
10.11.33.0/24 dev vmbr333 proto kernel scope link src 10.11.33.2

root@pve4:~# ip r
default via 10.10.10.254 dev vmbr0 proto kernel onlink
10.10.10.0/24 dev vmbr0 proto kernel scope link src 10.10.10.14
10.10.11.0/24 dev eno4 proto kernel scope link src 10.10.11.14
10.10.62.0/24 dev eno2 proto kernel scope link src 10.10.62.44
10.11.33.0/24 dev vmbr333 proto kernel scope link src 10.11.33.3

root@pvs1:~# ip r
default via 10.10.10.254 dev vmbr0 proto kernel onlink
10.10.10.0/24 dev vmbr0 proto kernel scope link src 10.10.10.21
10.10.11.0/24 dev eno4 proto kernel scope link src 10.10.11.21
10.10.62.0/24 dev eno2 proto kernel scope link src 10.10.62.51
10.11.33.0/24 dev vmbr333 proto kernel scope link src 10.11.33.4

root@pvs2:~# ip r
default via 10.10.10.254 dev vmbr0 proto kernel onlink
10.10.10.0/24 dev vmbr0 proto kernel scope link src 10.10.10.22
10.10.11.0/24 dev eno4 proto kernel scope link src 10.10.11.22
10.10.62.0/24 dev eno2 proto kernel scope link src 10.10.62.52
10.11.33.0/24 dev vmbr333 proto kernel scope link src 10.11.33.5

Code:
root@pve2:~# ip neigh
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 DELAY
10.10.62.44 dev vmbr0 lladdr 14:18:77:2b:7a:70 STALE
10.10.10.21 dev eno4 lladdr 14:18:77:45:e8:95 STALE
10.10.62.45 dev eno4 lladdr 00:11:32:ec:7d:33 STALE
10.10.62.52 dev eno4 lladdr 44:a8:42:36:80:f8 STALE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.62.45 dev vmbr0 lladdr 00:11:32:ec:7d:33 STALE
10.10.62.36 dev vmbr0 lladdr 92:1b:d0:45:20:64 STALE
10.10.10.22 dev eno4 lladdr 44:a8:42:36:80:fa STALE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.62.41 dev eno2  FAILED
10.10.10.254 dev eno2 lladdr 9a:49:a2:00:b3:55 STALE
10.10.100.254 dev eno4 lladdr 90:09:d0:1a:a1:2e STALE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.62.34 dev eno4 lladdr 36:30:29:82:18:4a STALE
10.10.10.254 dev eno4 lladdr 9a:49:a2:00:b3:55 STALE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.10.21 dev vmbr0 lladdr 14:18:77:45:e8:95 STALE
10.10.10.13 dev eno2 lladdr c8:1f:66:db:32:c8 STALE
10.10.62.51 dev vmbr0 lladdr 14:18:77:45:e8:93 STALE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.100.254 dev vmbr0 lladdr 90:09:d0:1a:a1:2e STALE
10.10.62.36 dev eno4 lladdr 92:1b:d0:45:20:64 STALE
10.10.10.22 dev vmbr0 lladdr 44:a8:42:36:80:fa STALE
10.10.10.13 dev vmbr0 lladdr c8:1f:66:db:32:c8 STALE
10.10.10.21 dev eno2 lladdr 14:18:77:45:e8:95 STALE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.52 dev vmbr0 lladdr 44:a8:42:36:80:f8 STALE
10.10.62.34 dev vmbr0 lladdr 36:30:29:82:18:4a STALE
10.10.62.51 dev eno4 lladdr 14:18:77:45:e8:93 STALE
10.10.62.44 dev eno4 lladdr 14:18:77:2b:7a:70 STALE

root@pve3:~# ip neigh
10.10.10.21 dev eno2 lladdr 14:18:77:45:e8:95 STALE
10.10.62.52 dev vmbr0 lladdr 44:a8:42:36:80:f8 STALE
10.10.62.34 dev eno4 lladdr 36:30:29:82:18:4a STALE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f7 STALE
10.10.10.22 dev eno2 lladdr 44:a8:42:36:80:fa STALE
10.10.10.22 dev eno4 lladdr 44:a8:42:36:80:fa STALE
10.10.11.14 dev vmbr0 lladdr 14:18:77:2b:7a:74 STALE
116.202.62.34 dev vmbr0 lladdr 46:ad:fd:6f:15:d8 STALE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.10.21 dev eno4 lladdr 14:18:77:45:e8:95 STALE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.52 dev eno4 lladdr 44:a8:42:36:80:f8 STALE
10.10.62.42 dev vmbr0 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.10.21 dev vmbr0 lladdr 14:18:77:45:e8:95 STALE
10.10.62.51 dev eno4 lladdr 14:18:77:45:e8:93 STALE
10.10.10.22 dev vmbr0 lladdr 44:a8:42:36:80:fa STALE
116.202.62.34 dev eno4 lladdr 46:ad:fd:6f:15:d8 STALE
10.10.62.44 dev vmbr0 lladdr 14:18:77:2b:7a:70 STALE
10.10.10.12 dev eno2 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.10.254 dev eno2 lladdr 9a:49:a2:00:b3:55 STALE
10.10.62.45 dev vmbr0 lladdr 00:11:32:ec:7d:33 STALE
10.10.100.254 dev vmbr0 lladdr 90:09:d0:1a:a1:2e STALE
10.10.10.254 dev eno4 lladdr 9a:49:a2:00:b3:55 STALE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.10.10 dev vmbr0 lladdr a0:ce:c8:69:65:9e STALE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.45 dev eno4 lladdr 00:11:32:ec:7d:33 STALE
10.10.10.12 dev eno4 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.10.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.34 dev vmbr0 lladdr 36:30:29:82:18:4a STALE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.62.44 dev eno4 lladdr 14:18:77:2b:7a:70 STALE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc DELAY
10.10.100.254 dev eno4 lladdr 90:09:d0:1a:a1:2e STALE
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 REACHABLE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 DELAY
10.10.62.42 dev eno4 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.62.36 dev vmbr0 lladdr 92:1b:d0:45:20:64 STALE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.62.36 dev eno4 lladdr 92:1b:d0:45:20:64 STALE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.62.51 dev vmbr0 lladdr 14:18:77:45:e8:93 STALE

root@pve4:~# ip neigh
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.62.42 dev eno4 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.10.22 dev vmbr0 lladdr 44:a8:42:36:80:fa DELAY
10.10.62.43 dev eno4 lladdr c8:1f:66:db:32:c6 STALE
10.10.10.12 dev eno4 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.10.13 dev eno4 lladdr c8:1f:66:db:32:c8 STALE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.62.45 dev eno4 lladdr 00:11:32:ec:7d:33 STALE
10.10.10.21 dev vmbr0 lladdr 14:18:77:45:e8:95 DELAY
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.45 dev vmbr0 lladdr 00:11:32:ec:7d:33 STALE
10.10.62.34 dev vmbr0 lladdr 36:30:29:82:18:4a STALE
10.10.62.51 dev vmbr0 lladdr 14:18:77:45:e8:93 STALE
10.10.10.254 dev eno2 lladdr 9a:49:a2:00:b3:55 STALE
10.10.100.254 dev vmbr0 lladdr 90:09:d0:1a:a1:2e STALE
10.10.10.10 dev vmbr0 lladdr a0:ce:c8:69:65:9e STALE
10.10.10.254 dev eno4 lladdr 9a:49:a2:00:b3:55 STALE
10.10.10.22 dev eno2 lladdr 44:a8:42:36:80:fa STALE
116.202.62.34 dev eno4 lladdr 46:ad:fd:6f:15:d8 STALE
10.10.62.34 dev eno4 lladdr 36:30:29:82:18:4a STALE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.62.36 dev eno4 lladdr 92:1b:d0:45:20:64 STALE
10.10.62.51 dev eno4 lladdr 14:18:77:45:e8:93 STALE
10.10.62.52 dev vmbr0 lladdr 44:a8:42:36:80:f8 STALE
10.10.62.36 dev vmbr0 lladdr 92:1b:d0:45:20:64 STALE
10.10.62.52 dev eno4 lladdr 44:a8:42:36:80:f8 STALE
10.10.10.21 dev eno4 lladdr 14:18:77:45:e8:95 STALE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
116.202.62.34 dev vmbr0 lladdr 46:ad:fd:6f:15:d8 STALE
10.10.10.22 dev eno4 lladdr 44:a8:42:36:80:fa STALE
10.10.10.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f5 DELAY
10.10.10.13 dev eno2 lladdr c8:1f:66:db:32:c8 STALE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.62.42 dev vmbr0 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.10.13 dev vmbr0 lladdr c8:1f:66:db:32:c8 DELAY
10.10.10.12 dev eno2 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.11.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f7 STALE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.62.43 dev vmbr0 lladdr c8:1f:66:db:32:c6 STALE
10.10.100.254 dev eno4 lladdr 90:09:d0:1a:a1:2e STALE
10.10.11.13 dev vmbr0 lladdr c8:1f:66:db:32:ca STALE

root@pvs1:~# ip neigh
10.10.10.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 STALE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.10.254 dev eno4 lladdr 9a:49:a2:00:b3:55 STALE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a STALE
10.10.62.42 dev eno4 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.11.13 dev eno2 lladdr c8:1f:66:db:32:ca STALE
10.10.11.22 dev vmbr0 lladdr 44:a8:42:36:80:fc STALE
10.10.62.34 dev vmbr0 lladdr 36:30:29:82:18:4a STALE
10.10.62.52 dev vmbr0 lladdr 44:a8:42:36:80:f8 STALE
10.10.11.22 dev eno2 lladdr 44:a8:42:36:80:fc STALE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.10.13 dev vmbr0 lladdr c8:1f:66:db:32:c8 STALE
10.10.10.22 dev vmbr0 lladdr 44:a8:42:36:80:fa STALE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.62.43 dev eno4 lladdr c8:1f:66:db:32:c6 STALE
10.10.10.254 dev eno2 lladdr 9a:49:a2:00:b3:55 STALE
10.10.62.44 dev eno4 lladdr 14:18:77:2b:7a:70 STALE
10.10.11.14 dev vmbr0 lladdr 14:18:77:2b:7a:74 STALE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.44 dev vmbr0 lladdr 14:18:77:2b:7a:70 STALE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.11.12 dev eno2 lladdr c8:1f:66:d9:c9:f7 STALE
10.10.62.34 dev eno4 lladdr 36:30:29:82:18:4a STALE
10.10.11.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f7 STALE
10.10.62.42 dev vmbr0 lladdr c8:1f:66:d9:c9:f3 STALE
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 REACHABLE
10.10.11.14 dev eno2 lladdr 14:18:77:2b:7a:74 STALE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.62.52 dev eno4 lladdr 44:a8:42:36:80:f8 STALE

root@pvs2:~# ip neigh
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a DELAY
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.10.13 dev vmbr0 lladdr c8:1f:66:db:32:c8 STALE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.10.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f5 STALE
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 STALE
10.10.11.13 dev vmbr0 lladdr c8:1f:66:db:32:ca STALE
10.10.11.12 dev vmbr0 lladdr c8:1f:66:d9:c9:f7 STALE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.11.14 dev vmbr0 lladdr 14:18:77:2b:7a:74 STALE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.10.254 dev eno4 lladdr 9a:49:a2:00:b3:55 STALE
10.10.10.21 dev eno2 lladdr 14:18:77:45:e8:95 STALE
10.10.62.51 dev vmbr0 lladdr 14:18:77:45:e8:93 STALE
10.10.62.36 dev vmbr0 lladdr 92:1b:d0:45:20:64 STALE
10.10.62.34 dev vmbr0 lladdr 36:30:29:82:18:4a STALE
10.10.62.44 dev vmbr0 lladdr 14:18:77:2b:7a:70 STALE
10.10.62.34 dev eno4 lladdr 36:30:29:82:18:4a STALE
10.10.62.45 dev vmbr0 lladdr 00:11:32:ec:7d:33 STALE
10.10.62.36 dev eno4 lladdr 92:1b:d0:45:20:64 STALE
10.10.10.21 dev vmbr0 lladdr 14:18:77:45:e8:95 STALE
10.10.62.43 dev vmbr0 lladdr c8:1f:66:db:32:c6 STALE
10.10.62.43 dev eno4 lladdr c8:1f:66:db:32:c6 STALE
10.10.62.45 dev eno4 lladdr 00:11:32:ec:7d:33 STALE
10.10.11.21 dev vmbr0 lladdr 14:18:77:45:e8:97 STALE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.62.44 dev eno4 lladdr 14:18:77:2b:7a:70 STALE
10.10.10.21 dev eno4 lladdr 14:18:77:45:e8:95 STALE
10.10.10.254 dev eno2 lladdr 9a:49:a2:00:b3:55 STALE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.62.51 dev eno4 lladdr 14:18:77:45:e8:93 STALE

(Habe hier nur IPv4 kopiert, darunter folgen jeweils noch IPv6-Einträge)
 
Ich habe den `ip neigh` Output genommen, alles entfernt außer `REACHABLE` [0] und dann sortiert.
Hier sieht man, dass jeweils die 10.10.10.0/24 Range auf vmbr0 beschränkt ist, 10.10.11.0/24 auf eno4 und 10.10.62.0/24 auf eno2.
Code:
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 REACHABLE
10.10.10.14 dev vmbr0 lladdr 14:18:77:2b:7a:72 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.10.254 dev vmbr0 lladdr 9a:49:a2:00:b3:55 REACHABLE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.12 dev eno4 lladdr c8:1f:66:d9:c9:f7 REACHABLE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.11.13 dev eno4 lladdr c8:1f:66:db:32:ca REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.11.14 dev eno4 lladdr 14:18:77:2b:7a:74 REACHABLE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.11.21 dev eno4 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.11.22 dev eno4 lladdr 44:a8:42:36:80:fc REACHABLE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.62.34 dev eno2 lladdr 36:30:29:82:18:4a REACHABLE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.62.42 dev eno2 lladdr c8:1f:66:d9:c9:f3 REACHABLE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.62.43 dev eno2 lladdr c8:1f:66:db:32:c6 REACHABLE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.44 dev eno2 lladdr 14:18:77:2b:7a:70 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.45 dev eno2 lladdr 00:11:32:ec:7d:33 REACHABLE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:93 REACHABLE
10.10.62.51 dev eno2 lladdr 14:18:77:45:e8:97 REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE
10.10.62.52 dev eno2 lladdr 44:a8:42:36:80:f8 REACHABLE

Sieht also gut aus.


[0] `man ip-neighbour`
 
Welcher Kernel läuft denn auf dem Server?
Wurde dieser kurz bevor die Probleme begannen eventuell upgedated?
 
Welcher Kernel läuft denn auf dem Server?
Wurde dieser kurz bevor die Probleme begannen eventuell upgedated?
pve-manager/7.3-3/c3928077 (running kernel: 5.15.74-1-pve) – bin nicht sicher, wann dieser zuletzt aktualisiert wurde.

Ich habe nun den Befehl aus dem verlinkten Thread verwendet (net.ipv4.conf.all.arp_ignore=2), könnte das die dauerhafte Lösung des Problems sein?
 
Wenn man folgendem trauen kann, dann wäre je nach Setup eventuell `1` die bessere Wahl: https://sysctl-explorer.net/net/ipv4/arp_ignore/
Falls über mehrere Subnets gerouted wird im Netzwerk, kann es bei `2` zu Problemen kommen, da nur geantwortet wird, wenn beide Seiten im selben Subnet sind.
 
  • Like
Reactions: herzkerl
Kurzes Update: Ich hatte die Konfiguration damals ja nur zur Laufzeit geändert. Nun traten aber selbst nach einigen Neustarts (mit default setting arp_ignore=0) keine Probleme mehr auf. Somit scheint das nicht ursächlich gewesen zu sein :)
 
  • Like
Reactions: mira

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!