Node zum Cluster hinzufügen scheitert

[vanlueckn]

Hallo,

ich habe ein Proxmox Cluster mit bisher 2 Servern. Mit diesen beiden gibt es auch keine Probleme.

Seit einigen Tagen versuche ich jetzt einen dritten Server hinzuzufügen. Die drei Maschinen sind im selben Netz (10.33.1.0/24). In diesem Netz gibt es keine anderen Teilnehmer.

Ich habe Proxmox und Debian auf der betroffenen Maschine jetzt bereits mehrfach neuinstalliert. Jedes Mal habe ich das Problem, dass die Weboberfläche des dritten Nodes nach dem Clusterbeitritt nicht mehr erreichbar ist und der Node als offline markiert wird:

Der Log enthält einen Fehler bezüglich des Zertifikates:

service pveproxy status
● pveproxy.service - PVE API Proxy Server
     Loaded: loaded (/lib/systemd/system/pveproxy.service; enabled; vendor preset: enabled)
     Active: active (running) since Thu 2021-09-23 17:59:04 CEST; 8min ago
    Process: 1626 ExecStartPre=/usr/bin/pvecm updatecerts --silent (code=exited, status=1/FAILURE)
    Process: 1628 ExecStart=/usr/bin/pveproxy start (code=exited, status=0/SUCCESS)
   Main PID: 1630 (pveproxy)
      Tasks: 4 (limit: 77011)
     Memory: 130.7M
        CPU: 8.305s
     CGroup: /system.slice/pveproxy.service
             ├─1630 pveproxy
             ├─4540 pveproxy worker
             ├─4541 pveproxy worker
             └─4542 pveproxy worker

Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: worker 4503 finished
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: worker 4540 started
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[4540]: /etc/pve/local/pve-ssl.key: failed to load local private key (key_file or key) at /usr/share/perl5/PVE/APIServer/AnyEvent.pm line 1891.
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[4504]: worker exit
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: worker 4504 finished
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: starting 2 worker(s)
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: worker 4541 started
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[1630]: worker 4542 started
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[4541]: /etc/pve/local/pve-ssl.key: failed to load local private key (key_file or key) at /usr/share/perl5/PVE/APIServer/AnyEvent.pm line 1891.
Sep 23 18:07:32 prox3.stofficraft.de pveproxy[4542]: /etc/pve/local/pve-ssl.key: failed to load local private key (key_file or key) at /usr/share/perl5/PVE/APIServer/AnyEvent.pm line 1891.

Die corosync.conf:

logging {
  debug: off
  to_syslog: yes
}

nodelist {
  node {
    name: prox1
    nodeid: 1
    quorum_votes: 1
    ring0_addr: 10.33.1.1
  }
  node {
    name: prox2
    nodeid: 2
    quorum_votes: 1
    ring0_addr: 10.33.1.2
  }
  node {
    name: prox3
    nodeid: 3
    quorum_votes: 1
    ring0_addr: 10.33.1.3
  }
}

quorum {
  provider: corosync_votequorum
}

totem {
  cluster_name: stofficraft
  config_version: 11
  interface {
    linknumber: 0
  }
  ip_version: ipv4-6
  link_mode: passive
  secauth: on
  version: 2

Die hosts Datei:

# IPv4
127.0.0.1 localhost.localdomain localhost
10.33.1.1 prox1.stofficraft.de prox1
10.33.1.2 prox2.stofficraft.de prox2
10.33.1.3 prox3.stofficraft.de prox3

#
# IPv6
::1     ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
ff02::3 ip6-allhosts

So langsam bin ich in der Angelegenheit am verzweifeln ... die Server sind alle baugleich und bei dem Node 2 gab es keinerlei Probleme.


Beste Grüße

Nils

 

[Falk R.]

Bei dem Timeout, würde ich erst mal schauen, ob jeder Node, jeden per Name pingen kann. Ich hatte das auch einmal, als ich bei einem Host vergessen hatte den neuen in die Hosts einzutragen.

 

[vanlueckn]

Hallo,

die Hosts sind alle via ping untereinander erreichbar. Die Zuordnung in der hosts Datei stimmt auch.

 

[Falk R.]

Hast du überall die gleiche Version?

 

[vanlueckn]

Ja, überall ist die Version 7.0-11 installiert

 

[Falk R.]

Hast du zufällig den Hostnamen geändert?

 

[Falk R.]

Guck mal da: https://forum.proxmox.com/threads/e...e-or-key-at-usr-share-perl5.48943/post-296637