mpex Techblog

Pacemaker – Problem: Nodes sehen sich nicht mehr, beide haben alle Ressourcen aktiv (ggf. Split Brain)

Es erscheint eine Fehlermeldung, dass sich die Nodes nicht mehr sehen – sie werden gegenseitig als "offline" angezeigt – obwohl bei beiden ggf. alle Ressourcen aktiviert sind (ggf. Split Brain).

Problem

Diagnose 1

• Im Log erscheint evtl.
  Apr 16 22:28:46 node1 heartbeat: [2646]: CRIT: Cluster node node2 returning after partition. Apr 16 22:28:46 node1 heartbeat: [2646]: info: For information on cluster partitions, See URL: http://linux-ha.org/wiki/Split_Brain Apr 16 22:28:46 node1 heartbeat: [2646]: WARN: Deadtime value may be too small. Apr 16 22:28:46 node1 heartbeat: [2646]: info: See FAQ for information on tuning deadtime. Apr 16 22:28:46 node1 heartbeat: [2646]: info: URL: http://linux-ha.org/wiki/FAQ#Heavy_Load Apr 16 22:28:46 node1 heartbeat: [2646]: WARN: Late heartbeat: Node node2: interval 32010 ms Apr 16 22:28:46 node1 heartbeat: [2646]: info: Status update for node node2: status active

Diagnose 2

• Auf beiden Systemen ausführen, um festzustellen, wie die Verbindung aufgebaut ist:
  cat /etc/ha.d/ha.cf | grep mcast
• Wenn DRBD im Einsatz ist, feststellen, ob DRBD im Split-Brain ist:
  cat /proc/drbd ; drbd-overview

• Ist das Interface in /etc/heartbeat/ha.cf bzw. /etc/corosync/corosync.conf auf beiden Seiten noch korrekt?
• Wird auf beiden Interfaces Traffic korrekt übertragen?
  • Wurde evtl. (aus Versehen) auf dem Switch die VLAN Zuordnung geändert?
  • Ist eine der Netzwerkkarten der Nodes kaputt?
  • Ist das Kabel defekt?
• Blockt eine dazwischenliegende Firewall evtl. Traffic?
• Sind dazwischenliegende Switches evtl. ausgefallen? (Hinweis: Diesen Zustand wollen wir eigentlich nicht. Wir wollen direkte Kabelverbindungen für Pacemaker!)
  • Auch wenn die Switches wieder da sind, können sie Pacemaker im Split-Brain zurücklassen!
• Bei anhaltendem Problem auf geteiltem Interface: Eine direkte Verbindung mit Crossoverkabel versuchen.

Diagnose 3

• Ping zwischen den beiden Instanzen durchführen, auf dem Interface, das für Pacemaker zuständig ist, wie bereits in Punkt 2 herausgefunden wurde.

Lösung

• <!> Achtung: Wenn DRBD im Einsatz ist, dann wird höchstwahrscheinlich DRBD danach weiterhin im Split-Brain Zustand sein. Dann zunächst diesen Zustand in DRBD auflösen.
  • Hierfür am besten einen Node in Standby versetzen und als DRBD-Secondary aufbauen.
• Zum Auflösen von Split-Brain Zustand, wenn sich die Nodes wieder erreichen: Pacemaker bzw. Heartbeat auf inaktivem Knoten durchstarten.
  /etc/init.d/heartbeat restart # - oder mit corosync! - /etc/init.d/pacemaker restart

Bacula – Problem: Fehlermeldung bei Restore/Wiederherstellung

Bei der Wiederherstellung eines Backups kommt es zur folgenden Fehlermeldung: 'Selection list for "FileSet" is empty!'

Bacula – Problem: Fehlermeldung beim Versuch Bacula Backup zu erstellen

Bei dem Versuch, ein Bacula Backup zu erstellen kommt es zu einem Fehler: "Fatal error: Authorization problem: Remote server requires TLS".