Doppelte machine-id nach VPS-Klon beheben
Geklonte VPS mit derselben /etc/machine-id können um DHCP-Leases konkurrieren. Leeren, neu erzeugen und vor dem Golden-Image-Snapshot abschneiden.
Was /etc/machine-id ist und warum ein Duplikat relevant ist
Ein geklonter VPS startet mit derselben /etc/machine-id wie der Server, von dem er geklont wurde. Dieser Wert darf jedoch nur zu genau einer Installation gehören. Die Korrektur besteht aus vier Befehlen: Datei leeren, die D-Bus-Kopie entfernen, falls es sich um eine echte Datei handelt, die ID neu erzeugen und das System neu starten. Den Neustart überspringen viele. Er sorgt jedoch dafür, dass die Änderung wirksam wird.
/etc/machine-id enthält eine mit einem Zeilenumbruch abgeschlossene hexadezimale Zeichenfolge mit 32 Kleinbuchstaben und -ziffern. Decodiert entspricht sie einem 16 Byte (128 Bit) langen Wert. Die Handbuchseite zu machine-id(5) bezeichnet diesen Wert als vertraulich. Sie weist darauf hin, dass er nicht über das Netzwerk offengelegt werden darf, weil jedes System, das ihn ausliest, Ihren Rechner später wiedererkennen kann. Der Wert wird bei der Installation des Systems einmalig geschrieben. Danach wird er nicht mehr geändert.
Hier werden drei Kennungen häufig verwechselt. Daher sollten sie getrennt betrachtet werden. Der Hostname ist eine Bezeichnung, die Sie selbst festlegen und jederzeit ändern können. Die DMI-Produkt-UUID (Desktop Management Interface) in /sys/class/dmi/id/product_uuid wird vom Hypervisor bereitgestellt und kann nur von root gelesen werden. Die Machine-ID ist die dritte Kennung: Das Betriebssystem erzeugt sie, und jeder Benutzer auf dem Rechner kann sie lesen.
Was tatsächlich die Machine-ID ausliest
Die DHCP-Clientkennung. Das ist der problematische Fall. ClientIdentifier= im Abschnitt [DHCPv4] einer .network-Datei greift auf den in networkd.conf(5) gesetzten Wert zurück, der standardmäßig duid lautet: eine RFC-4361-Client-ID, die aus einer IAID und einer DUID (DHCP Unique Identifier) aufgebaut wird. networkd.conf(5) dokumentiert den DUID-Standardtyp als vendor. Dabei wird der DUID-Wert mit 43793 als Herstellerkennung (systemd) und aus gehashten Inhalten der Machine-ID erzeugt. DHCPv6 verwendet dieselbe DUID. Zwei Klone mit derselben Machine-ID erzeugen dieselbe DUID. Wenn sie außerdem denselben Namen für das Netzwerkinterface behalten haben, senden sie eine bytegleiche Clientkennung. Der DHCP-Server erkennt dann einen Client statt zwei Clients und bietet beiden Systemen dieselbe Lease an. Das zeigt sich daran, dass eine Adresse zwischen den beiden Servern wechselt oder ein Server seine Adresse verliert, sobald der andere die Lease erneuert.
journald. Journaldateien liegen in /var/log/journal/<machine-id>/. Das Verzeichnis trägt wörtlich den Namen der ID. Wenn Sie die Journals zweier Klone an einen Collector senden, landen sie unter einem Verzeichnis und werden als ein Host gelesen.
D-Bus. /var/lib/dbus/machine-id ist der Ausgangspunkt dieses Dateiformats. Unter Debian und Ubuntu ist es ein Symlink auf /etc/machine-id. Auf einigen Systemen handelt es sich um eine separate reguläre Datei mit einer eigenen Kopie. Diese Kopie ist der kritische Punkt im folgenden Verfahren.
Hostbezogene Agents. Monitoring-Agents, Lizenzprüfungen, Inventarisierungstools und Backup-Clients verwenden häufig standardmäßig die Machine-ID als Hostkennung, weil sie stabil ist und keine Konfiguration benötigt. Wenn zwei Server eine Identität melden, entsteht entweder eine zusammengeführte Metrikreihe oder ein Lizenzplatz deckt zwei Systeme ab. Prüfen Sie, wie Ihr Agent seine Host-ID ableitet, anstatt davon auszugehen, dass er den Hostnamen verwendet.
So erkennen Sie, ob ein Duplikat vorliegt
Führen Sie den Befehl auf beiden Servern aus und vergleichen Sie die Ausgabe.
cat /etc/machine-id
ls -l /var/lib/dbus/machine-id
sudo cat /sys/class/dmi/id/product_uuidIdentische Machine IDs auf zwei aktiven Servern bedeuten, dass einer der Server aus dem anderen geklont wurde. hostnamectl gibt denselben Wert in seiner Zeile Machine ID: aus, wenn Sie einen einzelnen Befehl bevorzugen.
Das Ergebnis von ls -l bestimmt den nächsten Schritt. Ein Symlink sieht so aus:
lrwxrwxrwx 1 root root 15 Aug 21 09:12 /var/lib/dbus/machine-id -> /etc/machine-idEine mit -rw-r--r-- beginnende Zeile bedeutet, dass es sich um eine echte Datei mit einer eigenen Kopie der alten ID handelt. Sie müssen diese Datei entfernen, weil systemd-machine-id-setup sie liest, bevor der Hypervisor-UUID oder der Zufallsgenerator berücksichtigt wird.
Auch die Product UUID ist relevant. systemd-machine-id-setup(1) verwendet zuerst die KVM-UUID und greift erst danach auf die zufällige Generierung zurück. Wenn Ihr Provider beiden Klonen dieselbe SMBIOS-UUID (System-Management-BIOS-UUID) zugewiesen hat, erzeugt die Regenerierung daher zweimal dieselbe Machine ID. Unterschiedliche Product UUIDs auf den beiden Systemen bedeuten, dass Sie sich darüber keine Sorgen machen müssen.
Die Machine-ID auf einem geklonten VPS neu generieren
Die Reihenfolge ist wichtig. systemd-machine-id-setup(1) legt fest, dass eine bereits gültige D-Bus-Machine-ID des Systems kopiert und zur Initialisierung von /etc/machine-id verwendet wird. Lassen Sie eine echte /var/lib/dbus/machine-id bestehen, generieren Sie genau den Wert neu, den Sie eigentlich entfernen wollten.
sudo truncate -s 0 /etc/machine-id
sudo rm -f /var/lib/dbus/machine-id # only if ls -l showed a real file
sudo systemd-machine-id-setup
sudo ln -sf /etc/machine-id /var/lib/dbus/machine-id
cat /etc/machine-idDas vorherige Leeren ist erforderlich, weil das Tool nur aktiv wird, wenn die Datei fehlt oder leer ist. Bei einer Datei, die bereits eine gültige ID enthält, führt es keine Aktion aus. systemd-machine-id-setup gibt auf der Standardfehlerausgabe aus, was ausgeführt wurde. Auf einem KVM-VPS mit systemd 258 oder höher sehen Sie normalerweise:
Initializing machine ID from SMBIOS/DMI UUID.systemd 255 bezeichnet denselben Schritt als Initializing machine ID from VM UUID.. Initializing machine ID from random generator. ist die Meldung, wenn keine Hypervisor-UUID verfügbar ist. Beide Ergebnisse sind in Ordnung, solange cat /etc/machine-id jetzt einen anderen Wert als auf dem anderen Server ausgibt.
Der symbolische Link sorgt dafür, dass D-Bus und systemd denselben Wert verwenden. Wenn Sie stattdessen eine separate echte Datei bevorzugen, führen Sie sudo dbus-uuidgen --ensure aus. Der Befehl erstellt die Datei mit einer neuen UUID, wenn sie nicht vorhanden ist. Wenn dbus nicht installiert ist, gibt es überhaupt kein Verzeichnis /var/lib/dbus. ln schlägt dann mit No such file or directory fehl, und Sie können beide Zeilen überspringen.
Starten Sie das System anschließend neu.
sudo rebootWarum der Reboot nicht optional ist
Jeder Prozess, der den alten Wert bereits gelesen hat, verwendet ihn weiterhin. sd_id128_get_machine() speichert die ID im aufrufenden Prozess zwischen. Ein laufender Daemon bemerkt daher nie, dass sich die Datei geändert hat. journald hat /var/log/journal/<old-id>/system.journal bereits geöffnet und hängt weiterhin Einträge daran an. systemd-networkd hat seine DUID beim Start ermittelt und sendet bei jeder Erneuerung weiterhin die alte Client-ID. Das ist normalerweise genau der Fehler, den Sie beheben wollten. Auch D-Bus hat seine ID beim Start gelesen. Sie können die Dienste einzeln neu starten. Dabei wird jedoch wahrscheinlich ein Dienst übersehen. Außerdem verwendet auch PID 1 weiterhin den alten Wert.
Prüfen Sie nach dem Reboot beide Seiten:
cat /etc/machine-id
ls /var/log/journal//var/log/journal/ enthält jetzt ein zweites Verzeichnis mit dem neuen ID-Wert als Namen. Neue Einträge werden dort abgelegt. Plain journalctl liest nur das Verzeichnis des aktuellen Systems. Daher ist der Verlauf vor dem Klonen in der Standardansicht nicht mehr sichtbar. Er befindet sich weiterhin auf der Festplatte: journalctl --merge liest alle Journal-Verzeichnisse einschließlich des alten. Löschen Sie das alte Verzeichnis, sobald Sie sicher sind, dass Sie diese Logs nicht mehr benötigen.
Aus diesem Grund ist ein Container auch der falsche Ort, um den Ablauf zu testen. Ein Container verwendet den Kernel des Hosts. Er kann systemd als eigenes PID 1 ausführen. Einen eigenen Kernel bootet er jedoch nie. Innerhalb eines Containers leitet systemd-machine-id-setup die ID aus der UUID des Container-Managers ab und nicht aus der Hypervisor-UUID, die ein VPS verwendet. Testen Sie den Ablauf so, wie er in der Produktion stattfindet: Klonen Sie eine VM, führen Sie die Befehle aus, starten Sie sie neu und vergleichen Sie anschließend die ID mit der des Quellsystems.
Vor dem Snapshot leeren, nicht nach dem Klonen
Einzelne Klone nacheinander zu korrigieren, funktioniert. Besser ist es, das Image zu korrigieren, weil jeder aus einem fehlerhaften Snapshot wiederhergestellte Server denselben Wert übernimmt. Führen Sie diesen Schritt als Letztes aus, bevor Sie die Vorlage herunterfahren.
sudo truncate -s 0 /etc/machine-id
sudo rm -f /var/lib/dbus/machine-id
sudo ln -s /etc/machine-id /var/lib/dbus/machine-id
sudo shutdown -h nowLeeren Sie die Datei. Löschen Sie sie nicht. machine-id(5) empfiehlt für Images, die auf mehreren Maschinen verwendet werden, eine leere Datei, weil eine vorhandene leere Datei bei schreibgeschützter Verwendung des Images durch eine temporäre Datei per Bind-Mount über der eigentlichen Datei eingehängt werden kann. Auf einem schreibgeschützten /etc liegt die beim Boot erzeugte ID in dieser temporären Datei. Sobald das Dateisystem beschreibbar ist, schreibt systemd-machine-id-setup --commit sie dauerhaft.
Ein Nebeneffekt hängt davon ab, in welchem Zustand Sie die Datei hinterlassen. machine-id(5) stellt ausdrücklich fest: Wenn /etc/machine-id vorhanden und leer ist, gilt ein Boot nicht als erster Boot. Die leere Datei oben aktiviert daher keine Units mit ConditionFirstBoot=yes. Eine fehlende Datei oder eine Datei mit der Zeichenfolge uninitialized macht den nächsten Boot dagegen zum ersten Boot. Diese Units werden ausgeführt. Außerdem wendet systemd Unit-Presets an. Prüfen Sie mit grep -rl ConditionFirstBoot /usr/lib/systemd/system/, welche Units Ihr Image ausführen würde, bevor Sie die Vorlage erstellen.
Eine Vorlage und ein Snapshot sind unterschiedliche Objekte. Dieser Unterschied entscheidet darüber, ob die Identität kopiert wird. Eine Vorlage ist ein bewusst vorbereitetes Build-Artefakt. Ein Snapshot ist dagegen eine zeitpunktbezogene Kopie eines laufenden Servers und übernimmt dessen Identität zusammen mit den Daten.
Warum Cloud-Images dies richtig machen und Ihr Snapshot nicht
Cloud-Images von Distributionen werden zum Klonen erstellt. Deshalb enthalten sie zunächst keine gesetzte machine ID, die beim ersten Boot-Vorgang eingetragen wird. cloud-init verfügt dafür über einen dokumentierten Schritt. cloud-init clean --machine-id setzt /etc/machine-id auf die Literalzeichenfolge uninitialized auf systemd-Systemen. Die CLI-Referenz von cloud-init beschreibt dies beim Klonen eines Golden Image als Best Practice. Beim nächsten Boot-Vorgang dieses Images wird dadurch eine eindeutige machine ID erzeugt.
Bei einem selbst erstellten Snapshot ist die Situation anders. Die Datei enthielt bereits einen Wert, als Sie den Snapshot erstellt haben. Deshalb übernimmt jeder daraus wiederhergestellte Server diesen Wert. Der Wiederherstellungsvorgang löscht ihn nicht. Dies ist dieselbe Problemklasse wie beim Verschieben eines laufenden Servers auf einen neuen VPS. Die Kopie ist vollständig. Die Identität ist jedoch genau der Teil, der nicht kopiert werden sollte.
Was ein Klon außerdem dupliziert
- SSH-Hostschlüssel.
/etc/ssh/ssh_host_*wird ebenfalls kopiert, daher präsentieren beide Server den Clients denselben Fingerabdruck. Löschen Sie diese Dateien und führen Siesudo ssh-keygen -Aoder unter Debian und Ubuntusudo dpkg-reconfigure openssh-serveraus. Ihre Clients warnen anschließend vor einem geänderten Hostschlüssel. Das ist das erwartete Verhalten. - Der Hostname. Setzen Sie ihn mit
sudo hostnamectl set-hostname app02und prüfen Sie anschließend, ob/etc/hostsden neuen Namen weiterhin auflöst. - Statische Netzwerkkonfiguration. Ein Klon eines Systems mit einer statischen Adresse verursacht in dem Moment einen Konflikt mit dem Original, in dem er gestartet wird. Lesen Sie
/etc/netplan/, bevor der Klon dem Netzwerk beitritt. - Die Uhrzeit. Ein wiederhergestellter Snapshot läuft mit der Uhrzeit weiter, die beim Erstellen des Snapshots gültig war. Ein großer Zeitsprung auf einem wiederhergestellten VPS verhindert die Validierung von TLS-Zertifikaten und bringt die Reihenfolge der Logs durcheinander, bis die Zeitsynchronisierung aufgeholt hat.
Arbeiten Sie auch auf dem Klon die Checkliste für die ersten zehn Minuten mit einem neuen VPS durch. Ein geklontes System übernimmt die Benutzerkonten, SSH-Schlüssel, Firewall-Regeln und geplanten Jobs des Quellsystems. Nichts davon wurde für die Aufgabe geprüft, die der Klon ausführen soll.
FAQ
Muss ich nach einer Änderung an /etc/machine-id neu starten?
Ja. Prozesse lesen die Machine-ID einmalig ein und speichern sie im Cache. Der neue Wert erreicht daher keine bereits laufenden Prozesse. journald schreibt weiterhin in das Journal-Verzeichnis, das nach der alten ID benannt ist. Der DHCP-Client sendet weiterhin eine aus dem alten Wert abgeleitete Client-ID. Das ist normalerweise der Grund für die Änderung. Das Neustarten einzelner Dienste behebt einige dieser Probleme. PID 1 enthält jedoch ebenfalls den alten Wert. Starten Sie das System neu. Bestätigen Sie die Änderung anschließend mit cat /etc/machine-id und durch einen Vergleich mit dem anderen Server.
Ist /etc/machine-id identisch mit der Hardware-UUID?
Nein. Die DMI-Produkt-UUID in /sys/class/dmi/id/product_uuid stammt vom Hypervisor und kann nur von root gelesen werden. Die Machine-ID wird vom Betriebssystem erzeugt und befindet sich in einer einfachen Datei, die jeder Benutzer lesen kann. Die Werte sind nur in eine Richtung miteinander verknüpft: Bei einem KVM-Gast verwendet systemd-machine-id-setup die Hypervisor-UUID als Ausgangswert für eine neue Machine-ID, wenn keine D-Bus-ID zum Kopieren vorhanden ist. Wenn zwei Klone dieselbe Produkt-UUID verwenden, erzeugen sie dieselbe Machine-ID. Vergleichen Sie daher auch diese Datei, bevor Sie dem Ergebnis vertrauen.
Soll ich /etc/machine-id löschen oder leer lassen?
Lassen Sie die Datei leer, wenn Sie ein Image vorbereiten. machine-id(5) bevorzugt eine leere Datei, weil systemd beim Start des Images mit einem schreibgeschützten /etc eine temporäre Datei darüber einhängen kann. Das Löschen der Datei funktioniert auf einem beschreibbaren System. Einige Klon-Skripte gehen auf diese Weise vor. Eine leere Datei ist jedoch die sicherere Standardeinstellung. cloud-init schreibt stattdessen das Wort uninitialized in die Datei. Dieser Wert bewirkt wie eine fehlende Datei, dass der nächste Start als erster Start behandelt wird. Daher werden Units mit ConditionFirstBoot=yes bei diesem Start ausgeführt. Eine leere Datei bewirkt das nicht.
Warum haben meine beiden geklonten Server dieselbe DHCP-Adresse erhalten?
Weil beide dieselbe Client-ID gesendet haben. systemd-networkd verwendet für DHCPv4 standardmäßig ClientIdentifier=duid. Die standardmäßige DUID wird aus einem Hash von /etc/machine-id erzeugt. Identische Machine-IDs führen daher bei Klonen, die außerdem denselben Schnittstellennamen beibehalten haben, zu identischen Client-IDs. Der DHCP-Server ordnet beide Anfragen anhand dieser ID demselben Client zu und vergibt eine Lease. Geben Sie jedem System eine eigene Machine-ID und starten Sie beide neu. Wenn der Server weiterhin die alte Adresse anbietet, löschen Sie die veraltete Lease direkt auf dem DHCP-Server.