Zum Inhalt springen
Trainingslager IT-Trainingslager

Tag 15: Wettkampf

Ziel: Fünf Störungen finden und beheben, jede beim Testen dieses Buchs wirklich passiert. · Dauer: ca. 120 min · Voraussetzung: Tag 0–14

Spielregeln

  • Jede Runde beginnt mit einer Lage: Was ist passiert, was meldet das Team? Die Befehle unter „Lage“ bauen die Störung nach.
  • Du findest die Ursache mit den Werkzeugen aus dem Buch: virsh domifaddr, virt-cat, das Journal, /var/log/libvirt/qemu, bridge link. Erst dann reparierst du.
  • Für jede Runde gibt es einen Hinweis. Lies ihn erst, wenn du zehn Minuten nicht weiterkommst.
  • Zähl die Runden, die du ohne Hinweis schaffst.

Runde 1: Der Klon ohne Netz

Lage: Ein Kollege braucht schnell eine zweite VM wie zug und klont sie:

virsh shutdown zug

Wenn zug aus ist:

virt-clone --original zug --name zug2 --auto-clone
virsh start zug2

Er meldet: „zug2 läuft, hat aber keine Adresse.“

sleep 60
virsh domifaddr zug2

Erwartet:

 Name       MAC address          Protocol     Address
-------------------------------------------------------------------------------

Zeitlimit: 20 min

Hinweis: Schau in die netplan-Datei des Klons, ohne dich anzumelden.

Lösung

sudo virt-cat -d zug2 /etc/netplan/50-cloud-init.yaml

Erwartet:

network:
  version: 2
  ethernets:
    enp1s0:
      match:
        macaddress: "52:54:00:e3:36:57"
      dhcp4: true
      dhcp6: true
      set-name: "enp1s0"

Die Datei sucht die MAC von zug. zug2 hat eine neue, also richtet niemand die Karte ein. Die Reparatur ist die aus Tag 5:

virsh destroy zug2
cd ~/kvm-lab/tag05
sudo virt-sysprep -d zug2 \
  --operations machine-id,ssh-hostkeys,customize \
  --hostname zug2 \
  --run-command "cloud-init clean" \
  --run-command "ssh-keygen -A" \
  --upload netz.yaml:/etc/netplan/50-cloud-init.yaml \
  --chmod 0600:/etc/netplan/50-cloud-init.yaml
virsh start zug2
sleep 60
virsh domifaddr zug2

Erwartet (gekürzt):

…
 vnet43     52:54:00:c7:ce:1e    ipv4         192.168.122.169/24
ssh ubuntu@zug2 hostname

Erwartet: zug2. Aufräumen:

virsh destroy zug2
virsh undefine zug2 --remove-all-storage

Fortschritt speichern? Kostenlos registrieren

Runde 2: Die Datenbank fehlt nach dem Neustart

Lage: Ein Kollege fand eine Unit mit seltsamem Namen und hat sie abgeschaltet:

sudo systemctl disable kvm-lvm-loop.service
sudo systemctl reboot

Nach dem Neustart meldet das Team auf kvm2:

curl -s -m10 172.16.0.81:8080/notes; echo

Erwartet:

{"error":"storage"}

Oder gar keine Antwort, solange notes noch startet.

Zeitlimit: 20 min

Hinweis: Welche VM fehlt, und was sagt libvirtd beim Autostart?

Lösung

virsh list --all | grep -E "db|notes"
sudo journalctl -b -u libvirtd --no-pager | grep -i autostart

Erwartet (gekürzt):

 1    notes    running
 -    db       shut off
… Failed to autostart storage pool 'vgkvm': unsupported configuration: cannot find logical volume group name 'vgkvm'
… Failed to autostart VM 'db': Cannot access storage file '/dev/vgkvm/db-daten': No such file or directory

Die Volume-Group fehlt, weil das Loop-Gerät fehlt (Tag 8). Die Unit wieder einschalten, dann Pool und VM:

systemctl is-enabled kvm-lvm-loop.service
sudo systemctl enable --now kvm-lvm-loop.service
virsh pool-start vgkvm
virsh start db

Erwartet:

disabled
Created symlink /etc/systemd/system/multi-user.target.wants/kvm-lvm-loop.service → /etc/systemd/system/kvm-lvm-loop.service.
Pool vgkvm started

Domain 'db' started

Nach einer Minute antwortet notes auf kvm2 wieder mit der Notiz Hallo KVM.

Ausprobiert: Das Herunterfahren dauerte bei diesem Neustart Minuten. Im Journal des vorigen Boots (journalctl -b -1) stand nfs: server 172.16.0.182 not responding, still trying. kvm1 hängt seinen eigenen NFS-Export ein (Tag 5), und beim Herunterfahren endet der NFS-Server vor dem Aushängen.

Fortschritt speichern? Kostenlos registrieren

Runde 3: Die Migration bricht ab

Lage: Auf kvm2 hat jemand /etc/hosts „aufgeräumt“:

sudo sed -i "/^172.16.0.182 kvm1$/d" /etc/hosts

Jetzt soll wander von kvm2 zurück nach kvm1. Auf kvm2:

virsh -c qemu:///system migrate --live --persistent --undefinesource \
  wander qemu+ssh://kvm1/system

Erwartet:

error: Unable to resolve address 'kvm1' service '49152': Name or service not known

ssh kvm1 funktioniert aber.

Zeitlimit: 20 min

Hinweis: Wer löst den Namen für SSH auf, und wer für den Datenkanal?

Lösung

ssh kvm1 liest ~/.ssh/config. Den RAM schickt QEMU direkt an den Hostnamen des Ziels, und den muss das System auflösen (Tag 12, Drill 4):

getent hosts kvm1
echo "172.16.0.182 kvm1" | sudo tee -a /etc/hosts
virsh -c qemu:///system migrate --live --persistent --undefinesource \
  wander qemu+ssh://kvm1/system
virsh -c qemu:///system list --all

Erwartet: getent gibt nichts aus, die Migration läuft ohne Meldung durch, und die Liste auf kvm2 ist leer.

Fortschritt speichern? Kostenlos registrieren

Runde 4: Kein Snapshot von web1

Lage: Vor einem Update soll web1 einen Snapshot bekommen:

virsh snapshot-create-as web1 vor-test

Erwartet:

error: Requested operation is not valid: cannot migrate domain: Migration disabled: vhost-user backend lacks VHOST_USER_PROTOCOL_F_LOG_SHMFD feature.

Wer will hier migrieren?

Zeitlimit: 20 min

Hinweis: Was hat web1 seit Tag 9, das die anderen VMs nicht haben? Und welche Art Snapshot braucht keinen RAM-Inhalt?

Lösung

Ein Snapshot mit RAM nutzt die Migrationstechnik von QEMU, und virtiofsd kann dabei nicht mitspielen. Ein Disk-only-Snapshot speichert keinen RAM:

virsh snapshot-create-as web1 vor-test --disk-only --atomic \
  --diskspec vda,snapshot=external --diskspec vdb,snapshot=no
virsh snapshot-list web1

Erwartet:

Domain snapshot vor-test created
 Name       Creation Time               State
-------------------------------------------------------
 vor-test   2026-11-13 17:43:44 +0000   disk-snapshot

Nach dem Update wird zusammengeführt und aufgeräumt wie in Tag 8:

virsh blockcommit web1 vda --active --shallow --pivot
virsh snapshot-delete web1 vor-test --metadata
virsh pool-refresh default
virsh vol-delete web1.vor-test --pool default

Erwartet (gekürzt):

Successfully pivoted
Domain snapshot vor-test deleted
…
Vol web1.vor-test deleted

Ein Zurück gibt es bei Disk-only-Snapshots nur von Hand. Wer das braucht, nimmt virtiofs für das Update kurz heraus.

Fortschritt speichern? Kostenlos registrieren

Runde 5: notes hängt nach einem Netz-Neustart

Lage: Jemand wollte das Netz intern „kurz neu laden“:

virsh net-destroy intern
virsh net-start intern

Seitdem hängt notes, aufgerufen von kvm2:

curl -s -m5 172.16.0.81:8080/notes; echo

Erwartet: eine leere Zeile nach fünf Sekunden.

Zeitlimit: 20 min

Hinweis: Das Netz läuft wieder. Hängen die VMs noch daran?

Lösung

virsh domiflist db
ip -br link show vnet0
bridge link show | grep virbr1

Erwartet (dein vnet weicht ab):

 Interface   Type      Source   Model    MAC
------------------------------------------------------------
 vnet0       network   intern   virtio   52:54:00:10:10:20

vnet0            UNKNOWN        fe:54:00:10:10:20 <BROADCAST,MULTICAST,UP,LOWER_UP> 

Die Karte existiert, aber bridge link zeigt nichts. net-destroy hat virbr1 gelöscht, und die neue Bridge kennt die alten vnet-Geräte (Tap-Geräte der VMs) nicht. Beim Start verbindet libvirtd alle Netzkarten neu:

sudo systemctl restart libvirtd
bridge link show | grep virbr1

Erwartet:

6: vnet0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 master virbr1 state listening priority 32 cost 2 
8: vnet2: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 master virbr1 state listening priority 32 cost 2 
24: vnet18: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 master virbr1 state listening priority 32 cost 2 

Einige Sekunden später steht state forwarding da, und notes antwortet wieder. Die VMs selbst haben nichts gemerkt (Tag 14, Drill 5). Ein Netz „neu laden“ heißt bei libvirt net-update (Tag 6), nie net-destroy.

Fortschritt speichern? Kostenlos registrieren

Auswertung

Runden ohne Hinweis Einschätzung
5 Du betreibst KVM-Hosts.
3–4 Solide, die Lücken kennst du jetzt.
0–2 Lies die genannten Tage noch einmal und spiel die Runden erneut.

Jede dieser Störungen ist beim Schreiben dieses Buchs wirklich aufgetreten. Die Ursachen hatten nie etwas mit KVM selbst zu tun. Es ging um Identität im Gast, Abläufe beim Booten, Namensauflösung, Zusatzgeräte und Netze. Genau dort liegt die Arbeit im Betrieb.