Zum Inhalt springen
Trainingslager IT-Trainingslager

Tag 11: Fernsteuerung

Ziel: kvm2 zum zweiten KVM-Host machen und kvm1 von dort aus verwalten: mit virsh über SSH, mit Cockpit im Browser und mit virt-manager. · Dauer: ca. 60 min · Voraussetzung: Tag 10

Briefing

  • libvirt ist ein Dienst mit einer API. virsh muss nicht auf demselben Rechner laufen. Die URI sagt, wohin es sich verbindet.
  • qemu+ssh://benutzer@host/system tunnelt die Verbindung durch SSH. Auf dem Zielhost braucht es nur sshd und die Gruppe libvirt, keinen eigenen Port für libvirt.
  • Cockpit ist eine Weboberfläche für Linux-Server. Das Modul cockpit-machines zeigt und steuert die VMs von libvirt.
  • virt-manager ist die klassische Desktop-Anwendung. Sie spricht dieselbe URI.
 kvm2 ── ssh ──► kvm1: sshd ── virt-ssh-helper ── libvirtd
 Browser ── https :9090 ──► kvm1: cockpit ── libvirtd

Drill 1: kvm2 wird KVM-Host

Ab hier arbeitest du auf kvm2, wenn nicht anders gesagt. Dieselben Pakete wie in Tag 1 und Tag 3:

sudo apt-get update
sudo apt-get install -y qemu-system-x86 qemu-utils libvirt-daemon-system \
  libvirt-clients virtinst cpu-checker
sudo usermod -aG libvirt,kvm ubuntu
virsh --version

Erwartet (gekürzt):

…
No VM guests are running outdated hypervisor (qemu) binaries on this host.
10.0.0

Abmelden, wieder anmelden, dann:

groups
virsh -c qemu:///system list --all
kvm-ok

Erwartet:

ubuntu adm cdrom sudo dip lxd libvirt kvm
 Id   Name   State
--------------------

INFO: /dev/kvm exists
KVM acceleration can be used

kvm2 ist ein leerer KVM-Host. In Tag 12 ziehen VMs dorthin um.

Fortschritt speichern? Kostenlos registrieren

Drill 2: Ein Schlüssel für kvm1

qemu+ssh braucht eine SSH-Anmeldung ohne Passwort. kvm2 bekommt einen eigenen Schlüssel:

ssh-keygen -q -t ed25519 -N "" -f ~/.ssh/id_ed25519
cat ~/.ssh/id_ed25519.pub

Erwartet (dein Schlüssel weicht ab):

ssh-ed25519 AAAAC3NzaC1lZDI1NTE5AAAAIDbsBiKSZKSHNxa6DOLABmypNqim79lZzVFB/To+g46+ ubuntu@kvm2

Kopiere die Zeile. Auf kvm1 hängst du sie an und liest den Fingerabdruck des Hosts:

echo "ssh-ed25519 AAAAC3NzaC1lZDI1NTE5AAAAIDbsBiKSZKSHNxa6DOLABmypNqim79lZzVFB/To+g46+ ubuntu@kvm2" \
  >> ~/.ssh/authorized_keys
ssh-keygen -lf /etc/ssh/ssh_host_ed25519_key.pub

Erwartet:

256 SHA256:nSvz7tC/dH4VX26kbSXvFaelrGnwYhRZVb2Oqx+p3OI root@kvm1 (ED25519)

Zurück auf kvm2. Ein Eintrag in ~/.ssh/config spart Tipparbeit:

cat >> ~/.ssh/config <<'EOF'
Host kvm1
  HostName 172.16.0.182
  User ubuntu
EOF
ssh kvm1 hostname

Bei der ersten Verbindung fragt SSH nach dem Fingerabdruck. Stimmt er mit dem von kvm1 überein, bestätige mit yes.

Erwartet (nach der Bestätigung):

kvm1

Achtung: Ein Schlüssel ohne Passphrase auf kvm2 heißt: Wer kvm2 übernimmt, verwaltet auch alle VMs auf kvm1. Die Gruppe libvirt ist so mächtig wie root.

Fortschritt speichern? Kostenlos registrieren

Drill 3: virsh aus der Ferne

virsh -c qemu+ssh://kvm1/system list --all

Erwartet:

 Id   Name    State
------------------------
 1    db      running
 2    notes   running
 9    web1    running
 16   bench   running
 -    web2    shut off
 -    web3    shut off

Das ist die Liste von kvm1, gezeigt auf kvm2. Mit LIBVIRT_DEFAULT_URI wird kvm1 zum Standardziel dieser Shell:

export LIBVIRT_DEFAULT_URI=qemu+ssh://kvm1/system
virsh uri
virsh start web2
sleep 40
virsh domifaddr web2

Erwartet:

qemu+ssh://kvm1/system

Domain 'web2' started

 Name       MAC address          Protocol     Address
-------------------------------------------------------------------------------
 vnet17     52:54:00:1a:8d:e6    ipv4         192.168.122.141/24
 vnet18     52:54:00:3c:1c:90    ipv4         10.10.10.150/24

Jeder virsh-Befehl dieses Buchs funktioniert so, mit einer Ausnahme: Pfade wie /var/lib/libvirt/images/... beziehen sich immer auf kvm1, nicht auf kvm2.

virsh shutdown web2

Erwartet:

Domain 'web2' is being shutdown

Für die nächsten Drills setzt du die Variable zurück:

unset LIBVIRT_DEFAULT_URI

Fortschritt speichern? Kostenlos registrieren

Drill 4: Cockpit

Auf kvm1:

sudo apt-get install -y --no-install-recommends cockpit cockpit-machines
dpkg -l cockpit cockpit-machines | tail -2
ss -ltn | grep 9090

Erwartet (gekürzt):

ii  cockpit          314-1        all          Web Console for Linux servers
ii  cockpit-machines 310-1        all          Cockpit user interface for virtual machines
LISTEN 0      4096               *:9090             *:*          

--no-install-recommends lässt Pakete wie PackageKit und NetworkManager weg, die Cockpit sonst mitbringt. Bei Cockpit meldest du dich mit einem normalen Benutzer und Passwort an. Der Benutzer ubuntu aus dem Cloud-Image hat keines:

echo "ubuntu:lab-console-pw-123" | sudo chpasswd

Von kvm2 aus prüfst du die Anmeldung:

curl -sk -u ubuntu:lab-console-pw-123 https://172.16.0.182:9090/cockpit/login; echo

Erwartet (das Token weicht ab):

{"csrf-token":"3674a3bb8790a137fea5a1ea7dbf2a418d8b05e8cf153d8e4258a03471c5b2ce"}

Im Browser öffnest du https://172.16.0.182:9090, bestätigst das selbst signierte Zertifikat und meldest dich als ubuntu an. Oben steht zunächst Eingeschränkter Zugang. Für die VMs von qemu:///system klickst du darauf und wählst Administrator-Zugriff aktivieren, dann arbeitet Cockpit mit sudo-Rechten. Im Menü links führt Virtuelle Maschinen zu den VMs von kvm1, mit Start, Stopp, Konsole im Browser, Snapshots und Platten.

Achtung: Port 9090 ist jetzt im ganzen LAN offen, und ubuntu hat ein Passwort. Im Lab ist das in Ordnung. Im Betrieb gehört Cockpit hinter eine Firewall oder ein VPN.

Fortschritt speichern? Kostenlos registrieren

Drill 5: virt-manager

virt-manager ist eine grafische Anwendung und braucht einen Linux-Desktop. Dort installierst du sie mit sudo apt-get install virt-manager und verbindest dich mit:

virt-manager -c qemu+ssh://[email protected]/system

Der Schlüssel des Desktop-Rechners muss dafür wie in Drill 2 auf kvm1 stehen. virt-manager tunnelt dann auch die SPICE-Konsole aus Tag 9 durch SSH, ohne ssh -L.

Fortschritt speichern? Kostenlos registrieren

Kontrollpunkt

Auf kvm2:

virsh -c qemu+ssh://kvm1/system hostname

Erwartet: kvm1.

virsh -c qemu:///system net-list

Erwartet: das Netz default von kvm2, active.

Auf kvm1:

systemctl is-active cockpit.socket

Erwartet: active.

Challenge

Lege von kvm2 aus auf kvm1 eine VM fern an. Die cloud-init-Dateien liegen nur auf kvm2. Melde dich per SSH bei fern an und lösche die VM danach wieder.

Hinweis: virt-install kennt --connect. fern hängt im NAT-Netz von kvm1, das kvm2 nicht direkt erreicht. Schau dir ssh -J an.

Lösung

mkdir -p ~/kvm-lab/tag11
cd ~/kvm-lab/tag11
cat > user-data <<EOF
#cloud-config
users:
  - name: ubuntu
    sudo: ALL=(ALL) NOPASSWD:ALL
    shell: /bin/bash
    ssh_authorized_keys:
      - $(cat ~/.ssh/id_ed25519.pub)
EOF
cat > meta-data <<'EOF'
instance-id: fern-001
local-hostname: fern
EOF
virt-install --connect qemu+ssh://kvm1/system --name fern --osinfo ubuntu24.04 \
  --memory 768 --vcpus 1 --import \
  --disk size=10,backing_store=/var/lib/libvirt/images/basis/noble.qcow2 \
  --network network=default \
  --cloud-init user-data=user-data,meta-data=meta-data \
  --graphics none --noautoconsole

Erwartet (gekürzt):

Starting install...
Allocating 'virtinst-w6y6i1kx-cloudinit.iso'                |    0 B  00:00 ... 
Transferring 'virtinst-w6y6i1kx-cloudinit.iso'              |    0 B  00:00 ... 
Allocating 'fern.qcow2'                                     |    0 B  00:00 ... 
Creating domain...                                          |    0 B  00:00     
Domain creation completed.

Transferring zeigt, was passiert: virt-install baut die Seed-ISO auf kvm2 und lädt sie über die libvirt-API in den Pool boot-scratch auf kvm1. Der Pfad des Basis-Images dagegen muss auf kvm1 stimmen. Nach ein bis zwei Minuten:

virsh -c qemu+ssh://kvm1/system domifaddr fern

Erwartet (deine Adresse weicht ab):

 Name       MAC address          Protocol     Address
-------------------------------------------------------------------------------
 vnet19     52:54:00:a5:24:3a    ipv4         192.168.122.157/24
ssh -J kvm1 [email protected] "hostname; cloud-init status --wait | tail -1"

Erwartet (nach der Bestätigung des Hostschlüssels):

fern
status: done

-J kvm1 springt über kvm1 ins NAT-Netz. Aufräumen:

virsh -c qemu+ssh://kvm1/system destroy fern
virsh -c qemu+ssh://kvm1/system undefine fern --remove-all-storage

Erwartet:

Domain 'fern' destroyed

Domain 'fern' has been undefined
Volume 'vda'(/var/lib/libvirt/images/fern.qcow2) removed.

Fortschritt speichern? Kostenlos registrieren

Enterprise-Notiz

  • TLS statt SSH: Für Automatisierung ohne Shell-Zugänge spricht libvirt auch qemu+tls:// mit Client-Zertifikaten (Port 16514). OpenStack Nova kann das zum Beispiel für die Live-Migration nutzen.
  • Rechte feiner verteilen: Mit polkit-Regeln oder dem Zugriffs-Treiber von libvirt (access_drivers = ["polkit"]) dürfen Benutzer einzelne VMs steuern statt alle.
  • Viele Hosts: Ab einer Handvoll Hosts übernimmt eine Verwaltungsschicht: Proxmox VE, oVirt/OLVM, OpenNebula oder OpenStack. Sie alle setzen auf libvirt oder QEMU auf.
  • Cockpit zentral: Ein Cockpit kann sich per SSH mit weiteren Hosts verbinden (Hosts hinzufügen), ohne dass dort Port 9090 offen ist.