Zum Inhalt springen
Trainingslager IT-Trainingslager

Anhang B: Abschlussprüfung

Ziel: Das Buch ohne Anleitung anwenden: im RKE2-Cluster einen zweiten Mandanten pruefung aufbauen, betreiben und wieder abbauen, dazu ein kurzer Wissensteil. · Dauer: ca. 120 min · Voraussetzung: Tag 15

Spielregeln

  • Jede Übung nennt Anforderungen und einen Prüfblock aus einzelnen Befehlen mit erwarteter Ausgabe. Bestanden ist sie, wenn deine Ausgabe dazu passt. Die Lösung liest du erst danach.
  • Die Übungen bauen aufeinander auf und laufen in ~/k8s-lab/anhb. Der Namespace notes bleibt unberührt und läuft die ganze Zeit weiter.
  • Erlaubt sind Anhang A, kubectl explain, --help und die offizielle Doku, nicht die Tage 1–15. Die Lösungsdateien liegen in code/anhb/loesung/.
  • Bestanden hast du mit acht passenden Prüfblöcken und mindestens 8 von 10 Punkten im Wissensteil.
source ~/k8s-lab/setup/env.sh && source ~/k8s-lab/setup/rke2.env
mkdir -p "$LAB/anhb" && cd "$LAB/anhb"
cp -R "$LAB/tag15/chart" "$LAB/tag15/values-rke2.yaml" .
ls

Erwartet:

chart  values-rke2.yaml

values-rke2.yaml enthält schon deine Server-IP (Tag 15). IDs, Namen, IPs und Zeiten in den Ausgaben weichen bei dir ab.

Übung 1: Ein zweiter Mandant

Teil 1 (Tag 1, 6, 8). Schreib namespace.yaml:

  • Namespace pruefung mit Pod Security restricted (enforce und warn).
  • LimitRange defaults und ResourceQuota pruefung wie in notes, aber höchstens 10 Pods.
  • ServiceAccount für die Pods des Charts, ohne automatisch eingebundenes Token.

Prüfblock:

kubectl get ns pruefung --show-labels
kubectl -n pruefung get resourcequota,serviceaccount

Erwartet (gekürzt):

NAME       STATUS   AGE   LABELS
pruefung   Active   15s   kubernetes.io/metadata.name=pruefung,pod-security.kubernetes
.io/enforce=restricted,pod-security.kubernetes.io/warn=restricted
NAME                     REQUEST                                                 …
resourcequota/pruefung   pods: 0/10, requests.cpu: 0/2, requests.memory: 0/2Gi   …
NAME                     AGE
serviceaccount/default   15s
serviceaccount/notes     15s

Lösung

Die Vorlage ist k8s/namespace.yaml aus Tag 10, mit neuem Namen und kleinerer Quota. Der ServiceAccount heißt weiter notes, denn das Chart setzt serviceAccountName: notes fest ein:

# namespace.yaml – Anhang B, Übung 1: zweiter Mandant „pruefung"
apiVersion: v1
kind: Namespace
metadata:
  name: pruefung
  labels:
    pod-security.kubernetes.io/enforce: restricted
    pod-security.kubernetes.io/warn: restricted
---
apiVersion: v1
kind: LimitRange
metadata:
  name: defaults
  namespace: pruefung
spec:
  limits:
    - type: Container
      defaultRequest:
        cpu: 50m
        memory: 64Mi
      default:
        memory: 128Mi
---
apiVersion: v1
kind: ResourceQuota
metadata:
  name: pruefung
  namespace: pruefung
spec:
  hard:
    pods: "10"
    requests.cpu: "2"
    requests.memory: 2Gi
    limits.memory: 4Gi
---
apiVersion: v1
kind: ServiceAccount
metadata:
  name: notes
  namespace: pruefung
automountServiceAccountToken: false
kubectl apply -f namespace.yaml

Erwartet:

namespace/pruefung created
limitrange/defaults created
resourcequota/pruefung created
serviceaccount/notes created

Achtung: kubectl apply --dry-run=server scheitert hier für alle Objekte außer dem Namespace selbst: namespaces "pruefung" not found. Der Dry-Run legt den Namespace nicht wirklich an. Mit && verkettet läuft der echte apply dann nie.

Fortschritt speichern? Kostenlos registrieren

Übung 2: Eigene Secrets

Teil 1 (Tag 4, 7). Leg in pruefung die Secrets an, die das Chart erwartet, aber mit eigenen Lab-Werten: API-Key lab-api-key-456, DB-Passwort lab-db-pw-456. Ohne Datei im Repository, ohne k8s/secrets.sh.

Prüfblock:

kubectl -n pruefung get secrets
kubectl -n pruefung get secret notes-db -o jsonpath='{.data.db-url}' | base64 -d; echo

Erwartet:

NAME        TYPE     DATA   AGE
notes-api   Opaque   1      1s
notes-db    Opaque   2      1s
postgres://notes:lab-db-pw-456@db:5432/notes

Lösung

kubectl -n pruefung create secret generic notes-api \
  --from-literal=api-key=lab-api-key-456
kubectl -n pruefung create secret generic notes-db \
  --from-literal=password=lab-db-pw-456 \
  --from-literal=db-url='postgres://notes:lab-db-pw-456@db:5432/notes'

Erwartet:

secret/notes-api created
secret/notes-db created

Die Namen und Schlüssel stehen in values.yaml unter existingSecrets und in _helpers.tpl. Der Host db löst sich im eigenen Namespace auf, darum passt dieselbe URL wie in notes.

Fortschritt speichern? Kostenlos registrieren

Übung 3: notes für den Mandanten

Teil 1 und 2 (Tag 10, 13). Installier dasselbe Chart als Release notes in pruefung. Schreib dafür nur eine zusätzliche Values-Datei values-pruefung.yaml mit den Abweichungen zu values-rke2.yaml: zwei api-Repliken, 512Mi für die Datenbank, kein Gateway.

Prüfblock:

helm list -A | grep -E '^(NAME|notes)'
kubectl -n pruefung get pods
kubectl -n pruefung get pvc

Erwartet (gekürzt):

NAME    NAMESPACE   REVISION   UPDATED   STATUS     CHART         APP VERSION
notes   notes       1          2026-…    deployed   notes-0.3.0   0.2.0
notes   pruefung    1          2026-…    deployed   notes-0.3.0   0.2.0
NAME                      READY   STATUS      RESTARTS      AGE
api-76d88c5977-rplx7      1/1     Running     3 (50s ago)   51s
api-76d88c5977-zjz88      1/1     Running     3 (48s ago)   51s
db-0                      1/1     Running     0             51s
migrate-mc2qt             0/1     Completed   0             10s
web-746c476955-cxg9s      1/1     Running     0             51s
web-746c476955-kqn5n      1/1     Running     0             51s
worker-69897c6c4c-tdx5l   1/1     Running     0             51s
NAME        STATUS   VOLUME                                     CAPACITY   …
data-db-0   Bound    pvc-ecf8967f-dbde-4730-8362-2b97fad5cc25   512Mi      …

Lösung

# values-pruefung.yaml – Anhang B, Übung 3: nur die Abweichungen zu values-rke2.yaml
api:
  replicas: 2
db:
  storage: 512Mi
# Ein zweites Gateway bekäme ebenfalls NodePort 30080 – den hat notes schon.
gateway:
  enabled: false
helm -n pruefung install notes chart/notes -f values-rke2.yaml \
  -f values-pruefung.yaml --wait --timeout 5m | grep -E '^(NAMESPACE|STATUS):'
kubectl -n pruefung get resourcequota

Erwartet (gekürzt):

NAMESPACE: pruefung
STATUS: deployed
NAME       REQUEST                                                        LIMIT   …
pruefung   pods: 6/10, requests.cpu: 320m/2, requests.memory: 448Mi/2Gi   …

Mehrere -f werden der Reihe nach zusammengeführt, spätere gewinnen. Der Release-Name darf in zwei Namespaces gleich sein. Die NetworkPolicies kommen mit, nur Gateway und HTTPRoute fehlen.

Fortschritt speichern? Kostenlos registrieren

Übung 4: Zugriff ohne Gateway

Teil 1 (Tag 3). Erreiche web in pruefung vom Mac aus, ohne Service oder Gateway zu ändern. Leg die Notiz „Prüfung bestanden” an und zeig, dass notes und pruefung getrennte Daten haben.

Prüfblock:

curl -s localhost:8081/api/notes; echo
curl -s --resolve "notes.localhost:30080:$SERVER" http://notes.localhost:30080/api/notes
echo

Erwartet (gekürzt):

[{"id":"14823b5d-…","text":"Prüfung bestanden"}]
[{"id":"342a2486-…","text":"umgezogen auf RKE2"}]

Lösung

kubectl -n pruefung port-forward svc/web 8081:3000 &
curl -s localhost:8081/api/notes; echo
curl -s -X POST -H 'Content-Type: application/json' \
  -d '{"text":"Prüfung bestanden"}' localhost:8081/api/notes; echo

Erwartet (gekürzt):

Forwarding from 127.0.0.1:8081 -> 3000
…
[]
{"id":"14823b5d-…","text":"Prüfung bestanden"}

port-forward läuft über den API-Server und den kubelet direkt in den Pod. Die NetworkPolicy web-from-gateway greift dafür nicht. Beende den Tunnel danach mit kill %1.

Fortschritt speichern? Kostenlos registrieren

Übung 5: Mandanten trennen sich

Teil 1 (Tag 3, 11). Beweise mit zwei Befehlen aus einem web-Pod in pruefung: Die eigene api ist erreichbar, die api in notes nicht.

Prüfblock: die beiden Befehle der Lösung.

Lösung

kubectl -n pruefung exec deploy/web -- wget -qO- -T 3 http://api:8080/version
kubectl -n pruefung exec deploy/web -- wget -qO- -T 3 http://api.notes:8080/version

Erwartet:

0.2.0
wget: download timed out
command terminated with exit code 1

Der Kurzname api heißt: im eigenen Namespace. api.notes ist ein gültiger DNS-Name (Tag 3), aber api-from-clients in notes lässt nur Pods aus notes zu (Tag 11).

Fortschritt speichern? Kostenlos registrieren

Übung 6: Wartung ohne Ausfall

Teil 2 (Tag 14, 15). Finde den Agent, auf dem keine der beiden Datenbanken liegt, und leere ihn. Hängt der Drain, finde die Ursache und behebe sie, ohne Pods zu löschen oder --disable-eviction zu benutzen. Gib den Node danach wieder frei.

Prüfblock:

kubectl get pdb -A
kubectl get nodes

Erwartet: Kein Budget mit ALLOWED DISRUPTIONS 0, alle Nodes ohne SchedulingDisabled.

NAMESPACE   NAME   MIN AVAILABLE   MAX UNAVAILABLE   ALLOWED DISRUPTIONS   AGE
notes       api    2               N/A               1                     15m
notes       web    1               N/A               1                     15m
pruefung    api    1               N/A               1                     10m
pruefung    web    1               N/A               1                     10m
NAME          STATUS   ROLES                AGE    VERSION
rke2-agent1   Ready    <none>               109m   v1.37.1+rke2r1
rke2-agent2   Ready    <none>               109m   v1.37.1+rke2r1
rke2-server   Ready    control-plane,etcd   112m   v1.37.1+rke2r1

Lösung

c='NS:.spec.claimRef.namespace,NODE:.spec.nodeAffinity.required'
c+='.nodeSelectorTerms[0].matchExpressions[0].values[0]'
kubectl get pv -o custom-columns="$c"
kubectl drain rke2-agent1 --ignore-daemonsets --delete-emptydir-data --timeout=30s \
  2>&1 | grep -m1 'disruption budget'
kubectl get pdb -A

Erwartet (gekürzt):

NS         NODE
pruefung   rke2-server
notes      rke2-agent2
error when evicting pods/"api-59b55c94fb-nh2w7" -n "pruefung" (will retry after 5s):
Cannot evict pod as it would violate the pod's disruption budget.
NAMESPACE   NAME   MIN AVAILABLE   MAX UNAVAILABLE   ALLOWED DISRUPTIONS   AGE
notes       api    2               N/A               1                     15m
notes       web    1               N/A               1                     15m
pruefung    api    2               N/A               0                     10m
pruefung    web    1               N/A               1                     10m

Die Falle steckt in Übung 3: zwei api-Repliken, aber das Chart verlangt minAvailable: 2. Das ist Runde 4 aus Tag 15 in neuer Verkleidung. Das Budget muss zur Zahl der Repliken passen:

helm -n pruefung upgrade notes chart/notes --reuse-values \
  --set pdb.api.minAvailable=1 --wait | grep -E '^(STATUS|REVISION):'
kubectl drain rke2-agent1 --ignore-daemonsets --delete-emptydir-data | tail -1
kubectl uncordon rke2-agent1

Erwartet:

STATUS: deployed
REVISION: 2
node/rke2-agent1 drained
node/rke2-agent1 uncordoned

Liegt bei dir eine Datenbank auf jedem Agent, bleibt nur der Server. Auch er lässt sich leeren; die Static Pods der Control Plane bleiben dabei stehen.

Fortschritt speichern? Kostenlos registrieren

Übung 7: Eigene Version für den Mandanten

Teil 2 (Tag 13). Heb die api in pruefung auf 0.2.1 aus deiner Registry (Challenge Tag 13). notes bleibt auf 0.2.0, und die Änderung aus Übung 6 bleibt erhalten.

Prüfblock:

kubectl -n pruefung exec deploy/web -- wget -qO- http://api:8080/version
kubectl -n notes exec deploy/web -- wget -qO- http://api:8080/version
kubectl -n pruefung get pdb api

Erwartet:

0.2.1
0.2.0
NAME   MIN AVAILABLE   MAX UNAVAILABLE   ALLOWED DISRUPTIONS   AGE
api    1               N/A               1                     12m

Lösung

helm -n pruefung upgrade notes chart/notes --reuse-values \
  --set api.image.tag=0.2.1 --wait | grep -E '^(STATUS|REVISION):'
helm -n pruefung get values notes | grep -B1 -A1 'tag:'

Erwartet (gekürzt):

STATUS: deployed
REVISION: 3
    repository: …:5000/notes-api
    tag: 0.2.1
  replicas: 2

--reuse-values behält alles aus Übung 3 und 6, --set legt nur den Tag darüber. Fehlt das Image 0.2.1 in deiner Registry, bau und push es wie in der Challenge von Tag 13.

Fortschritt speichern? Kostenlos registrieren

Übung 8: Sauber abbauen

Teil 1 und 2 (Tag 10, 12). Entferne den Mandanten vollständig: Release, Namespace, Volume. Beweise, dass auch die Daten auf dem Node weg sind.

Prüfblock:

kubectl get ns pruefung
kubectl get pv
multipass exec rke2-server -- sudo ls /opt/local-path-provisioner

Erwartet: Namespace weg, nur noch das Volume von notes, auf dem Server kein Verzeichnis mehr (bei dir eventuell ein anderer Node, siehe Übung 6).

Error from server (NotFound): namespaces "pruefung" not found
NAME                                       CAPACITY   …   CLAIM             …
pvc-f7f33bd8-7f9f-470d-92bd-39ac2b726af9   1Gi        …   notes/data-db-0   …

Lösung

PV=$(kubectl -n pruefung get pvc data-db-0 -o jsonpath='{.spec.volumeName}')
helm -n pruefung uninstall notes --wait
kubectl -n pruefung get pvc
kubectl delete namespace pruefung
kubectl get pv "$PV"

Erwartet (gekürzt):

release "notes" uninstalled
NAME        STATUS   VOLUME                                     CAPACITY   …
data-db-0   Bound    pvc-ecf8967f-dbde-4730-8362-2b97fad5cc25   512Mi      …
namespace "pruefung" deleted
Error from server (NotFound): persistentvolumes "pvc-ecf8967f-…" not found

helm uninstall lässt den PVC stehen (Tag 15, Runde 10). Erst das Löschen des Namespace nimmt ihn mit, und die Reclaim Policy Delete von local-path räumt PV und Verzeichnis ab. Kein etcd-Snapshot holt diese Daten zurück (Tag 14).

Fortschritt speichern? Kostenlos registrieren

Wissensteil

Je ein Punkt. Antworten unten.

  1. Warum überlebt eine Notiz kubectl delete pod db-0, aber nicht kubectl delete namespace notes?
  2. Was unterscheidet readinessProbe und livenessProbe in ihrer Wirkung?
  3. Warum hängt ein Pod mit runAsNonRoot: true und dem Image USER node?
  4. Was macht before-hook-creation beim Migrations-Job des Charts?
  5. Ein Node ist NotReady. Wann zieht Kubernetes seine Pods um, und warum so spät?
  6. Wozu braucht der API-Server von RKE2 tls-san mit der Server-IP?
  7. Ein Pull scheitert mit x509, ein anderer mit 401. Was fehlt jeweils?
  8. Warum hilft ein PodDisruptionBudget nicht beim Drain des Nodes mit db-0?
  9. Was sichert ein etcd-Snapshot, was nicht?
  10. Warum muss der Server vor den Agents auf die neue Kubernetes-Version?

Antworten

  1. Der PVC data-db-0 überlebt den Pod. Mit dem Namespace wird er gelöscht, und local-path löscht das Volume (Delete).
  2. Readiness nimmt den Pod aus dem Service, Liveness startet den Container neu.
  3. Bei einem Benutzernamen kann Kubernetes nicht prüfen, ob er root ist. Ohne numerisches runAsUser lehnt der kubelet den Start ab.
  4. Helm löscht den alten Job, bevor es den neuen anlegt. Jobs sind unveränderlich.
  5. Nach gut 40 s NotReady folgt der Taint unreachable. Pods tolerieren ihn standardmäßig 300 s, damit kurze Netzstörungen keine Umzüge auslösen.
  6. kubectl prüft, ob die angesprochene Adresse im Zertifikat steht. Sonst lehnt es die Verbindung ab.
  7. x509: Der Node kennt die CA nicht. 401: Die Zugangsdaten fehlen oder sind falsch. Beides steht in registries.yaml.
  8. Das Volume bindet db-0 an genau diesen Node. Mit einer Replik kann kein Budget einen Ausfall verhindern, nur den Drain blockieren.
  9. Alle Kubernetes-Objekte (Deployments, Secrets, PVC-Objekte), keine Daten in den Volumes.
  10. Ein kubelet darf älter sein als der API-Server, aber nie neuer.