Zum Inhalt springen
Trainingslager IT-Trainingslager

Tag 3: Den richtigen Workload wählen

Ziel: Du erkennst an der Aufgabe, ob Deployment, DaemonSet, StatefulSet, Job oder CronJob gefragt ist, und baust jeden in wenigen Minuten. · Dauer: ca. 75 min · Voraussetzung: Tag 2

Briefing

CKAD: Application Design and Build (20 %) – „Choose and use the right workload resource”. Pods legst du in der Praxis fast nie direkt an; ein Controller erzeugt sie und hält sie am Leben. Die Frage ist nur, welcher:

  läuft dauerhaft? ── ja ──> pro Node einer? ── ja ──> DaemonSet
        |                         └─ nein ─> stabile ID/Daten? ── ja ──> StatefulSet
        |                                             └─ nein ─> Deployment
        └─ nein ──> einmalig ──> Job · regelmäßig ──> CronJob

Drill 1: Überblick und Entscheidungshilfe

k create ns tag03
k config set-context --current --namespace=tag03
mkdir -p ~/ckad/tag03 && cd ~/ckad/tag03
k api-resources --api-group=apps
k api-resources --api-group=batch

Erwartet:

NAME                  SHORTNAMES   APIVERSION   NAMESPACED   KIND
controllerrevisions                apps/v1      true         ControllerRevision
daemonsets            ds           apps/v1      true         DaemonSet
deployments           deploy       apps/v1      true         Deployment
replicasets           rs           apps/v1      true         ReplicaSet
statefulsets          sts          apps/v1      true         StatefulSet
NAME       SHORTNAMES   APIVERSION   NAMESPACED   KIND
cronjobs   cj           batch/v1     true         CronJob
jobs                    batch/v1     true         Job
Ressource Typischer Einsatz Pod-Namen k create?
Deployment zustandslose API, Web-Frontend zufällig ja
DaemonSet Log-Agent, Node-Exporter zufällig, 1/Node nein
StatefulSet Datenbank, Queue, Cluster-Software name-0, -1 … nein
Job Migration, Batch, Export zufällig ja
CronJob Bericht, Backup, Aufräumen name-<zeit>-… ja

Fortschritt speichern? Kostenlos registrieren

Drill 2: Deployment

notes-api aus Tag 2, drei Replikas. k create deployment kennt kein --env, also über die Datei:

k create deployment notes --image=172.16.0.126:30500/notes-api:1.0 --replicas=3 \
  --port=8080 $do > notes.yaml
vim notes.yaml

Unter name: notes-api ergänzen:

        env:
        - name: NOTES_API_KEY
          value: lab-key-123
k apply -f notes.yaml
k rollout status deployment/notes
k get rs,pods -o wide

Erwartet (gekürzt):

deployment "notes" successfully rolled out
NAME                               DESIRED   CURRENT   READY   AGE
replicaset.apps/notes-7b6866d9dd   3         3         3       4s

NAME                         READY   STATUS    RESTARTS   AGE   IP               NODE
pod/notes-7b6866d9dd-97tnm   1/1     Running   0          4s    192.168.235.142  worker1
pod/notes-7b6866d9dd-d8l8h   1/1     Running   0          4s    192.168.235.139  worker1
pod/notes-7b6866d9dd-rj5gb   1/1     Running   0          4s    192.168.189.112  worker2

Ein Pod geht verloren – das ReplicaSet ersetzt ihn sofort:

k delete pod notes-7b6866d9dd-97tnm
k get pods -l app=notes

Erwartet:

pod "notes-7b6866d9dd-97tnm" deleted from tag03 namespace
NAME                     READY   STATUS              RESTARTS   AGE
notes-7b6866d9dd-d8l8h   1/1     Running             0          8s
notes-7b6866d9dd-fqrws   0/1     ContainerCreating   0          3s
notes-7b6866d9dd-rj5gb   1/1     Running             0          8s

Tipp: Hättest du erst k create deployment und dann k set env ausgeführt, gäbe es zwei Rollouts – mit kurz abstürzenden Pods ohne API-Key dazwischen.

Fortschritt speichern? Kostenlos registrieren

Drill 3: DaemonSet

Für DaemonSets gibt es kein k create. Der Prüfungsweg: Deployment-YAML erzeugen, kind ändern, replicas, strategy und status löschen.

k create deployment node-agent --image=busybox:1.37 $do -- sleep infinity > ds.yaml
sed -i 's/^kind: Deployment/kind: DaemonSet/' ds.yaml
k apply -f ds.yaml

Erwartet (gekürzt):

Error from server (BadRequest): error when creating "ds.yaml": DaemonSet in version "v1"
cannot be handled as a DaemonSet: strict decoding error: unknown field "spec.replicas",
unknown field "spec.strategy"

Also mit vim ds.yaml die Zeilen replicas, strategy und status löschen. Danach sieht die Datei so aus:

apiVersion: apps/v1
kind: DaemonSet
metadata:
  labels:
    app: node-agent
  name: node-agent
spec:
  selector:
    matchLabels:
      app: node-agent
  template:
    metadata:
      labels:
        app: node-agent
    spec:
      containers:
      - command:
        - sleep
        - infinity
        image: busybox:1.37
        name: busybox
k apply -f ds.yaml
k get ds node-agent
k get pods -l app=node-agent -o custom-columns=NAME:.metadata.name,NODE:.spec.nodeName

Erwartet:

daemonset.apps/node-agent created
NAME         DESIRED   CURRENT   READY   UP-TO-DATE   AVAILABLE   NODE SELECTOR   AGE
node-agent   2         2         2       2            2           <none>          8s
NAME               NODE
node-agent-m976s   worker1
node-agent-xdvk6   worker2

Warum nur zwei? Der Control-Plane-Node hat einen Taint:

k describe node cp1 | grep Taints

Erwartet:

Taints:             node-role.kubernetes.io/control-plane:NoSchedule

Soll der Agent auch dort laufen, in ds.yaml unter template.spec ergänzen:

      tolerations:
      - key: node-role.kubernetes.io/control-plane
        operator: Exists
        effect: NoSchedule
k apply -f ds.yaml
k rollout status ds/node-agent
k get ds node-agent

Erwartet (gekürzt):

daemon set "node-agent" successfully rolled out
NAME         DESIRED   CURRENT   READY   UP-TO-DATE   AVAILABLE   NODE SELECTOR   AGE
node-agent   3         3         3       3            3           <none>          89s

Fortschritt speichern? Kostenlos registrieren

Drill 4: StatefulSet mit Headless-Service

Ein StatefulSet braucht einen Headless-Service (clusterIP: None) für stabile DNS-Namen:

k create service clusterip db --clusterip=None --tcp=80:80

Jeder Pod bekommt über volumeClaimTemplates einen eigenen PVC aus der Default-StorageClass local-path:

cat > sts.yaml <<'EOF'
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: db
spec:
  serviceName: db
  replicas: 2
  selector:
    matchLabels:
      app: db
  template:
    metadata:
      labels:
        app: db
    spec:
      containers:
      - name: web
        image: nginx:1.29
        ports:
        - containerPort: 80
        volumeMounts:
        - name: data
          mountPath: /usr/share/nginx/html
  volumeClaimTemplates:
  - metadata:
      name: data
    spec:
      accessModes: ["ReadWriteOnce"]
      resources:
        requests:
          storage: 100Mi
EOF
k apply -f sts.yaml
k get pods -l app=db -w

Erwartet (gekürzt, mit Strg+C beenden):

NAME   READY   STATUS              RESTARTS   AGE
db-0   0/1     Pending             0          0s
db-0   0/1     ContainerCreating   0          6s
db-0   1/1     Running             0          8s
db-1   0/1     Pending             0          0s
db-1   0/1     ContainerCreating   0          7s

db-1 startet erst, wenn db-0 läuft. Die PVCs heißen <template>-<pod>:

k get pvc

Erwartet (gekürzt):

NAME        STATUS   VOLUME                                     CAPACITY   ACCESS MODES
data-db-0   Bound    pvc-136e1c71-ec46-4556-8ff9-29fe94443ca3   100Mi      RWO
data-db-1   Bound    pvc-e53db033-9fa8-4cd1-bc15-1984f4b96b59   100Mi      RWO

Fortschritt speichern? Kostenlos registrieren

Drill 5: Identität und Daten bleiben

k exec db-0 -- sh -c 'echo "ich bin $(hostname)" > /usr/share/nginx/html/index.html'
k exec db-1 -- sh -c 'echo "ich bin $(hostname)" > /usr/share/nginx/html/index.html'
k run client --image=busybox:1.37 -- sleep 3600
k exec client -- wget -qO- db-1.db
k exec client -- nslookup db.tag03.svc.cluster.local

Erwartet (gekürzt):

ich bin db-1
Name:   db.tag03.svc.cluster.local
Address: 192.168.235.149
Name:   db.tag03.svc.cluster.local
Address: 192.168.189.125

Der Headless-Service liefert direkt die Pod-IPs, db-1.db immer denselben Pod. Jetzt db-0 löschen:

k delete pod db-0
k get pod db-0 -o wide
k exec db-0 -- cat /usr/share/nginx/html/index.html

Erwartet (gekürzt):

pod "db-0" deleted from tag03 namespace
NAME   READY   STATUS    RESTARTS   AGE   IP               NODE
db-0   1/1     Running   0          2s    192.168.189.66   worker2
ich bin db-0

Gleicher Name, neue IP, gleiche Daten. Beim Herunterskalieren bleiben die PVCs stehen:

k scale sts db --replicas=1
k get pods,pvc -l app=db

Erwartet (gekürzt):

statefulset.apps/db scaled
NAME       READY   STATUS    RESTARTS   AGE
pod/db-0   1/1     Running   0          8s
NAME                              STATUS   VOLUME
persistentvolumeclaim/data-db-0   Bound    pvc-136e1c71-...
persistentvolumeclaim/data-db-1   Bound    pvc-e53db033-...

Fortschritt speichern? Kostenlos registrieren

Drill 6: Job mit completions und parallelism

k create job batch --image=busybox:1.37 $do \
  -- sh -c 'echo Teil fertig auf $(hostname); sleep 3' > job.yaml
vim job.yaml

Direkt unter dem ersten spec: ergänzen:

  completions: 6
  parallelism: 2
  backoffLimit: 2
k apply -f job.yaml
k get pods -l job-name=batch
k wait --for=condition=complete job/batch --timeout=120s
k get job batch

Erwartet (gekürzt):

NAME          READY   STATUS      RESTARTS   AGE
batch-smhxk   0/1     Completed   0          7s
batch-xx5jx   1/1     Running     0          7s
job.batch/batch condition met
NAME    STATUS     COMPLETIONS   DURATION   AGE
batch   Complete   6/6           26s        27s

Sechs erfolgreiche Pods, nie mehr als zwei gleichzeitig. k create job setzt restartPolicy: Never; erlaubt sind bei Jobs nur Never und OnFailure.

Fortschritt speichern? Kostenlos registrieren

Drill 7: Wenn Jobs scheitern

backoffLimit begrenzt Fehlversuche, activeDeadlineSeconds die Gesamtlaufzeit:

k apply -f - <<'EOF'
apiVersion: batch/v1
kind: Job
metadata:
  name: fail
spec:
  backoffLimit: 2
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: fail
        image: busybox:1.37
        command: ["sh", "-c", "echo versuche; exit 1"]
---
apiVersion: batch/v1
kind: Job
metadata:
  name: slow
spec:
  activeDeadlineSeconds: 10
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: slow
        image: busybox:1.37
        command: ["sleep", "60"]
EOF

Nach einer Minute:

k get jobs fail slow
k get pods -l job-name=fail
k describe job fail | tail -1
k describe job slow | tail -1

Erwartet (gekürzt):

NAME   STATUS   COMPLETIONS   DURATION   AGE
fail   Failed   0/1           51s        51s
slow   Failed   0/1           50s        50s
NAME         READY   STATUS   RESTARTS   AGE
fail-2t2np   0/1     Error    0          51s
fail-kz7pd   0/1     Error    0          38s
fail-vgsts   0/1     Error    0          16s
  Warning  BackoffLimitExceeded  12s   job-controller  Job has reached the specified
backoff limit
  Warning  DeadlineExceeded  9s    job-controller  Job was active longer than specified
deadline

Drei Pods: ein Versuch plus zwei Wiederholungen, mit wachsender Pause dazwischen. Den Pod von slow hat der Controller nach Ablauf der Frist gelöscht.

Fortschritt speichern? Kostenlos registrieren

Drill 8: CronJob

k create cronjob report --image=busybox:1.37 --schedule="*/1 * * * *" $do \
  -- sh -c 'date; sleep 90' > cj.yaml
vim cj.yaml

Unter schedule: (auf derselben Ebene) ergänzen:

  concurrencyPolicy: Forbid
  successfulJobsHistoryLimit: 2
  failedJobsHistoryLimit: 1
k apply -f cj.yaml
k create job report-manual --from=cronjob/report

Ein Lauf dauert 90 s, der Takt ist 60 s. Nach gut zwei Minuten:

k get cj report
k get events --field-selector involvedObject.name=report --sort-by=.lastTimestamp

Erwartet (gekürzt):

NAME     SCHEDULE      TIMEZONE   SUSPEND   ACTIVE   LAST SCHEDULE   AGE
report   */1 * * * *   <none>     False     1        56s             2m37s
REASON             OBJECT           MESSAGE
SuccessfulCreate   cronjob/report   Created job report-29916944
UnexpectedJob      cronjob/report   Saw a job that the controller did not create or
                                    forgot: report-manual
JobAlreadyActive   cronjob/report   Not starting job because prior execution is running
                                    and concurrency policy is Forbid
SawCompletedJob    cronjob/report   Saw completed job: report-29916944, condition: ...

Forbid überspringt den Lauf, solange der vorige noch läuft; Replace würde ihn abbrechen, Allow (Standard) parallel starten. Den manuellen Job zählt der CronJob nicht zu seinen eigenen. Die Historie: Mehr als zwei erfolgreiche Jobs löscht der Controller (Ereignis SuccessfulDelete). Anhalten:

k patch cronjob report -p '{"spec":{"suspend":true}}'
k get cj report

Erwartet:

cronjob.batch/report patched
NAME     SCHEDULE      TIMEZONE   SUSPEND   ACTIVE   LAST SCHEDULE   AGE
report   */1 * * * *   <none>     True      1        71s             2m52s

Fortschritt speichern? Kostenlos registrieren

Übung: Speed-Drills

  1. Job hello mit busybox:1.37, der echo hallo dreimal nacheinander erfolgreich ausführt. Zeitziel: 60 s
  2. CronJob cleanup, alle 15 Minuten echo weg, sofort ausgesetzt. Zeitziel: 45 s
  3. Starte den CronJob report jetzt einmal von Hand als Job report-now. Zeitziel: 15 s
  4. Skaliere das Deployment notes auf eine Replika. Zeitziel: 10 s

Lösung

k create job hello --image=busybox:1.37 $do -- echo hallo > hello.yaml
sed -i 's/^spec:$/spec:\n  completions: 3/' hello.yaml
k apply -f hello.yaml
k create cronjob cleanup --image=busybox:1.37 --schedule="*/15 * * * *" -- echo weg
k patch cronjob cleanup -p '{"spec":{"suspend":true}}'
k create job report-now --from=cronjob/report
k scale deployment notes --replicas=1

Erwartet (gekürzt):

job.batch/hello created
cronjob.batch/cleanup created
cronjob.batch/cleanup patched
job.batch/report-now created
deployment.apps/notes scaled

Fortschritt speichern? Kostenlos registrieren

Kontrollpunkt

k get job hello -o jsonpath='{.status.succeeded}'

Erwartet: 3

k get ds node-agent -o jsonpath='{.status.numberReady}'

Erwartet: 3

k get pvc -l app=db

Erwartet: data-db-0 und data-db-1, beide Bound – der StatefulSet-Controller überträgt die Selector-Labels auf die PVCs.

k get cj -o custom-columns=NAME:.metadata.name,SUSPEND:.spec.suspend

Erwartet: cleanup und report, beide true.

Challenge

Ein Job parts soll vier Teile parallel verarbeiten; jeder Pod gibt seine Teilnummer (0 bis 3) aus.

Hinweis: completionMode: Indexed setzt in jedem Pod die Variable JOB_COMPLETION_INDEX.

Lösung

k apply -f - <<'EOF'
apiVersion: batch/v1
kind: Job
metadata:
  name: parts
spec:
  completions: 4
  parallelism: 4
  completionMode: Indexed
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: part
        image: busybox:1.37
        command: ["sh", "-c", "echo Teil $JOB_COMPLETION_INDEX"]
EOF
k wait --for=condition=complete job/parts --timeout=90s
for p in $(k get pods -l job-name=parts -o name); do k logs $p; done | sort

Erwartet:

job.batch/parts created
job.batch/parts condition met
Teil 0
Teil 1
Teil 2
Teil 3

Aufräumen:

k config set-context --current --namespace=default
k delete ns tag03

Mit dem Namespace verschwinden auch die PVCs und damit die local-path-Volumes.

Fortschritt speichern? Kostenlos registrieren

Prüfungstipp

  • DaemonSet und StatefulSet gibt es nicht per k create – Deployment-YAML erzeugen und umbauen. Bei DaemonSets replicas und strategy löschen, sonst meldet die API „strict decoding error: unknown field”.
  • Job-Felder (completions, parallelism, backoffLimit, activeDeadlineSeconds) stehen unter spec, nicht unter spec.template.spec. k explain job.spec hilft.
  • Ein CronJob, der „jetzt sofort” laufen soll: k create job <name> --from=cronjob/<cj>.

Enterprise-Notiz

  • Datenbanken als StatefulSet betreibt man meist über einen Operator (CloudNativePG, Strimzi), der Backups, Failover und Upgrades übernimmt.
  • DaemonSets für Logs und Monitoring liefert die Plattform; Anwendungs-Teams bauen sie selten selbst.
  • CronJobs bekommen timeZone, startingDeadlineSeconds und Alarme auf fehlgeschlagene Jobs – ein stiller Backup-Job, der seit Wochen scheitert, ist ein Klassiker.