Zum Inhalt springen
Trainingslager IT-Trainingslager

Tag 3: Images und Datastores

Ziel: Wissen, wo Platten liegen, eine eigene Datenplatte anlegen und erleben, was „persistent“ bei OpenNebula bedeutet. · Dauer: ca. 60 min · Voraussetzung: Tag 2

Briefing

  • Ein Image ist eine Platte, die OpenNebula verwaltet: ein Betriebssystem, eine leere Datenplatte, eine CD. Es liegt in einem Image-Datastore.
  • Startet eine VM, kopiert der Transfer-Manager ihre Platten in den System-Datastore. Dort arbeitet die VM, nicht auf dem Image selbst.
  • Ob Änderungen ins Image zurückfließen, entscheidet ein Schalter:
Image Beim Start Beim Löschen der VM
nicht persistent (Standard) Kopie bzw. qcow2-Overlay im System-Datastore Kopie wird verworfen
persistent die VM arbeitet direkt mit dem Image Änderungen bleiben im Image
  • Typen von Images: OS (bootfähig), DATABLOCK (leere oder gefüllte Datenplatte), CDROM (nur lesbar, etwa ISO-Dateien).
 Image-Datastore 1 (default)          System-Datastore 0
 ├─ Alpine Linux 3.20 (OS)   ──Kopie──►  /var/lib/one/datastores/0/<VM-ID>/disk.0
 └─ daten (DATABLOCK, persistent) ────►  Verweis, die VM schreibt ins Image

Drill 1: Die Datastores

onedatastore list

Erwartet:

  ID NAME         SIZE AVA CLUSTERS IMAGES TYPE DS      TM      STAT
   2 files         28G 76% 0             0 fil  fs      local   on
   1 default       28G 76% 0             3 img  fs      qcow2   on
   0 system        28G 76% 0             0 sys  -       qcow2   on
Spalte Bedeutung
TYPE sys für laufende VMs, img für Images, fil für Dateien wie Kernel oder Kontext-Skripte
DS wie Images hineinkommen (fs = Dateisystem)
TM wie Platten zu den Hosts kommen (qcow2 = Overlays im gemeinsamen Dateisystem)

Alle drei liegen hier auf derselben Platte unter /var/lib/one/datastores. Images sind dort einfache Dateien mit Hash-Namen:

sudo ls -la /var/lib/one/datastores/1/

Erwartet (gekürzt):

-rw-r--r-- 1 oneadmin oneadmin 1398682112 Nov 12 18:47 3004b2effa884b510c08267193825668
-rw-r--r-- 1 oneadmin oneadmin   89182208 Nov 12 18:45 59fed322469dcb8c2b10e5a346059c7f

Die 1,4 GB sind das Image der OneKS-Appliance, die 89 MB das Alpine. Welche Datei zu welchem Image gehört, verrät oneimage show <name> | grep SOURCE.

Fortschritt speichern? Kostenlos registrieren

Drill 2: Eine Datenplatte

oneimage create --name daten --type DATABLOCK --size 512 --persistent --datastore default
oneimage list

Erwartet:

ID: 2
  ID USER     GROUP    NAME            DATASTORE     SIZE TYPE PER STAT RVMS
   2 oneadmin oneadmin daten           default       512M DB   Yes rdy     0
   1 oneadmin oneadmin Alpine Linux 3. default       512M OS    No rdy     0
   0 oneadmin oneadmin OneKS Appliance default         4G OS    No rdy     0

PER Yes heißt persistent, STAT rdy heißt bereit. RVMS zählt die VMs, die das Image gerade nutzen.

Eine VM mit Betriebssystem und Datenplatte. --disk ersetzt die Platten des Templates, deshalb steht Alpine mit in der Liste:

onetemplate instantiate 1 --name speicher --disk "Alpine Linux 3.20,daten"

Nach einer Minute:

onevm show speicher | grep -A3 '^VM DISKS'

Erwartet:

VM DISKS
 ID DATASTORE  TARGET IMAGE                               SIZE      TYPE SAVE
  0 default    vda    Alpine Linux 3.20                   -/512M    file   NO
  1 default    sdb    daten                               -/512M    file  YES

SAVE YES ist die persistente Platte. TARGET sdb ist der Name, den OpenNebula der Platte in libvirt gibt. In der VM heißt sie anders:

IP=$(onevm show speicher | grep -o 'ETH0_IP="[0-9.]*' | cut -d'"' -f2)
ssh root@$IP cat /proc/partitions

Erwartet (gekürzt):

major minor  #blocks  name

  11        0        370 sr0
   8        0     524288 sda
 253        0     524288 vda
  • vda ist das Betriebssystem (virtio-Platte).
  • sda ist die Datenplatte. Linux nummeriert SCSI-Platten in der VM selbst durch, und das ist die erste.
  • sr0 ist ein kleines CD-Laufwerk mit dem Kontext, den Startdaten der VM (Tag 4).

Merke: Verlass dich in der VM nie auf den TARGET-Namen aus OpenNebula. Wer feste Namen braucht, setzt am Image DEV_PREFIX=vd. Dann heißt die Datenplatte auch in der VM vdb.

Fortschritt speichern? Kostenlos registrieren

Drill 3: Persistent oder nicht

Formatieren, einhängen, zwei Dateien schreiben, eine auf der Datenplatte und eine auf dem Betriebssystem:

ssh root@$IP "apk add -q e2fsprogs; mkfs.ext4 -q /dev/sda; mkdir -p /daten; \
  mount /dev/sda /daten; echo Hallo OpenNebula > /daten/notiz.txt; \
  echo Weg > /root/fluechtig.txt; sync; df -h /daten | tail -1"

Erwartet:

/dev/sda        488M  156K  452M   1% /daten

Jetzt wird die VM gelöscht und eine neue mit denselben Images angelegt:

onevm terminate speicher
onetemplate instantiate 1 --name speicher2 --disk "Alpine Linux 3.20,daten"

Nach einer Minute:

IP=$(onevm show speicher2 | grep -o 'ETH0_IP="[0-9.]*' | cut -d'"' -f2)
ssh root@$IP \
  "mkdir -p /daten; mount /dev/sda /daten; cat /daten/notiz.txt; ls /root/fluechtig.txt"

Erwartet (gekürzt):

Hallo OpenNebula
ls: cannot access '/root/fluechtig.txt': No such file or directory

Die Notiz hat überlebt, die Datei auf dem Betriebssystem nicht. Auch e2fsprogs ist wieder weg: Das Alpine-Image ist nicht persistent, und jede VM beginnt mit dem Originalzustand.

Fortschritt speichern? Kostenlos registrieren

Kontrollpunkt

oneimage list | grep daten

Erwartet: daten mit PER Yes, STAT used, RVMS 1.

onevm show speicher2 | grep -c 'daten'

Erwartet: 1 oder mehr, die Platte hängt an der VM.

Challenge

Eine zweite VM soll dieselbe Datenplatte bekommen, während speicher2 läuft. Was passiert?

Lösung

onetemplate instantiate 1 --name speicher3 --disk "Alpine Linux 3.20,daten"

Erwartet:

[one.template.instantiate] Error allocating a new virtual machine template. DISK 1: Cannot acquire image 2, it is persistent and already in use

OpenNebula verweigert schon das Anlegen. Ein persistentes Image gehört immer genau einer VM. Zwei VMs, die gleichzeitig in ein ext4 schreiben, würden es zerstören. Gemeinsamer Speicher für mehrere VMs braucht ein Cluster-Dateisystem oder einen Netzwerkdienst wie NFS.

Aufräumen:

onevm terminate speicher2

Das Image daten bleibt bestehen. Du brauchst es nicht mehr, aber ein persistentes Image mit Daten löschst du nie aus Versehen. Wenn du sicher bist:

oneimage delete daten

Fortschritt speichern? Kostenlos registrieren

Enterprise-Notiz

  • Geteilter Speicher: Im Betrieb liegen System- und Image-Datastores auf Ceph, NFS oder einem SAN. Dann müssen Platten nicht kopiert werden, und eine VM kann ohne Unterbrechung auf einen anderen Host umziehen (Live-Migration).
  • qcow2-Ketten: Nicht persistente VMs starten als dünnes Overlay über dem Image. Viele VMs aus einem Image sparen so Platz, aber das Image darf sich nicht ändern, solange VMs darauf aufbauen.
  • Backups: Persistente Images sind der Ort, an dem Daten leben. OpenNebula 7 bringt eigene Backup-Datastores mit (Tag 7). Images ohne Backup sind im Betrieb tabu.