tests/images with tailor [2]: add parallel tailor image configs

tests/tailor-images/README.md

@@ -0,0 +1,64 @@
+# Test images with tailor
+
+`tests/tailor-images/` is a [tailor](../../tools/tailor/README.md) workspace.
+It replaces the legacy `testimages.py` / `builder/` flow, which runs alongside it
+for now and is removed in a follow-up cleanup PR.
+
+## Build from the repo root
+
+Use the in-tree tailor binary via Cargo:
+
+```bash
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   matrix trident-installer --format json
+```
+
+Build examples:
+
+```bash
+# trident-testimage
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   build trident-testimage -s arch=amd64 --output-dir ./artifacts
+
+# trident-testimage-arm64
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   build trident-testimage -s arch=arm64 --output-dir ./artifacts
+
+# trident-direct-streaming-installer-arm64
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   build trident-installer -s arch=arm64 -s variant=direct-streaming --output-dir ./artifacts
+
+# trident-container-usrverity-testimage (signed)
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   build trident-verity-testimage -s deployment=container -s mode=usr --output-dir ./artifacts
+```
+
+## Base images
+
+The workspace uses a `baseImages:` catalogue in `tests/tailor-images/tailor.yaml`.
+For the Azure Linux base slots you can materialize the defaults locally with:
+
+```bash
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   bases download baremetal core_arm64 core_selinux qemu_guest
+```
+
+Verify that every referenced base file exists:
+
+```bash
+cargo run --manifest-path tools/tailor/Cargo.toml --   --manifest tests/tailor-images/tailor.yaml   bases verify
+```
+
+Ubuntu / GB200 direct-streaming inputs still come from the pipeline-managed blob
+staging flow; those slots are intentionally catalogued without an in-workspace
+remote source.
+
+## Image families
+
+The current families are:
+
+- `azl-installer`
+- `azurelinux-direct-streaming-testimage`
+- `foreign-direct-streaming-testimage`
+- `trident-container-installer`
+- `trident-container-testimage`
+- `trident-functest`
+- `trident-installer`
+- `trident-mos`
+- `trident-testimage`
+- `trident-verity-testimage`
+- `trident-vm-testimage`

tests/tailor-images/azl-installer/image.yaml

@@ -0,0 +1,20 @@
+name: azl-installer
+
+base:
+  ref: baremetal
+
+outputs:
+  - format: iso
+
+rpmSources:
+  - ../../../bin/RPMS
+  - ../../../artifacts/rpm-overrides
+
+extraDependencies:
+  - ./installer-iso.yaml
+  - ./mos
+  - ./iso
+  - ../common
+
+config:
+  $include: ./installer-iso.yaml

tests/tailor-images/azl-installer/installer-iso.yaml

@@ -0,0 +1,95 @@
+storage:
+  bootType: efi
+
+  disks:
+  - partitionTableType: gpt
+    maxSize: 4G
+    partitions:
+    - id: esp
+      type: esp
+      size: 8M
+
+    - id: rootfs
+      size: grow
+
+  filesystems:
+  - deviceId: esp
+    type: fat32
+    mountPoint:
+      path: /boot/efi
+      options: umask=0077
+
+  - deviceId: rootfs
+    type: ext4
+    mountPoint:
+      path: /
+
+os:
+  hostname: azl-installer
+  bootloader:
+    resetType: hard-reset
+
+  selinux:
+    mode: disabled
+
+  kernelCommandLine:
+    extraCommandLine:
+    - console=tty0
+    - console=ttyS0
+    - rd.info
+    - log_buf_len=1M
+
+  packages:
+    install:
+      - curl
+      - device-mapper
+      - dnf
+      - dosfstools
+      - efibootmgr
+      - iproute
+      - iptables
+      - jq
+      - lsof
+      - mdadm
+      - nano
+      - netplan
+      - openssh-server
+      - squashfs-tools
+      - tar
+      - tpm2-tools
+      - trident-provisioning
+      - vim
+      - veritysetup
+      # Accessibility packages
+      - pcaudiolib
+
+  additionalFiles:
+    # Getty service files for root autologin
+  - source: ../common/files/getty@.service
+    destination: /usr/lib/systemd/system/getty@.service
+  - source: ../common/files/serial-getty@.service
+    destination: /usr/lib/systemd/system/serial-getty@.service
+  - source: mos/scripts/installation.sh
+    destination: /root/installer/installation.sh 
+
+iso:
+  initramfsType: full-os
+
+  additionalFiles:
+  - source: iso/images/trident-testimage.cosi
+    destination: /images/azure-linux-core.cosi
+  - source: iso/bin/liveinstaller
+    destination: /installer/liveinstaller
+  - source: iso/files/config-placeholder.yaml
+    destination: /installer/trident-config.yaml.tmpl
+
+  kernelCommandLine:
+    extraCommandLine:
+    - console=tty0
+    - console=tty1
+    - console=ttyS0
+    - loglevel=6
+
+scripts:
+  postCustomization:
+  - path: mos/scripts/startup-command.sh

tests/tailor-images/azl-installer/iso/.gitignore

@@ -0,0 +1,2 @@
+/images/
+/bin/

tests/tailor-images/azl-installer/iso/files/config-placeholder.yaml

@@ -0,0 +1 @@
+#8505c8ab802dd717290331acd0592804c4e413b030150c53f5018ac998b7831d:/installer/trident-config.yaml.tmpl:##############################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################################

tests/tailor-images/azl-installer/mos/scripts/installation.sh

@@ -0,0 +1,51 @@
+#!/bin/bash
+set -ex
+trap '/bin/bash' ERR
+
+CDROM_MOUNT="/mnt/cdrom"
+WORKING_DIR="/root/installer"
+MAGIC_PLACEHOLDER="8505c8ab802dd717290331acd0592804c4e413b030150c53f5018ac998b7831d"
+
+# Mount CD-ROM using symlink
+mkdir -p "$CDROM_MOUNT"
+mount /dev/cdrom "$CDROM_MOUNT"
+
+# CD-ROM paths
+LIVEINSTALLER_PATH="$CDROM_MOUNT/installer/liveinstaller"
+POSSIBLE_HC_TEMPLATE="$CDROM_MOUNT/installer/trident-config.yaml.tmpl"
+IMAGES_DIR="$CDROM_MOUNT/images/"
+
+# WORKING_DIR paths
+LIVEINSTALLER_BIN="$WORKING_DIR/liveinstaller"
+TRIDENT_CONFIG_DESTINATION="/etc/trident/config.yaml"
+LOG_FILE="$WORKING_DIR/liveinstaller.log"
+OUTPUT_LOG="$WORKING_DIR/output_liveinstaller.log"
+
+# Copy to WORKING_DIR to execute liveinstaller
+cp "$LIVEINSTALLER_PATH" "$LIVEINSTALLER_BIN"
+
+# Check if placeholder magic string is present (ISO not patched)
+if grep -q "^#${MAGIC_PLACEHOLDER}:" "$POSSIBLE_HC_TEMPLATE"; then
+    # Placeholder found - execute attended installation (interactive UI)
+    cd "$WORKING_DIR"
+    "$LIVEINSTALLER_BIN" \
+      --images-dir="$IMAGES_DIR" \
+      --host-config-output="$TRIDENT_CONFIG_DESTINATION" \
+      --log-level=trace \
+      --log-file="$LOG_FILE" 2>&1 | tee "$OUTPUT_LOG"
+else
+    # Placeholder was replaced by a Host Configuration - execute unattended installation
+    echo "Pre-configured Host Configuration found. Starting unattended installation..."
+    # Save template in WORKING_DIR in case of failure
+    TEMPLATE_FILE="$WORKING_DIR/template.yaml"
+    cp "$POSSIBLE_HC_TEMPLATE" "$TEMPLATE_FILE"
+    # Execute liveinstaller (unattended)
+    cd "$WORKING_DIR"
+    "$LIVEINSTALLER_BIN" \
+      --unattended \
+      --template-file="$TEMPLATE_FILE" \
+      --log-level=trace \
+      --log-file="$LOG_FILE" 2>&1 | tee "$OUTPUT_LOG"
+fi
+
+/bin/bash

tests/tailor-images/azl-installer/mos/scripts/startup-command.sh

@@ -0,0 +1,5 @@
+#!/bin/bash
+INSTALLATION="/root/installer/installation.sh"
+chmod +x "$INSTALLATION"
+
+chsh -s "$INSTALLATION" root

tests/tailor-images/azurelinux-direct-streaming-testimage/by-arch/arm64.yaml

@@ -0,0 +1,2 @@
+base:
+  $include: ../common/matrix/base-core-arm64.yaml

tests/tailor-images/azurelinux-direct-streaming-testimage/image.yaml

@@ -0,0 +1,20 @@
+name: azurelinux-direct-streaming-testimage
+
+matrix:
+  arch: [amd64, arm64]
+
+base:
+  ref: baremetal
+
+outputs:
+  - format: baremetal-image
+
+rpmSources:
+  - ../../../bin/RPMS
+  - ../../../artifacts/rpm-overrides
+
+extraDependencies:
+  - ../common
+
+config:
+  $include: ./tailor/baseimg.yaml

tests/tailor-images/azurelinux-direct-streaming-testimage/tailor/baseimg.yaml

@@ -0,0 +1,68 @@
+storage:
+  bootType: efi
+  disks:
+  - partitionTableType: gpt
+    maxSize: 15G
+    partitions:
+    - id: esp
+      type: esp
+      size: 50M
+      label: esp
+    - id: root-a
+      size: 4G
+      type: root
+      label: root-a
+    - id: root-b
+      size: 4G
+      type: root
+      label: root-b
+    - id: swap
+      size: 2G
+      type: swap
+      label: swap
+  filesystems:
+  - deviceId: esp
+    type: fat32
+    mountPoint:
+      path: /boot/efi
+      options: umask=0077
+  - deviceId: root-a
+    type: ext4
+    mountPoint:
+      path: /
+os:
+  bootloader:
+    resetType: hard-reset
+  hostname: trident-rawcosi-testimage
+  selinux:
+    mode: permissive
+  kernelCommandLine:
+    extraCommandLine:
+    - console=tty0
+    - console=ttyS0
+    - rd.info
+    - log_buf_len=1M
+  packages:
+    install:
+    - curl
+    - dnf
+    - efibootmgr
+    - iproute
+    - iptables
+    - lsof
+    - mdadm
+    - netplan
+    - openssh-server
+    - tpm2-tools
+    - vim
+    - audit
+    - device-mapper
+    - dosfstools
+    - lvm2
+    - veritysetup
+    - ntfs-3g
+    - ntfsprogs
+    - selinux-policy
+  services:
+    enable:
+    - sshd

tests/tailor-images/common/files/containerd-mmap-fix.cil

@@ -0,0 +1,7 @@
+; Fix for containerd 2.2+ MountManager plugin SELinux denial.
+; containerd 2.2 introduces a MountManager that opens a bbolt DB under
+; /run/containerd/ using mmap(). The base refpolicy (RELEASE_2_20240226)
+; grants manage_file_perms on container_runtime_t:file but that set does
+; not include 'map'. Upstream fixed this in commit 7876e51510 (May 2024).
+; This module backports the missing permission.
+(allow container_engine_system_domain container_runtime_t (file (map)))