Seminar Mobly Test Suites und Runner

Seminarprofil

Mit wachsendem Testbestand reicht der Einzelaufruf einer Testklasse nicht mehr aus. Im Seminar entsteht eine klare Ausführungsschicht, die Testgruppen reproduzierbar zusammenstellt, Parameter kontrolliert übergibt und Ergebnisse übergreifend auswertbar macht.

Didaktische Einordnung: Zwei Tage sind notwendig, um zunächst Runner, Auswahl und Konfiguration zu beherrschen und danach mehrere Testklassen als Suites mit Parametern, Wiederholungen, Fehlerisolation und automatisierter Ausführung zu organisieren.

Lernziele

• Runner-Einstiegspunkte und Aufrufparameter nachvollziehbar gestalten
• Mehrere Testklassen zu definierten Ausführungspaketen kombinieren
• Tests, Parameter und Umgebungen kontrolliert auswählen
• Fehlerisolation und Ergebnisaggregation für Suites umsetzen
• Lokale und CI-Ausführung mit denselben Konventionen betreiben

Zielgruppe

Testautomatisierer, Framework-Entwickler, Testarchitekten und DevOps-Fachkräfte, die größere Mobly-Testbestände ausführen und pflegen.

Voraussetzungen

Python-Grundkenntnisse und praktische Erfahrung mit mindestens einer Mobly-Testklasse und einer Testbed-Konfiguration.

Inhaltsübersicht

1. Tag 1 – Ausführungsschicht und Verantwortlichkeiten trennen
2. Tag 1 – Test Runner kontrolliert verwenden
3. Tag 1 – Auswahl und Parametrisierung gestalten
4. Tag 2 – Suites aus mehreren Testklassen aufbauen
5. Tag 2 – Wiederholung und Fehlerisolation einrichten
6. Tag 2 – Lokale und automatisierte Ausführung vereinheitlichen

1. Tag 1 – Ausführungsschicht und Verantwortlichkeiten trennen

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Testlogik, Testbed-Konfiguration und Ausführungsdefinition voneinander abgrenzen.
2. Schritt 2: Einheitliche Einstiegspunkte für Entwickler, Labor und CI festlegen.
3. Schritt 3: Aufrufparameter und Standardwerte nachvollziehbar dokumentieren.

2. Tag 1 – Test Runner kontrolliert verwenden

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Konfigurationsdatei und Testklasse über einen definierten Runner starten.
2. Schritt 2: Exit-Status, Ergebnisverzeichnis und Laufkennung auswerten.
3. Schritt 3: Ungültige Parameter und fehlende Testbeds frühzeitig erkennen.

3. Tag 1 – Auswahl und Parametrisierung gestalten

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Einzelne Tests oder Gruppen anhand klarer Regeln auswählen.
2. Schritt 2: TestParams für Umgebung, Produktvariante und Testmodus strukturieren.
3. Schritt 3: Parameterwerte validieren und im Laufprotokoll sichtbar machen.

4. Tag 2 – Suites aus mehreren Testklassen aufbauen

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Testklassen in fachlich sinnvolle Ausführungsreihenfolgen aufnehmen.
2. Schritt 2: Gemeinsame und klassenspezifische Konfigurationen zuordnen.
3. Schritt 3: Suite-Läufe mit eindeutiger Benennung und reproduzierbarer Reihenfolge starten.

5. Tag 2 – Wiederholung und Fehlerisolation einrichten

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Wiederholungen für Stabilitäts- oder Reproduktionsläufe konfigurieren.
2. Schritt 2: Fehler einer Testklasse von nachfolgenden Ausführungen abgrenzen.
3. Schritt 3: Abbruchkriterien für Infrastrukturfehler und kritische Vorbedingungen definieren.

6. Tag 2 – Lokale und automatisierte Ausführung vereinheitlichen

Die Arbeitsschritte bauen aufeinander auf und werden unmittelbar am Testsystem nachvollzogen.

1. Schritt 1: Ein Skript oder Kommando mit konsistenten Argumenten für beide Umgebungen bereitstellen.
2. Schritt 2: Ergebnisse mehrerer Klassen zu einem Laufstatus zusammenführen.
3. Schritt 3: Eine kleine Smoke-, Regression- und Stabilitätssuite operationalisieren.

Praxisprojekt

1. Schritt 1: Zwei Testklassen über einen gemeinsamen Runner mit Parametern ausführen.
2. Schritt 2: Eine Suite mit definierter Reihenfolge und selektiver Testauswahl erstellen.
3. Schritt 3: Einen Fehlerfall isolieren und die weitere Ausführung kontrolliert fortsetzen.
4. Schritt 4: Dieselbe Suite lokal und in einem simulierten CI-Aufruf reproduzierbar starten.