Manueller Test Tutorial
Inhaltsverzeichnis
Der Manual Test Wizard[Bearbeiten]
Im Manual Test Wizard Dialogfenster werden Sie schrittweise angeleitet. Tester haben die Möglichkeit, zu jedem Schritt Kommentare, Dateien und Screenshots als Dokumentation hinzuzufügen. Der Tester kann den Zustand des Testschrittes bestimmen, der bestanden (evtl. mit Hinweisen versehen), fehlgeschlagen oder nicht entscheidbar sein kann. Der Zustand "Nicht Entschuldbar" bedeutet, dass der Testschritt nicht ausgeführt werden kann (z.B. weil ein Gerät offline ist) und daher auch nicht festgestellt werden kann, ob das getestete System funktioniert oder nicht. Solche Tests werden später im Report grau dargestellt, und müssen später wiederholt werden.
Die Oberfläche des Wizard teilt sich auf in:
- Symbolleistenbereich
- Informationen zum aktuellen Testschritt
- Anweisungen zu den Testschritten
Die Symbolleiste[Bearbeiten]
Die Symbolleiste enthält Funktionen, um den Testschrittstatus zu definieren, einen Kommentar zu dem jeweiligen Schritt zu editieren und um Datendateien bzw. Screenshot-Bilder anzuhängen.
Informationen zum Test[Bearbeiten]
Dieser Bereich zeigt Informationen zum aktuellen Testschritt. Die angezeigten Informationen hängen davon ab, wie der Testschritt gestartet wird (als Schritt in einem Testplan vs. Einzellauf im Editor).
Hier werden die Namen des aktuellen Testplans, des Testfalls und Testschrittes angezeigt. Wenn Sie den Testbaustein direkt starten, hat die Ausführung keinen Testplan, und es erscheint "-".
Die Anzeige als TEST-CASE oder TEST-STEP wird von den Etiketten (Tags) der Aktion beeinflusst. Sie hat zwar keinen direkten Einfluss auf die Ausführung, kann aber dem Tester nützliche Zusatzinformation bieten (i.e. "wo befinde ich mich innerhalb des Tests").
Testfälle werden durch den Tag TEST-CASE oder TEST_CASE identifiziert. Einer dieser Tags sollte im Dokumentationsbereich des Testfallblocks in den Etiketten enthalten sein. Wenn Sie den Baustein über die Symbolleiste über dem Projektbaum erstellen, wird das TEST_CASE Etikett automatisch hinzugefügt. Fehlt dieser Tag, wird das Feld Testfall-Information beim Ablauf leer sein; ebenso wenn Sie einen Testschritt direkt im rechten Editor einzeln starten.
Testschritte werden mit dem Tag TEST-STEP gekennzeichnet. Dieser Tag sollte ebenfalls im Dokumentationsbereich des Prüfschrittblocks manuell hinzugefügt werden. Auch dieser Tag wird, wenn der Baustein via Toolbar des Projektbaums erstellt wird, automatisch vergeben.
Bausteine mit TEST-CASE- und TEST-STEP-Tags werden im Projektbereich von expecco mit speziellen Icon-Symbol gekennzeichnet und sind damit hervorgehoben und leichter auffindbar.
Anweisungen zu denTestschritten[Bearbeiten]
Im unteren Bereich des Wizards erscheint die Beschreibung des aktuellen Testschritts.
Je nachdem, wie diese ursprünglich angegeben wurde, erscheint hier entweder eine Text- oder eine HTML Ansicht, mit den im Schritt angegebenen Texten. Weitere Informationen finden Sie unter Standard Teststep unten.
Einfache Textstelle Darstellung:
HTML Inhalt:
Manual Test Bausteinbibliothek[Bearbeiten]
Manuelle Testsequenzen werden erstellt, indem die einzelnen Testschritte per drag&drop aus der Manual Test Bibliothek in ein Diagram gezogen werden.
In dieser Bibliothek finden Sie die 3 wichtigsten Bausteine um Testschritte durchzuführen, und jus"tzliche Hilfsaktionen, z.B. um den Wizard zu öffnen, zu schliessen, etc. Diese werden normalerweise nicht benötigt, da der Wizard bei der ersten Ausführung eines manuellen Testschritts automatisch geöffnet wird.
Es kann aber u.U. sinnvoll sein, diesen vorab oder speziell parameterisiert automatisch zu öffnen, oder auch programmatisch wieder zu minimieren oder zu schliessen (z.B. um den Bildschirm nicht zu bedecken).
Weiters finden Sie in der Bibliothek auch Beispiele mit erweiterten Dialogen, die in manuellen Testschritten gezeigt werden können (z.B. mehrfache Eingabefelder). Sie können diese auch als Vorlage für eigene Dialoge nutzen, die Sie mit dem integrierten UI-Builder definieren können.
Manual Test Wizard – Start[Bearbeiten]
Diese Aktion öffnet den manuellen Test Wizard mit individuellen Voreinstellungen zu Grösse, Position und Verhalten.
Fehlt dieser Schritt, wird der Wizard automatisch mit den Default-Einstellung bei der Ausführung des ersten manuellen Testschritts geöffnet.
Parameter:
- origin:
definiert die linke obere Ecke des Wizards. Er kann als Punkt mit x y-Koordinaten des Bildschirms angegeben werden. Beispiel: 20@40 bedeutet 20 Pixel von der linken Bildschirmecke und 40 Pixel von oben. - extend: definiert die Größe des Fensters. Sie können es mit Breiten- und Höhenangaben angeben.
Beispiel: 600@400 bedeutet 600 Pixel Fensterbreite und 400 Pixel Fensterhöhe.
- wizardWindowMode: kann folgende Werte haben:
- Normal
- Der Wizzard wir mit den spezifizierten Einstellungen geöffnet.
- Minimize
- Der Wizard wir mit den spezifizierten Einstellungen geöffnet und auf die Höhe der Symbolleiste minimiert. Mit dem Button “maximize toolbar” wird er :wieder vergrößert.
- fullScreen
- Die Einstellungen zur Grösse werden ignoriert und der Wizard wird im Vollbildmodus geöffnet.
- fullHeight
- Öffnet den Wizard mit der spezifizierten Breite und der vollen Bildschirmhöhe.
- fullWidth
- Öffnet den Wizard mit der spezifizierten Höhe und der vollen Bildschirmbreite.
- fullWidthMinimize
- Öffnet den Wizard verkleinert am oberen Bildschirmrand mit der vollen Bildschirmbreite.
- wizardDecorationMode: : kann folgende Werte haben:
- full
- Mit umlaufendem Window-Manager-Rahmen inklusive Leiste für Minimieren, Maximieren und Schließen von Schaltflächen.
- None
- Ohne Window-Manager-Rahmen, für mehr Platz auf dem Bildschirm.
- Dialog
- Mit umlaufendem Window-Manager-Rahmen inklusive WindowTitle-Leiste mit Schließen-Button.
- Input allowInconclusive: Buttons für nicht eindeutig ein-/ausblenden.
Manual Test Wizard – Voreinstellungen[Bearbeiten]
Das Layout des Wizard kann auch vor dem Öffnen in den Einstellungen vorgenommen werden. Bitte gehen Sie dazu wie in der Beschreibung “Manual Test Wizard – Start”vor.
Manual TestStep (API)[Bearbeiten]
In unserer Bausteinbibliothek finden Sie für verschiedene Anforderungen drei verschieden vordefinierte Testbausteine.
Manual TestStep (Text)[Bearbeiten]
Dieser Baustein enthält einen Text-Viewer. Im Input testStepDescription werden die Informationen zu diesem Testschritt erfasst. Die Eingabe ist reiner Text und wird entsprechend dem Textlayout im Eingabe-Editor angezeigt. Im Wizard erscheint das selbe Layout.
Manual TestStep (HTML)[Bearbeiten]
Dieser Baustein enthält einen HTML-Viewer.
Input testStepDescription: HTML-Kenntnisse erforderlich: die Eingabe erfolgt in HTML-Syntax
Hinweis: Der eingebettete HTML-Viewer unterstützt nur eine Teilmenge der HTML-Tags (z.B. wird derzeit das Style-Tag nicht unterstützt). Der HTML-Viewer zeigt den Text übersichtlich an.
Manual TestStep (SimpleWikiStyle)[Bearbeiten]
Hier wird die Testbeschreibung durch folgende, einfache Regeln in HTML umgewandelt:
- Überschriften
- Beginnt eine Zeile mit = wird diese als Überschrift behandelt.
- = <h1> == <h2> === <h3>
- Horizontale Linie
- Beginnt eine Zeile mit oder enthält das Zeichen – wird diese in
umgewandelt.
- Listen
- Beginnt eine Zeile mit * wird sie in <li> umgewandelt.
- Alle anderen Zeilen bleiben unformatiert. Dazu können Sie direkt die html-Formatierungen einbinden.
- Input testStepDescription: Eingabe in einfacher Wiki-Syntax
Auch hier zeigt der HTML-Viewer den Text übersichtlich und gut lesbar an.
The Manual Test Example (A Step by Step introduction)[Bearbeiten]
Öffnen Sie expecco und erstellen Sie eine neue Testsuite. Im ersten Schritt importieren Sie die ManualTestblockbibliothek in die neue Testsuite.
Step – Create a test case Nun wird in Testfall angelegt. Der einfachste Weg ist die direkte Verwendung des Toolbar-Menüs, so wird automatisch ein Tag erstellt.
Wichtig: geben Sie dem Testfall einen sinnvollen Namen. In der Regel beginnt dieser mit einer Nummer, die sich auf die Testverwaltung oder eine Anforderung bezieht. Zusätzlich sollte der Testfall eine Kurzbeschreibung im Namen haben. Beispiel: Zum Beispiel "TC-4711 Login mit gültigen Daten". Bitte dokumentieren Sie den Testfall (Registerkarte Dokumentation), das erleichtert eine spätere Suche, da die Dokumentation im fly by help angezeigt wird, wenn Sie die Maus über den Projektbaum bewegen. Eine weitere Möglichkeit zur Erstellung eines Testfalls: Klicken Sie dafür auf das Netzwerksymbol:
&Oul;ffnen Sie den Tab "Dokumentation" des Aktionsbausteins "New Action" und fügen Sie den Tag "TEST-CASE" an die Tagliste an und drücken sie "Anwenden".
Das Symbol von New Action ändert sich nun im Projektbaum zu Testfall.
Fügen Sie den Test-Case Tag hinzu, können Sie auch später noch bereits existierende Bausteine als Testfall markieren.
Erstellen eines Testschrittes für einen Testfall[Bearbeiten]
Testschritte werden dem Testfall über ein Popup-Menü (rechte Maustaste) im Netzwerkeditor des Testfalls hinzugefügt.
Dies öffnet ein kleines Eingabefenster.
Hier geben Sie den Namen des Testschritts ein. Für die Benennung gelten die selben Regeln wie oben. Wichtig: Wenn Sie diesen Testschritt später in verschiedenen Testfällen wiederverwenden wollen, sollte der Name nicht die Schrittnummer und die Testfallnummer enthalten. Dazu schlagen wir einfach einen Namen wie "TS - Open Application" vor. Beim Drücken von ok, erhalten Sie einen Cursor, mit welchem Sie den Baustein an die gewünschte Stelle plazieren können. Drücken Sie "Übernehmen", um die Änderung im Testfall zu speichern. Im Projektbaum erscheint der neue Baustein direkt unter dem Testfall.
Wählen Sie nun im Projektbaum den neu erstellten Baustein "TS - Anwendung öffnen" aus und öffnen Sie den Dokumentationseditor. Fügen Sie den Tag "TEST-STEP" zur Tag-Liste hinzu und drücken Sie "Übernehmen".
Füge manuellen Wizard-Schritt an einen manual-Test Schritt an[Bearbeiten]
Nun wählen Sie aus, wie der Baustein editiert werden soll. Dafür markieren Sie Ihren Baustein im Projektbaum und wechseln zum Network Tab. Mit der rechten Maustaste öffnet sich ein Dialogfenster, bitte wählen Sie “New Step …”
Im Dialogfenster können Sie einen vorhandenen Baustein auswählen. Für unser Beispiel wählen wir: “MTW-Standard TestStep (SimpleWikiStyle)”.
Mit Ok wird der Baustein zu Ihrem Testschritt hinzugefügt.
Ein Doppelklick auf den Eingangspin vom "testStepDescription" Inputpin wird einen Editor öffnen.
Anstatt eines Doppelklicks knne Sie auch mit der rechten Maustaste "Freeze as String" auswählen um den Editor zu öffnen.
Geben Sie eine Beschriftung z.B. nach den Wiki-Style-Regeln ein, welche im Wizard nachher angezeigt werden soll.
Dann drücken Sie bitte Ok. Der eingegebene Text sollte nun als Input für den ManualTestStep verbunden sein.
Drücken Sie "Übernehmen" um die änderungen die gemacht wurden zu speichern.
Führe Testfall aus und verifiziere die Beschreibung des Wizards Wählen sie den den Testfall im Projektbaum aus und öffnen sie den Tab "Netzwerk". Drücken Sie den "Play"-Button in der Toolbar des Netzwerkeditors. Das Wizard-Fenster sollte geöffnet worden sein und der Testschritt müsste angezeigt werden.
Der angezeigte name des Testfalls sollte nun auch an den namen des Testfalls angepasst worden sein. Ebenso wie der name des Testschritts. Bevor keine Aktion von Ihnen durchgeführt wurde, läuft die Testausführung. Wenn Sie im Wizard das Play-Symbol drücken, stoppt die Testausführung und der Testfall wird als Passed markiert. Der Wizard ist immernoch geöffnet und kann nun von Hand geschlossen werden.
Schritt - Anfügen eines Testfalls an einen Testplan und automatisiertes öffnen und schließen des Wizards[Bearbeiten]
Erstellen Sie einen neuen Testplan.
Wählen Sie den neuen Testplan im Projektbaum aus.
Ziehen Sie dann den Aktionsbaustein in den Testplan mittels drag&drop.
Jetzt soll ein Aktionsblock erstellt werden der als Pre-Action vor der ausführung des Testplans ausgeführt werden soll (Start des Wizards). Danach ein Aktionsblock der als Post-Action ausgeführt wird(Schliessen des Wizards).
Dafür müssen Sie zwei neue Bausteine in den Projektbau einfügen und umbenennen in PostAction und PreAction.
Fügen Sie zur PreAction den "Manual test Wizard -Start" Aktionsblock mittels dem "New Step" und dem "Manual test Wizard -Stop" als PostAction hinzu. Die Aktionsblö erscheinen in der Liste wenn man den Wizard als Pattern einfügt.
Dann müssen Sie die Wizard Start Konfigruration anpassen.
Add to the PreAction the “Manual test Wizard – Start” block using the menu “New Step…” and the “Manual test Wizard – Stop” to the PostAction. The blocks appear in the list if you specify “Wizard” as pattern.
Now we have to specify the wizard start configuration.
So könnte eine mögliche Konfiguration aussehen:
Jetzt müssen die die Pre- und die Post-Action in den Testplan einfügen. Öffnen Sie dafür den Testplan. Dann können Sie mittels drag&drop die Pre- und Postaktion hinzufügen.
Drücken Sie "Übernehmen" um die Änderungen zu speichern und führen Sie den Testplan dann aus. Dann sollte sich der Wizard öffnen wie Sie den Startblock konfiguriert haben. Der Testfall sollte dann ausgeführt werden und am Ende sollte die Postaction den Wizard wieder schließen.
Bitte beachten Sie auch die Testsuite "ManualTestExample.ets" enthält ein gebrauchsfertiges Beispiel mit einem Setup in der Nähe dieser Beschreibung.
