eine einführung in das automatisierte testen mit dem robot...

aformatik Training & Consulting GmbH & Co. KG 1

Eine Einführung in das automatisierte Testen

mit dem Robot-Framework

Thomas Gauss

aformatik Training & Consulting GmbH & Co. KG

Fahrplan – Agenda

Vorstellung des Robot-Frameworks

Framework zur (automatischen) Durchführung von Akzeptanztests

Keyword-Driven Testing

generisch, modular und erweiterbar

in aktiver Entwicklung (seit 2005)

frei verfügbar

umfangreich dokumentiert

Einsatzzweck

Integrations-

System-

Akzeptanz-

Einsatzzweck

Integrations-

System-

Akzeptanz-

Test-Framework - Typen

System under Test

Framework

Linear

Daten und Ablauf

System under Test

Framework

System under Test

Framework

Data-driven

Ablauf

Keyword-driven

AblaufDaten

Test-Framework - Typen

System under Test

Framework

Linear

Daten und Ablauf

System under Test

Framework

Data-driven

Ablauf

Keyword-driven

AblaufDaten

System under Test

Framework

Keyword-Driven Testing

Beschreibung eines Tests durch verständliche Anweisungen („Keywords“)

Tatsächliche (technische) Durchführung des Tests wird vom Framework übernommen

Beispiel:

Launch Application de.aformatik.jsf2015.SampleAppStarter

Select Main WindowPush Button Ändere TitelSelect Dialog Titel-EingabeInsert Into TextField OptionPane.textField Herzlich willkommen beim...Push Button OK

Select Main WindowPush Button Wähle BildChoose From File Chooser jfslogo.jpg

Testablauf

Robotframework

Ablauf

„Input“

Testablauf

Robotframework

Ablauf

„Input“

Testablauf

Robotframework

Ablauf

„Input“

Protokoll

„Output“

Test-Protokoll

Framework-Stack

Robotframework

Ablauf

Protokoll

Framework-Stack

Robotframework

Ablauf

Protokoll

Keyword-Bibliotheken

Framework-Stack

Robotframework

Ablauf

Protokoll

Python

(C)Python

Framework-Stack

Robotframework

Ablauf

Protokoll

Python

(C)Python PyPy

Framework-Stack

Robotframework

Ablauf

Protokoll

Python

(C)Python PyPy Jython

Framework-Stack

Robotframework

Ablauf

Protokoll

Python

Framework-Stack

Robotframework

Ablauf

Protokoll

Python

„Generisch, modular und erweiterbar“

Framework kommuniziert über „Benutzerschnittstelle“ mit dem zu testenden Programm

(SUT – „System under Test“)

Trennung von Test-Beschreibung, -Implementierung und -Daten

Ergebnisausgabe auch als xml (für automat. Weiterverarbeitung)

Eigene Bibliotheken einbindbar

Framework ist freie Software

Entwicklung

seit 2005, Master-Arbeit von Pekka Klärck (geb. Laukkanen)

Entwicklung wird unterstützt durch Nokia (Siemens) Networks

Freie Software (Apache 2.0 Lizenz)

Verteilt auf eigene Webseite, Github und (früher) Google Code

Teilprojekte teils ausgelagert, teils eingegliedert

Sprache: Python

Umfangreiche Dokumentation zum Framework

Dokumentation zu Keywords („Libdoc“)

Automatische Dokumentation der Keyword-Bibliotheken, ähnlich zu Javadoc

Fahrplan – Agenda

Testdaten-Aufbau

*** Test Cases ***Testfall Eins

Log Hallo Welt!Log Noch mehr Text...

Testfall ZweiLog Und noch mehr Text...Log und Schluss!

hello_world.robot

Testdaten-Aufbau

hello_world.robot

Testdaten-Aufbau

hello_world.robot

Testdaten-Aufbau

hello_world.robot

Testdaten-Aufbau

hello_world.robot

Testdaten-Aufbau

hello_world.robot

Testdaten-Aufbau

Testsuite

(Text-Cases-Datei)

hello_world.robot

Testdaten-Aufbau

Testsuite

(Text-Cases-Datei)

hello_world.robot

*** Test Cases ***Noch ein Testfall

Log Hallo Welt!...

hello2.robot

Testsuite

(Text-Cases-Datei)

hello_world.robot

Log Hallo Welt!...

hello2.robot

Log Hallo Welt!...

hello3.robot

Testdaten-Aufbau

Testsuite

(Text-Cases-Datei)

hello_world.robot

Log Hallo Welt!...

hello2.robot

Log Hallo Welt!...

hello3.robot

Testsuite

Eingabeformat

„Tabellenartig“

Verschiedene Eingabeformate:

tab-separated values (TSV)

plain text (mit Doppel-Leerzeichen oder Pipe); .robot, .txt

reStructuredText (reST)

Testfall Eins

Log Hallo Welt!

Eingabeformat

„Tabellenartig“

Testfall Eins

Log Hallo Welt!

Testfall EinsLog Hallo Welt!

Eingabeformat

„Tabellenartig“

Testfall Eins

Log Hallo Welt!

Eingabeformat

„Tabellenartig“

Testfall Eins

Log Hallo Welt!

Eingabeformat

„Tabellenartig“

Testfall Eins

Log Hallo Welt!

}Einfache und

laxe Syntax

(„semicolon free“)

Keywords

Framework stellt grundlegende Keywords bereit

(z.B. „Log“, „Should Be Equal“, …)

Framework liefert zudem Keyword-Bibliotheken, z.B. für

Swing, Selenium(2) (Browserschnittstelle für Webanwendungen)

Datenbank-Zugriff

Telnet, HTTP, SSH,…

Screenshots, Betriebssystemzugriff, Benutzereingaben

Android, IOS

Zusammenfassung von Keywords zu einem neuen Keyword

selbstdefinierte Keywords (mit Python oder Java)

Keyword wirft Exception, falls Test fehlschlägt

Beispiel (1)

*** Settings ***Library SwingLibraryLibrary Screenshot

*** Test Cases ***JFS-Demo-Test

Launch Application de.aformatik.jsf2015.SampleAppStarterSleep 3 seconds

Select Main WindowPush Button Ändere TitelSleep 3 seconds

Select Dialog Titel-EingabeInsert Into TextField OptionPane.textField Herzlich willkommen beim...Sleep 3 seconds

Take Screenshotwelcome-jfs.robot

Beispiel (1)

Select Main WindowPush Button Ändere TitelSleep 3 seconds

Select Dialog Titel-EingabeInsert Into TextField OptionPane.textField Herzlich willkommen beim...Sleep 3 seconds

Take Screenshotwelcome-jfs.robot

Beispiel (2)

*** Settings ***

*** Test Cases ***

*** Keywords ***Wähle Titel

[Arguments] ${titel} [Documentation] Wählt einen Titel aus.Push Button Ändere TitelSleep 3 seconds

Select Dialog Titel-EingabeInsert Into TextField OptionPane.textField ${titel}Sleep 3 seconds

Push Button OKSleep 3 seconds

welcome-jfs.robot

……

Beispiel (2)

*** Settings ***

*** Test Cases ***

[Arguments] ${titel}[Documentation] Wählt einen Titel aus.Push Button Ändere TitelSleep 3 seconds

Select Dialog Titel-EingabeInsert Into TextField OptionPane.textField ${titel}Sleep 3 seconds

Push Button OKSleep 3 seconds

welcome-jfs.robot

……

Beispiel (2)

*** Settings ***

*** Test Cases ***

Wähle Bild[Arguments] ${dateiname}Push Button Wähle BildSleep 3 secondsChoose From File Chooser ${dateiname}

welcome-jfs.robot

……

Beispiel (2)

Select Main WindowWähle Titel Herzlich willkommen beim...

Select Main WindowWähle Bild jfslogo.jpg

Take Screenshot

welcome-jfs.robot

Beispiel (3)

[Arguments] ${titel}[Documentation] Wählt einen Titel aus.Push Button Ändere Titel

Titel muss "${titel}" sein[Documentation] Überprüft den Titel.${actual_title}= Get Selected Window TitleShould Be Equal ${titel} ${actual_title}

welcome-jfs.robot

Beispiel (3)

Select Main WindowWähle Titel Herzlich willkommen beim...

Select Main WindowTitel muss "Herzlich willkommen beim..." sein

Select Main WindowWähle Bild jfslogo.jpg

Take Screenshot…

welcome-jfs.robot

Beispiel (4)

*** Variables ***${DELAY}= 3 seconds

Select Main Window

welcome-jfs.robot

Beispiel (4)

*** Variables ***${DELAY}= 3 seconds

Launch Application de.aformatik.jsf2015.SampleAppStarterSleep ${DELAY}

Select Main Window

welcome-jfs.robot

Fahrplan – Agenda

Aufbau einer Test-Cases-Datei

*** Settings ***

*** Variables ***

*** Test Cases ***

*** Keywords ***

welcome-jfs.robot

……

Testdaten-Aufbau - Revisited

hello_world.robot

Log Hallo Welt!...

hello2.robot

Log Hallo Welt!...

hello3.robot

Testsuite

01__hello_world.robot

Log Hallo Welt!...

02__hello2.robot

Log Hallo Welt!...

03__hello3.robot

Testsuite

01__hello_world.robot

Log Hallo Welt!...

02__hello2.robot

Log Hallo Welt!...

03__hello3.robot

Testsuite

*** Settings ***Suite Setup …Suite Teardown …

__init__.robot

Syntax-Besonderheiten

Keywords (und Variablen, etc.) sind case-insensitive und

(einzelne) Spaces and Underscores werden ignoriert:

Beim Aufruf eines Keywords können „Given”, „When“, „Then“, „And“ und „But“

hinzugefügt werden (ohne Auswirkung).

(Ermöglicht „Behavior Driven Development“-Stil)

Mehr als 2 Leerzeichen werden wie zwei Leerzeichen behandelt

Zeilenumbruch:

Wähle Titel Herzlich willkommen beim...

wäH le_ti_tel Herzlich willkommen beim...

Wähle Titel... Herzlich willkommen beim...

SwingLibrary

Es muß zuerst ein Kontext festgelegt werden:

z.B. ,

In diesem Kontextes werden Komponenten identifiziert durch

ihren Index im Container (nicht zu empfehlen),

ihren Namen,

ihre Beschriftung (falls vorhanden, z.B. bei Buttons).

Hilfsmittel:

Ctrl+Shift+F1 (Swing)

Als Kontext dürfen leider nur bestimmte Container dienen:

Select Dialog Titel-EingabeSelect Main Window

List Components in Context

Entwicklungsumgebung

RIDE („Robot-IDE“)

Plugin/Syntax-Highlighting für

Eclipse,

Notepad++, Vim, Emacs, …

Fahrplan – Agenda

Beispiel (1)

*** Settings ***Library de.aformatik.robotlib.MyRobotLibrary

welcome-jfs.robot

Beispiel (1)

welcome-jfs.robot

public class MyRobotLibrary extends AnnotationLibrary {public MyRobotLibrary() {super(Arrays.asList("de/aformatik/robotlib/kw/*"));

MyRobotLibrary.java

Beispiel (1)

welcome-jfs.robot

public class MyRobotLibrary extends AnnotationLibrary {public MyRobotLibrary() {super(Arrays.asList("de/aformatik/robotlib/kw/*"));

MyRobotLibrary.java

@RobotKeywordspublic class TreeTableKeywords {

@RobotKeyword("Expands a node in my tree table.")@ArgumentNames({ "nodeIdentifier" })public void expandMyTreeTableNode(String nodeIdentifier) throws Exception {

…de/aformatik/robotlib/kw/TreeTableKeywords.java

Beispiel (1)

Expand My TreeTable Node Historie|Herzlich willkommen beim...

welcome-jfs.robot

System.out.println("*INFO* " + "expandMyTreeTableNode: " + nodeIdentifier);

ContainerOperator mainframe = (ContainerOperator) Context.getContext();

JRootPane rootPane = (JRootPane) mainframe.getComponent(0);JLayeredPane layeredPane = (JLayeredPane) rootPane.getComponent(1);JPanel contentPane = (JPanel) layeredPane.getComponent(0);JScrollPane scrollPane = (JScrollPane) contentPane.getComponent(0);JViewport viewport = (JViewport) scrollPane.getComponent(0);JXTreeTable treetable = (JXTreeTable) viewport.getComponent(0);JTree theTree = (JTree) treetable.getCellRenderer(0, 0);

Beispiel (1)

JTree theTree = (JTree) treetable.getCellRenderer(0, 0);

JTreeOperator jemmyOperator = new JTreeOperator(theTree);TreeOperator robotOperator = new TreeOperator(jemmyOperator);

robotOperator.expand(nodeIdentifier);}

Beispiel (1)

de/aformatik/robotlib/kw/TreeTableKeywords.java

JTree theTree = (JTree) treetable.getCellRenderer(0, 0);

JTreeOperator jemmyOperator = new JTreeOperator(theTree);TreeOperator robotOperator = new TreeOperator(jemmyOperator);

robotOperator.expand(nodeIdentifier);}

Beispiel (1)

API / Kommunikation mit dem Framework

${actual_title}= Get Selected Window Title

welcome-jfs.robot

public void expandMyTreeTableNode(String nodeIdentifier) throws Exception {

TreeTableKeywords.java

API / Kommunikation mit dem Framework

${actual_title}= Get Selected Window Titlewelcome-jfs.robot

public void expandMyTreeTableNode(String nodeIdentifier) throws Exception {

…TreeTableKeywords.java

public class TestData {private final String nodeIdentifier = "Historie|Herzlich willkommen beim...";

public String getNodeIdentifier() {return this.nodeIdentifier;

API - Rückgabewerte

${testdata}= Create Test Data

Expand My TreeTable Node ${testdata.getNodeIdentifier()}

welcome-jfs.robot

@RobotKeyword("Creates a pojo!")public TestData createTestData() {return new TestData();

}PojoExampleKeywords.java

TestData.java

public class TestData {private final String nodeIdentifier = "Historie|Herzlich willkommen beim...";

public String getNodeIdentifier() {return this.nodeIdentifier;

API - Rückgabewerte

${testdata}= Create Test Data

Expand My TreeTable Node ${testdata.getNodeIdentifier()}

welcome-jfs.robot

@RobotKeyword("Creates a pojo!")public TestData createTestData() {return new TestData();

}PojoExampleKeywords.java

TestData.java

public class MyRobotLibrary extends AnnotationLibrary {public static final String ROBOT_LIBRARY_SCOPE = "GLOBAL"; public MyRobotLibrary() {super(Arrays.asList("de/aformatik/robotlib/kw/*"));

API - Klassenkonstanten

MyRobotLibrary.java

JavalibCore

MyRobotLibrary.java

@Autowiredprivate TreeTableKeywords treeTableKeywords;

@RobotKeyword("Processes a pojo!")@ArgumentNames({ "testData" })public void processTestData(TestData testData) throws Exception { new TreeTableKeywords().expandMyTreeTableNode(testData.getNodeIdentifier());

JavalibCore

MyRobotLibrary.java

@Autowiredprivate TreeTableKeywords treeTableKeywords;

@RobotKeyword("Processes a pojo!")@ArgumentNames({ "testData" })public void processTestData(TestData testData) throws Exception {this.treeTableKeywords .expandMyTreeTableNode(testData.getNodeIdentifier());

Fragen / Kontakt / Download

aformatik-Stand (Nr. 5) im Foyer vor dem Hegel Saal

thomas.gauss@aformatik.de

Testsuite verfügbar unter:

http://www.aformatik.de/training/beispielprogramme.html

Homepage: http://www.aformatik.de

Quellen

http://robotframework.org

Pekka Laukkanen: Data-Driven and Keyword-Driven Test Automation Frameworks,

2006, Master Thesis, Helsinki University of Technology

http://www.heise.de/developer/artikel/Automatisierte-Tests-mit-dem-Robot-Framework-

1834917.html, 2013

eine einführung in das automatisierte testen mit dem robot...

Documents

automatisierte qualitätsbewertung am beispiel von matlab...

modellierung, entwurf und automatisierte herstellung von

optische schnittkantenmessung automatisierte...

automatisierte probabilistische (süd-)föhnvorhersage ·...

automatisierte qualitätskontrolle der rohmilch im roboter

_data peserta lulus cpnsd dumai 2009

automatisierte konstruktion von zahnradgetrieben für die

herausforderung automatisierte bereitstellung von qlik ......

automatisierte fe-festigkeitsnachweise von strukturen

roadshow 2018 - automatisierte prozesse im betrieb

täglich automatisierte preisentscheidungen für den...

digitale, automatisierte entscheidprozesse

aufmaßformulare als automatisierte interaktive pdf

automatisierte medikamentendistribution automatisierung

pfm 24 cc - compactcell automatisierte mikropräzisions

broschüre: automatisierte virtuelle rekonstruktion

automatisierte schweißsysteme

expertenforum automatisierte messtechnik...ap_format_a4...

automatisierte nachrichtenproduktion am beispiel...

e-mail marketing: automatisierte texte