Oberflächentests kosteneffizient automatisieren2014.java-forum-stuttgart.de/_data/G7_2014.pdf ·...

Berend Semke

Juli 2014

Oberflächentests kosteneffizient automatisieren

Quellen: http://de.wikipedia.org/wiki/Effizienz http://de.wikipedia.org/wiki/Wirtschaftlichkeit

2014-07-17 Oberflächentests kosteneffizient automatisieren 2

Effizienz

http://de.wikipedia.org/wiki/Effizienz

http://de.wikipedia.org/wiki/Wirtschaftlichkeit


Effizienz bei Testautomatisierung

• Mögliche Strategien: • Entweder bei konstanten Kosten die Qualitätsaussagen erhöhen, • oder bei konstanter Qualitätsaussage die Kosten reduzieren.

Wirtschaftlichkeit = = Ertrag Aufwand

Qualitätsaussage Kosten

Testende-Kriterium


Inhalt

Erfolg(-reiche Testautomatisierung)

braucht Ziele.


Inhalt

Erfolg braucht Ziele.

Capture and Replay ist die Wurzel allen Übels.


Inhalt


Capture and Replay die Wurzel allen

Übels.

Ein Hammer erschlägt jedes Problem.


Inhalt



Übels.

Ein Hammer erschlägt jedes

Problem.

A fool with a tool…


Problem.

Werkzeuge brauchen Wissen.


Übels.



Inhalt

Womit? Wer?

Wie? Was?


Problem.



Übels.



Erfolgssummanden faktoren

Womit? Wer?

Wie? Was?


Was automatisiert testen?

Wer das Ziel kennt, kann entscheiden wer entscheidet, findet Ruhe wer Ruhe findet, ist sicher

wer sicher ist, kann überlegen wer überlegt, kann verbessern.

(Konfuzius)


Was automatisiert testen?

Wer das Ziel kennt, kann entscheiden wer entscheidet, findet Ruhe wer Ruhe findet, ist sicher

wer sicher ist, kann überlegen wer überlegt, kann verbessern.

Kosten Qualitätsaussage


Kosten

manuell automatisiert

Aufwände bei wenig Wiederholungen

Test-Spec Impl. Test


Aufwände bei vielen Wiederholungen

Test-Spec Impl. Test


Kosten

manuell man. (pro Test)

automatisiert aut. (pro Test)

Kosten

Wiederholungen


Qualitätsaussage


Test-Qualität

Wiederholungen


Qualitätsaussage / Kosten

Viele Wiederholungen verringern nicht nur die Kosten, sie verbessern auch die relative Qualitätsaussage einer

Automatisierung


Effizient automatisieren

Ob eine Automatisierung wirtschaftlich ist, muss für jede Anforderung individuell bewertet werden.


Kosten / Nutzen - Einflüsse

Spezifikation Implementierung Test Test Test Test Test

Erfordert Stabilität & Frequenz

Erhöht sich durch Komplexität

• Standard-Widgets? • Statische oder berechnete Werte? • Kontrollstrukturen benötigt? • …

Konstant Auch automatisierte Oberflächentests brauchen qualitativ hochwertige Testspecs!


Anforderungen auswählen

• Wie wähle ich die relevanten Anforderungen aus?

BYOI (Build your own index)


Anforderungen auswählen

Zum Beispiel:

E = Ertrag / Aufwand = Ertrag / Komplexität = Auswirkung * Frequenz / Komplexität = Auswirkung * Frequenz * Stabilität / Komplexität = Auswirkung * Frequenz * Stabilität * Lösbarkeit = xa*Auswirkung * xf*Frequenz * xs*Stabilität * xl*Lösbarkeit

BYOI (Build your own index)


Problem.



Übels.



Erfolgsfaktoren

Womit? Wer?

Wie? Was?


Wie automatisiert testen?

Es sind gerade die Inkonsequenzen des Lebens, welche die größten Konsequenzen haben.

(André Gide)


Wie automatisiert testen?

Es sind gerade die Inkonsequenzen des Lebens, welche die größten Konsequenzen haben.

Kleine Vorteile

jetzt Große Vorteile später


Problem.



Übels.



Erfolgsfaktoren

Womit? Wer?

Wie? Was?


Womit automatisiert testen?

Wer als Werkzeug nur einen Hammer hat, sieht in jedem Problem einen Nagel.

(Paul Watzlawick)


Tools…

• … gibt es.


Unterschiede der TA-Tools

• Technologie • Unterstützte Tool-Kits • Unterstützte Programmiersprachen • Objekt-Erkennung

• Integration in Tool-Chain

• Ergonomie

• Erweiterbarkeit

• Anschaffungskosten


Objekt-Erkennung

• Technologie • Unterstützte Tool-Kits • Unterstützte Programmiersprachen

• Objekt-Erkennung • abgeleitete Widgets • verschobene Widgets

• innerhalb des Containers • in neuen Container • auf anderen Monitor

• Test auf Abwesenheit


Problem.



Übels.



Erfolgsfaktoren

Womit? Wer?

Wie? Was?


Wer testet automatisiert?

A fool with a tool is still a fool (Grady Booch)


Anforderungsprofil - Klassisch Test-

kenntnisse

Anforderungs- erhebung

Programmier- kenntnisse

Entwickler

Tester

RE


Anforderungsprofil - Agil Test-

kenntnisse

Anforderungs- erhebung

Programmier- kenntnisse

Entwickler

Tester

RE

Oberflächen-test

Automatisierer


Dem Anforderungsprofil entsprechen

• SW-Entwickler Testkenntnisse näher bringen

• Testern Programmierkenntnisse näher bringen



• SW-Entwickler Testkenntnisse näher bringen • Status & Anerkennung • Fachkenntnisse Test & QM • Einfach mal Fragen!




• SW-Entwickler Testkenntnisse näher bringen


• Einfach mal Fragen! • „Serious games“?

http://www.antme.net/ http://blobby.sourceforge.net/

http://www.antme.net/

http://blobby.sourceforge.net/

Testautomatisierung ist Software-Entwicklung

benötigt sowohl Test- als auch SW-Entwicklungs-

Kenntnisse

Objekterkennung spart Wartungskosten

Lizenzkosten meist irrelevant

Testautomatisierung ist Software-Entwicklung

Zieldefinition: Kosten oder Qualitätsaussage

Anforderungsmanagement führt zu Test-Spec. BYOI


Zusammenfassung

Womit? Wer?

Wie? Was?


etamax space GmbH

Berend Semke

Frankfurter Straße 3 d

D-38122 Braunschweig

Tel +49 (0)531.866688.35

Fax +49 (0)531.866688.99

www.etamax.de

Email [email protected]

www.xing.com/profile/Berend_Semke

mailto:[email protected]

Oberflächentests kosteneffizient automatisieren2014.java-forum-stuttgart.de/_data/G7_2014.pdf ·...

Documents

Transcript of Oberflächentests kosteneffizient automatisieren2014.java-forum-stuttgart.de/_data/G7_2014.pdf ·...