Loubaresse, Michel - Iqnite

Titel
Testautomatisierung: Open-Source oder Kommerzielle Software?
Referent(en)
Michel Loubaresse, ISTEC, Deutschland
An wen richtet sich der Beitrag?
Testmanager, Testautomatisierer, technische Experten
Stichwörter
Testautomatisierung, Open-Source, Risikomanagement
Zusammenfassung
Motivation
Open-Source Frameworks haben Konjunktur und stehen kommerziellen Lösungen in Punkto
Funktionsumfang häufig kaum nach. Es entstehen keine Lizenzkosten oder Abhängigkeiten von
einzelnen Anbietern. Insbesondere wenn es um Tools zur Testautomatisierung für den Eigenbedarf
geht, ist mitunter viel Customizing erforderlich. Dieses kann mit Open-Source bei Bedarf schnell und
unkompliziert in-house erfolgen. Die Vorteile liegen auf der Hand und sind auf den ersten Blick
verführerisch. Es gibt aber auch Risiken, die vor dem Fällen von Grundsatzentscheidungen
berücksichtigt werden sollten. Die Erfahrung hat gezeigt, dass sich viele Risiken durch Analysen im
Vorfeld zuverlässig minimieren lassen. Dies beginnt mit der Auswahl relevanter Vergleichskriterien
und ihrer strukturierten Gegenüberstellung. Neben unmittelbaren Aspekten wie den Requirements
oder der Systemumgebung sind auch eine Reihe wichtiger Rahmenbedingungen zu beachten. Eine
mangelhafte Dokumentation oder Codequalität kann zu einer längeren Lernkurve oder einem
deutlich höheren Kosten- und Zeitbedarf für Anpassungen führen. Änderungen in der
Kernfunktionalität können zu Inkompatibilitäten führen, die Upgrades oder ein Merging mit einer
höheren Version unmöglich machen.
Unser Vortrag richtet sich gleichermaßen an Manager wie auch Entwickler im Testing-Umfeld und
soll aufzeigen, wo die erwähnten Risiken lauern und was bei Gegenüberstellungen von Open-Source
und kommerziellen Tools beachtet werden sollte.
Basis
Ziel unseres Beispielprojekts war die Entwicklung und Einführung eines Passausweissystems durch
ein Berliner Hochsicherheitsunternehmen. Die zahlreichen Testszenarien wiesen einen hohen
technischen und fachlichen Komplexitätsgrad auf. Zudem setzte sich das Produktionssystem aus
duzenden Softwarekomponenten zusammen, was häufige Releases und damit Regressionstests
nach sich zog. Für den Gesamtsystemtest wurde eine Testautomatisierung dadurch unabdingbar.
Besonderes Augenmerk wurde zudem auf die Möglichkeit einer abteilungsübergreifenden
Wiederverwendbarkeit der Lösung gelegt. Nach einem längeren Entscheidungsprozess entschied
iqnite 2012 Schweiz, 25. September in Zürich - 1 -

man sich für das Open-Source Tool JMeter als Ausgangsbasis.
Lösung
Die entwickelte Lösung bestand aus einer individuell auf die Bedürfnisse des Kunden angepassten
Version des Open-Source Tools J-Meter. Diese war in der Lage, sowohl die funktionalen als auch
die nicht-funktionalen Requirements des Gesamtsystems effizient zu testen. Die Lösung verfügte
darüber hinaus über ein umfangreiches Web-Basiertes Reporting um Testfälle verfolgen und
auswerten zu können.
Ergebnis
Mithilfe der entwickelten Testautomatisierung konnte eine signifikante Steigerung der Testabdeckung
bei gleichzeitiger Reduzierung der Ausführungsdauer erreicht werden. In mehreren Fällen konnten
gravierende Fehler noch rechtzeitig vor einem Produktiveinsatz aufgedeckt werden.
Ausblick
Unser Kunde konnte wichtige Erkenntnisse für zukünftige Projekte dieser Art gewinnen:
Rückblickend wäre der Mittelweg aus Open-Source und kommerziellen Produkten die bessere
Lösung gewesen. Leichtgewichtige kommerzielle Frameworks können einen guten Kompromiss
darstellen und die Vorteile aus beiden Welten miteinander verbinden. Sie können geringe Kosten mit
einer hohen Flexibilität und einem professionellen Support verbinden. In zukünftigen Projekten wird
unser Kunde dies deutlich stärker in sein Kalkül einbeziehen.
Vortragsessenz
Der Vortrag wird anhand eines Beispielprojekts aufzeigen, wo die Fallstricke bei der Einführung von
Open-Source Software für die Testautomatisierung liegen. Das Augenmerk wird sich hierbei darauf
richten, welchen Unterschied der Einsatz eines kommerziellen Frameworks in diesem Fall gemacht
hätte. Bei unserer Nachbetrachtung werden wir zum einen erläutern, was bei grundlegenden
Technologieentscheidungen mit ins Kalkül gezogen werden sollte. Zum anderen werden wir
beleuchten, was bei Umsetzung und Einführung beachtet werden muss.
Biografie
Michel Loubaresse studierte Kommunikations- und Softwaretechnik an der FH Albstadt-Sigmaringen
und machte dort 2003 seinen Abschluss zum Diplom-Ingenieur. Im Anschluss arbeitete er zunächst
als Software-Entwickler im Java-Umfeld an verschiedenen Projekten für einen internationalen
Versicherungsbroker mit und wechselte 2006 zum Systemhaus ISTEC GmbH. Dort hat er sich im
Rahmen von großen Kundenprojekten auf Softwarequalitätssicherung spezialisiert und ist
mittlerweile für den gleichnamigen Geschäftsbereich verantwortlich. Während dieser Zeit hat er u. A.
die ISTEC Test-Suite Toolfamilie für Testautomatisierung und Hardware-Simulation mit ins Leben
gerufen.
iqnite 2012 Schweiz, 25. September in Zürich - 2 -