Acceptance Test-driven Development: lesbare Spezifikationen, ausführbare Tests
Automatisiertes Testen ist inzwischen fester Bestandteil jedes modernen Entwicklungsprozesses. Entwickler schreiben Tests mit dem Ziel, die Funktionalität einer Anwendung zu gewährleisten. Diese Tests werden meist in einer Programmiersprache (z. B. Java) erstellt. Daraus ergibt sich zwangsläufig eine Lücke zwischen den eigentlichen Anforderungen, wie sie ein Kunde formulieren würde, und dem Testcode, der die Anforderungen prüft. Acceptance Test-driven Development (ATDD) schließt diese Lücke, indem Anforderungen weitestgehend in natürlicher Sprache formuliert werden, aber gleichzeitig ihre Ausführbarkeit sichergestellt wird.
Ziel von ATDD ist es, verständliche, wartbare und gleichzeitig ausführbare Testspezifikationen zu schreiben. Im vorliegenden Artikel werden die grundlegenden Prinzipien von ATDD eingeführt sowie einige Tools vorgestellt, die diesen Ansatz unterstützen.
Mithilfe geeigneter Testframeworks, wie z. B. JUnit [1] oder TestNG [2], ist es relativ einfach, Anwendungen programmatisch zu testen. Man erzeugt zuerst eine passende Umgebung für den Test, z. B. eine initialisierte Testdatenbank. Dann wird eine bestimmte Funktionalität der Anwendung aufgerufen, etwa die Buchung eines Flugs. Schließlich werden die erwarteten Nachbedingungen geprüft (z. B. ob ein gültiges Ticket ausgestellt wurde). Dieses prinzipielle Vorgehen ist bekannt – trotzdem ist das Schreiben von Tests oft keine triviale Angelegenheit. Selbst bei Verwendung geeigneter Bibliotheken (z. B. zur Kommunikation mit einer Webanwendung) wird der Testcode schnell umfangreich und damit auch schwer wartbar. Darunter leidet nicht nur die Motivation, neue Tests zu schreiben, sondern auch die Qualität der Anwendung. Aus „relativ einfach“ wird schnell „ziemlich aufwändig“.
Obwohl der Testautomatisierung also technisch nichts im Wege steht, stellt sich die Frage, warum der Aufwand, Tests zu schreiben, noch immer so hoch ist. Um die Ursache dieses Problems zu erkennen, muss man einen Schritt zurücktreten und noch einmal darüber nachdenken, warum wir Anwendungen testen und woher die eigentlichen Inhalte für Tests stammen.
Wir schreiben Tests, um sicherzustellen, dass die Anforderungen an unsere Anwendung tatsächlich von der Implementierung, d. h. dem Code der Anwendung, umgesetzt werden. Die Automatisierung ist an dieser Stelle nur ein Vehikel, um der Situation Herr zu werden, dass sich unser Code ständig ändert und dadurch oft unvorhergesehene Effekte auftreten, die existierende Funktionalität beeinflussen. In jedem Fall stellen Tests in ihrem Kern eine technische Umsetzung der Anforderungen dar, die von Kunden kommuniziert wurden. Die essenzielle Information eines Testfalls ist daher die fachliche Anforderung, die er prüft, nicht der technische Ablauf, um sie zu prüfen. Üblicherweise steht aber eben genau der technische Ablauf und nicht die fachliche Anforderung im Vordergrund. Der Testcode spezifiziert diesen Ablauf, die eigentlichen Anforderungen sind nur indirekt, wenn überhaupt erkennbar.
Das Ziel von Acceptance Test-driven Development ist es, die Diskrepanz zwischen fachlichen Anforderungen (wie sie ein Kunde formulieren würde) auf der einen Seite und dem technischen Ablauf der Überprüfung der Anforderungen (wie sie ein Entwickler in einem Test manifestiert) auf der anderen Seite zu überwinden.
ATDD – Another kind of Test-driven Development?
Acceptance Test-driven Development ist eine spezielle, noch relativ junge Art des Test-driven Development. Die ersten Veröffentlichungen zum Thema ATDD sind nicht viel älter als fünf Jahre. Statt „Acceptance Test-Driven Development“ werden oft auch die Bezeichnungen „Specification by example“ oder „Behavior-driven Development“ verwendet. Obwohl verschiedene Autoren durchaus Unterschiede zwischen den konkreten Vorgehensmodellen hinter diesen Bezeichnungen ausmachen, handelt es sich im Kern um ähnliche Ansätze mit vergleichbaren Zielen.
Die oberste Zielstellung der Ansätze ist es, alle an der Erstellung einer Anwendung Beteiligten (Kunden, Fachexperten, Programmierer und Tester) näher zusammenzubringen. Der Austausch über die Anforderungen soll intensiviert werden. Dies darf aber nicht allein auf einer menschlichen Ebene passieren, sondern muss auch konkret technisch untersetzt werden. Wenngleich die Kommunikation zwischen den verschiedenen Parteien Grundlage jeder vernünftigen Anforderungserfassung ist, so geht es bei ATDD darum, Anforderungen so zu erfassen, dass diese später direkt für die Qualitätssicherung, d. h. den Test der Software, genutzt werden können. Auf dem zweiten Teil soll in diesem Artikel der Fokus liegen.
Von der Anforderung zum Test ist es ein weiter Weg
Gojko Adzic beschreibt in seinem Buch „Bridging the Communication Gap“ [3] ausführlich, wie unterschiedlich ein und dieselbe Anforderung von verschiedenen Personen verstanden werden kann. Während Fachexperten ein sehr präzises Wissen über die Domäne der Anwendung haben, so fehlt ihnen der Blick für Grenzfälle, da diese in der Realität selten auftauchen. Programmierer erkennen diese Fälle oft schnell, da sie später zwangsläufig festlegen müssen, wie sich die Anwendung dabei verhalten soll. Tester achten zusätzlich darauf, dass alle nötigen Schritte, z. B. zur Abarbeitung eines Szenarios, besprochen und festgelegt werden, da sie genau diese Schritte später formalisieren müssen. Das Zusammenspiel der verschiedenen Beteiligten kann also geschickt genutzt werden, um die Vollständigkeit der Anforderungen zu verbessern.
Hat man alle Beteiligten an einem Tisch sitzen, stellt sich natürlich die Frage, wie man die erarbeiteten Anforderungen festhält. Die Beschreibung aller nötigen Merkmale einer Anwendung in Klartext, d. h. in natürlicher Sprache, scheint an dieser Stelle das einfachste Mittel zu sein. Um zu vermeiden, dass die Vorstellungen dann später bei der Umsetzung wieder auseinander laufen, sollte der Text möglichst keine Mehrdeutigkeiten besitzen. Das lässt sich am leichtesten vermeiden, wenn man Szenarien (auch Use Cases oder User Stories genannt) spezifiziert, zusammen mit konkreten Eingaben und den dazugehörigen erwarteten Ausgaben. Man beschreibt die Funktionalität der Anwendung anhand von anschaulichen Beispielen. So erklärt sich auch der Name „Specification by Example“.
Möchte man beispielsweise die Funktion eines Buchungssystems für Flüge beschreiben, so wäre die konkrete Eingabe der Name eines Passagiers sowie eine Flugnummer. Die erwartete Ausgabe wäre beispielsweise das Flugticket. Die Ausgabe würde in diesem konkreten Fall natürlich davon abhängen, wie viele andere Passagiere bereits auf dem Flug gebucht sind und welche Sitzplatzkapazität die Maschine hat.
Vereinfacht ausgedrückt könnte die Spezifikation eines solchen Szenarios demnach lauten: „Versucht der Passagier Max Mustermann einen Platz auf dem Flug LH-1234 zu buchen, so erhält er ein gültiges Ticket“. Je nach Testumgebung muss natürlich noch festgelegt werden, welcher Flugzeugtyp auf dem Flug zum Einsatz kommt und wie viele Passagiere bereits eingebucht wurden. Das kann auf ähnliche Art und Weise ausgedrückt werden: „Der Flug LH-1234 wird mit einer Maschine vom Typ Boeing 737 durchgeführt. Es sind noch keine Passagiere auf dem Flug gebucht“.
Die Erstellung solcher Spezifikationen ist einfach, da man das Szenario direkt in natürlicher Sprache beschreiben kann. Die Spezifikation ist für alle Beteiligten verständlich und lesbar. Nicht umsonst werden die meisten Anforderungsdokumente auf genau diesem Weg (z. B. mit Microsoft Word) erstellt. An diesem Punkt endet die Anforderungsspezifikation aber leider oft. Fachexperten, Programmierer und Tester gehen wieder getrennte Wege, die Anforderungen werden nicht direkt weiter verwendet, sondern dienen primär als Gedankenstütze für alle Beteiligten. Um die erarbeiteten Spezifikationen direkt weiter zu nutzen, müsste man sie ausführen, d. h. direkt als Testfälle nutzen können. Genau hier setzen ATDD bzw. die entsprechenden Werkzeuge an. Sie erlauben es, die natürlich-sprachlichen Szenariobeschreibungen auszuführen und direkt zum Test der Anwendung zu nutzen.
Ausführen ja, aber wie?
Um unsere Szenariobeschreibung (z. B. „Versucht der Passagier Max Mustermann einen Platz auf dem Flug LH-1234 zu buchen, so erhält er ein gültiges Ticket“) auszuführen, müssen wir dem Satz eine Bedeutung zuordnen, d. h...

