DevOps ist heutzutage in aller Munde, Continuous Integration und Continuous Delivery haben inzwischen den Charakter einer Selbstverständlichkeit. Doch wie stellt man sicher, dass die kontinuierlich entwickelte und gelieferte Software auch den Anforderungen genügt, insbesondere, wenn das Gesamtsystem komplex und zusätzlich noch verteilt ist? Testautomatisierung ist eine Möglichkeit, aber wie realisiert man diese konkret?
Bei der Entwicklung verteilter Systeme stellt sich oft die Frage nach effizienten Testverfahren. Angemessene Teststrategien sollten nicht nur das Verhalten der Einzelkomponenten des Gesamtsystems berücksichtigen, sondern auch das Zusammenspiel aller Komponenten im Integrationstest überprüfen. Die Herausforderungen umfassen einerseits das automatische Aufsetzen der Testumgebung, andererseits die Steuerung der Tests gegen die verschiedenen Einzelkomponenten. Will man all dies auch noch möglichst automatisiert unterstützen, ergeben sich weitere Probleme, für die Lösungen notwendig sind.
Automatisierung im Test ist in der agilen Entwicklung unabdingbar. Software muss heutzutage oft kontinuierlich integriert und in der Regel auch in regelmäßigen Abständen an den Kunden ausgeliefert werden. Kurze Releasezyklen werden immer mehr zur Regel. Ohne eine sehr gute Testabdeckung durch automatisierte Tests ist Softwarequalität nur schwer bis unmöglich zu realisieren. Unbezahlbar wertvoll werden automatisierte Tests, wenn Software einem größeren Refactoring unterzogen wird, wie es aufgrund neuer Anforderungen immer einmal auftreten kann. Dies gilt insbesondere bei Software mit Produktcharakter oder bei Frameworks, die einen noch längeren Lebenszyklus haben können als Software, die in einem Projekt für einen Kunden entstanden ist. Hier ist mithilfe automatisierter Tests leicht zu ermessen, ob ein Refactoring zu unerwünschten Nebeneffekten geführt hat.
Neben der effizienten Ausführung der Tests, zum Beispiel im nächtlichen Build durch einen CI-Server, gewährleistet der automatisierte Test eine Wiederholbarkeit der Testergebnisse, die beim manuellen Test nur schwer erreicht werden kann. Es muss nur einmal ein anderer Tester die Tests durchführen, und schon können die Ergebnisse erheblich abweichen – aus eigener Erfahrung kann dies selbst dann der Fall sein, wenn eine detaillierte Testfallspezifikation vorliegt. Wenn die Tests zudem aus der Entwicklungsumgebung heraus automatisiert ausführbar sind, hat es auch ein Entwickler sehr viel leichter, im Fehlerfall die gleiche oder mindestens eine ähnliche Konstellation wie der Tester herzustellen und das Problem zu debuggen.
Im Folgenden sollen anhand eines Praxisbeispiels Lösungsstrategien für den automatisierten Test eines verteilten Systems aufgezeigt werden.
Ein Praxisbeispiel
Abb. 1: Komponenten des KonfigurationssystemsEines der Produkte der GEBIT Solutions GmbH ist ein weltweit verteilt eingesetztes System zur Erstellung und Verteilung von Anwendungskonfigurationen (Abb. 1). Es besteht im Kern aus einer Serverkomponente mit diversen Schnittstellen, einem Webclient und einem Rich-Client. Ein Anwendungsfall ist zum Beispiel die Übertragung wichtiger Betriebsparameter für Kassen- oder Warenwirtschaftssysteme, die in verschiedenen Ländern und Regionen zu unterschiedlichen Zeiten in unterschiedlichen Ausprägungen definiert sein sollen.
Aus Gründen der Betriebssicherheit und Lastverteilung ist üblicherweise die Serverkomponente an verschiedenen Standorten im Einsatz. Die einzelnen Server kommunizieren miteinander, einerseits um Betriebsdaten auszutauschen, andererseits um Konfigurationsdaten weltweit zu replizieren und somit lokal zur Verfügung zu stellen. Die einzelnen Serverinstanzen bilden dabei eine Baumstruktur mit einem Top-Level-Knoten und Kindknoten über mehrere Ebenen; dabei kann ein Netzwerk leicht 10 000 und mehr Knoten umfassen. Für die Kommunikation der Knoten untereinander werden aktuell JMS- bzw. JMX-Schnittstellen zur Verfügung gestellt, zukünftig alternativ auch weitere, beispielsweise EJB-Schnittstellen. Die Kommunikation erfolgt dabei primär zwischen Eltern und den direkten Kindern, für einzelne Funktionen aber auch zwischen Eltern und indirekten Kindern.
Neben den eigenen Clients, die zur Erstellung und Änderung der Konfigurationen sowie zur Überwachung des Servernetzwerks dienen und dazu spezielle eigene Schnittstellen zur Kommunikation nutzen, gibt es auch eine Reihe bekannter sowie auch eine Reihe unbekannter externer Systeme. Diese nutzen zur Kommunikation entweder die öffentlichen EJB- oder Web-Service-Schnittstellen. Dabei umfassen die bekannten externen Systeme sowohl projektbezogene Eigenentwicklungen der GEBIT Solutions GmbH als auch Systeme von Drittherstellern.
Die Herausforderungen beim Test, insbesondere bei der Testautomatisierung eines solch komplexen Systems, umfassen:
-
die Kommunikation der einzelnen Komponenten des Systems untereinander – sowohl Server-zu-Server-Kommunikation als auch Client-zu-Server-Kommunikation
-
die Simulation von Clients oder alternativ die Einbeziehung bekannter Clients in den Test
-
die Berücksichtigung von Laufzeitdifferenzen, da nicht immer davon auszugehen ist, dass Daten zeitnah in den zu testenden Komponenten verfügbar sind
-
die effiziente Verteilung und das Set-up der Einzelkomponenten
Der Einsatz des Systems bei verschiedenen Kunden unter unterschiedlichen Voraussetzungen erschwert zusätzlich den Test, da durch unterschiedliche kundenspezifische Betriebskonfigurationen des Systems...

