Qualitätssicherung mit Tools von Mercury Interactive Ralf Schulz System Engineer 10. November 2000

n Führend im Web Performance Management Lösungen l 65% Umsatz in 1999 n Gegründet im August, 1989 l IPO im Oktober NASDAQ: MERQ l Stock Splits - Feb 1999, Feb 2000 n Marktführer im Testen von verteilten Applikationen n 45% Marktanteil n 40 weltweite Büros l Mitarbeiter weltweit l 300+ engineers in R&D n Zertifizierte Third Party Consultants Mercury Interactive: Web Infrastructure Company n Geschäftsbeziehung über Web l Sales und Kunden Support n Aber... 20% Operating Margin M$34.7 Profit

Custom C/S 20% ERP 25% MF 10% E-business & New Tech 45% Business Breakdown

Standard-Software? n Business Process Reengineering n Abbildung individueller Geschäftsprozesse und Kundenbedürfnisse n Modulare Einführung Skalierbarkeit? n Anbindung an vohandene Systeme Jede SAP R/3 Installation ist individuell! Notwendigkeit von Softwaretests

Laufen alle Geschäftsprozesse auch mit mehreren Benutzern gleichzeitig? Arbeitet meine Applikation mit anderen Anwendungen fehlerfrei? Wieviele Anwender verkraftet meine Implementierung? Wie läuft meine Applikation auf anderer Hardware? Läuft auch alles noch wenn ich standortübergreifend implementiere? QS-Anforderungen RISIKO RISIKO! Funktionalität Leistung Skalierbarkeit Interoperabilität Plattformwechsel Größenordnung Systeme Sind alle Geschäftsprozesse richtig abgebildet?

Over-budget, Late, with Reduced Functionality 53% Succeed 16% Failed 31% The Standish Group Study of Business-Critical Projects Software Qualität: Wie groß ist das Problem?

Wie wurde bisher getestet? n Manuelles Testen l Viele Module werden per Hand getestet n Selbst geschriebene Test-Programme l Tests von spezifischen Modulen oder Funktionen n Unit Testing l Viele Tests wurden gemacht, um die Funtionalität des Codes zu überprüfen n Qualität ist, wenn das Programm läuft

Qualität = Kundenzufriedenheit n Ist manuelles Testen für heutige Software noch zeitgemäß ? l Um hohe Qualität zu gewährleisten l Um pünktlich Ergebnisse zu liefern l Um konkurrenzfähig zu bleiben n Keine Zeit bestehende Komponenten zu testen l Schnelle Technologieveränderungen l Effizientere Entwicklungswerkzeuge u Entwicklung eines COM-Servers 1 Stunde. u Test dieser Komponente1 Tag

What Drives Testing?Die Risiko Kurve MF Custom C/S ERP E-Business Complexity Business Criticality $ = A * Ü * t * $/t $ Risikokosten A Anzahl der User Ü Überstunden pro Tag t Tuningzeit $/tKosten pro Mannstunde

Warum Testautomatisierung? n Kürzere Testzeiten l Schnellere QA Zyklen für jedes Release l Höhere Testabdeckung l Tests mit Massendaten n Mehr Testzeit für neue Module l nächtliche Testläufe n Testqualität erhöhen l Wiederholbarkeit l Genauigkeit l Effiziente Ressourcennutzung

Wann soll Testautomatisierung implementiert werden? n Testfallerstellung und -planung parallel mit Abschätzung / Inspektion n Erstellung von Baseline -Tests direkt nach Abschluß der Planungsphase - keine Notwendigkeit zu warten bis zum Ende der Umstellung Abschätzung Code Inspection Test Wartung Abschätzung Wartung Test

Testen in komplexen IT-Umgebungen Funktionstest Last- und Performancetest Regressionstest Testmanagement

WinRunner für R/3 QuickTest Technologie n Komplett visuelle TestScripterstellung (Ease-of- Use) n Speziell für Test an ERP-Anwendungen konzipiert (Business Anwender Integration in Test-Zyklus) n Unterstützung für Enterprise Application Integration (EAI) n SAP - zertifiziert

n Bisherige Testwerkzeuge basieren auf TestScripts n QuickTest ersetzt Scripts durch Icons und ActiveScreens n Business Anwender können TestScripte durch normales Arbeiten mit dem System erstellen Traditional ScriptQuickTest QuickTest Technologie

Aufzeichnung von SAP R/3 Geschäfts- prozessen Testaus- führung/ Testdoku- mentation Erstellen von Scenarios über Massendaten QuickTest Technologie Funktionsweise

Intuitive Icons beschreiben Benutzerinter- aktionen ActiveScreen TM ermöglicht Point & Click Vergleiche nach dem Aufzeichnen

n Erste Icon-basiertes SAP Testlösung n Visuelle Testerstellung, Icons und ActiveScreens TM l Beschleunigte Testerstellung l Einbezug der Business Anwender in den Testprozess l Konservieren der Testaktivitäten durch Fachanwender n Excel Spreadsheets ermöglichen unterschiedliche Test-Szenarien l Beschleunigung und Vereinfachung der Testaktivitäten l Volumen- / Massentests l Stammdateneingabe / -übernahme WinRunner für R/3 - Vorteile (1)

WinRunner für R/3 - Vorteile (2) n Open API und Integration mit WinRunner ermöglicht einfache EAI Tests l End-to-End Test der Geschäftsprozesskette n Script Wiederverwendbarkeit für Lasttests l Identische Scripts für Funktionalitäts- und Perfomancetest n Zertifizierung durch SAP l Nahtlose Integration mit R/3 System l Enge Zusammenarbeit mit SAP stellt Unterstützung der zukünftigen Technologien sicher

LoadRunner n Multi-User Test l mehrere gleichzeitige Benutzer l konkurrierende Zugriffe n Last- und Performanceverhalten l grafische Darstellung der Ergebnisse l Antwortzeiten l Skalierbarkeit l Was wäre wenn... ? n Vorteile l Steuerung von einer zentralen Konsole l Tausende Benutzer, wenig Hardware

Risikomanagement Sizing Benchmarking Erfahrungswerte Build & Customizing Erweiterungen Interface Produktivstart 500 User 500 Virtuelle User LR Sicherheitsfenster

Last- und Performancetest Hunderte von Usern je PC Kein Unterschied zu realen Usern Nachbildung von Lastprofilen und Belastung des Gesamtsystems Messung von Performance und Transaktionsleistung Database GUI-User Applikations- Server Virtual-User

Analyse der Ergebnisse

Built-in Monitore zeigen Systemperformance in Real-time n Identifiziert und isoliert Systemflaschenhälse wenn sie auftreten um Problemen vorzubeugen l Monitoring aller Systemkomponenten: Transactionen, Network delays, Webserver, App.-Server, TUXEDO Servers, SNMP Geräte und Datenbanken Web ServerApp. ServerDatenbankNetwork Performance Monitors Virtual Users Controller

IPSpoofer testet Performanceeinfluß des IP Verkehrs n ermittelt Einfluß von Firewalls, Router und Load Balancer für gesteigerte Sicherheit l Emuliert hunderte von virtuellen Usern mit unterschiedlichen IP Addressen von einer NT Machine l 3-step Wizard zum Setup der Lastmachine ……………… ……………… Web Server Load Balancer Router App. Server Database App. Server Vusers

ContentCheck zeigt Fehler vom Overload n Identifiziert funktionale Fehler die unter Last auftreten um Anwenderakzeptanz zu sichern l Analysiert den korrekten Webseiteninhalt im Test l Zeigt den aktuellen virtual User Dialog im Run-Time Browser

Typische Probleme n Netzwerk-Performance n Locking-Probleme n Anzahl gleichzeitig abzuarbeitender Prozesse n Datenbank Probleme n Skalierbarkeit des Applikations-Servers n Datenbank-Server Probleme n Ineffiziente Benutzung von Match-Codes

Test Reality, before Reality tests you

Mercury Interactive Enterprise Testing Solutions