SmartTestAssistant. Het slimme testhulpmiddel. door Frank Stolker

Transcriptie

1 SmartTestAssistant Het slimme testhulpmiddel door Frank Stolker

2 Inhoud Wat is SmartTestAssistant? Achtergrond Opzet Werking Schematisch overzicht Onderscheidend vermogen Status en vervolgstappen

3 Wat is SmartTestAssistant? SmartTestAssistant (STA) is een (zelf ontwikkeld en geregistreerd trademark ) softwareproduct dat in combinatie met MS Excel gebruikt dient te worden. STA is een laagdrempelige testoplossing om online gebruikerstoepassingen met een op HTML gebaseerde front-end geautomatiseerd (en met name functioneel) te testen.

4 Achtergrond Groot aanbod van testtools op de markt Commercieel (duur) óf open source (minder toegankelijk en minder gebruikersvriendelijk) Zelf (sinds 1995) ervaring opgedaan: Commerciële tools steeds meer gericht op ondersteuning van gehele test(management)proces Veel ontwikkelingen op gebied van load & performance testing HP is grootste (en duurste) aanbieder en tevens marktleider Nog steeds geldt: een testtool is een hulpmiddel dat indien op de juiste manier ingericht én toegepast rendabel kan zijn

5 Opzet STA bestaat uit: Een voorgeschreven manier om testacties (wat, definitie) en testscripts (hoe, executie) formeel te specificeren (in Excel). Een Excel macro om testacties en testscripts vóór testuitvoering te kunnen controleren (ter voorkoming van syntaxfouten tijdens de testrun). DLL s/tlb s (Dynamically Linked and Type Libraries) met specifieke routines om objecten in de te testen toepassing aan te kunnen spreken. Een tweede Excel macro om eerder gespecificeerde testscripts geautomatiseerd (m.b.v. Excel/VBA) uit te kunnen voeren op de te testen toepassing. De bibliotheken zijn geprogrammeerd m.b.v. Selenium (open source code voor testen websites) in de taal C# en verder niet zichtbaar voor de tester.

6 Werking STA is met name geschikt voor het testen van de front-end (schermen/gebruikersinterface) van toepassingen. Het is een testhulpmiddel (testtool) en maakt naast MS Excel alleen gebruik van enkele DLL's/TLB s, incl. Selenium. STA heeft verder geen andere programmatuur of onderdelen nodig. De aansturing vindt volledig vanuit Excel plaats. Het WYSIWYG-principe wordt gehanteerd bij het ontwerpen van de testacties en testscripts, hetgeen leidt tot begrijpbare tests. SmartTestAssistant is een slim hulpmiddel om testontwerp te standaardiseren (en te controleren) en testuitvoering te automatiseren.

7 SmartTestAssistant Schematisch overzicht van The Action Model Action Definition: Excel tab that contains all the action definitions in a predefined format. Action Execution: Excel tab that contains the actual test. Consecutive execution of (a selection of) actions which have been defined. Result Report: Excel tab that will contain the test report after the test (on Action Execution) has been run. Action Execution: Action Automator: RunAction( ) Excel tab VBA project Dynamically Linked & Type Libraries: - WebHtmIE C# - WebHtmCH C# Action Definition: Ini file (.ini) Log file (.xml) Excel tab Action Automator: VBA project module that scans the definition and execution tab and than runs the test. The DLL s/tlb s are used to communicate with the AUT. Tst file (.tst) Via.xml Result Report: Passed Failed Excel tab Excel Macro Enabled Workbook (.xlsm) Application Under Test (Web)

8 Onderscheidend vermogen Laagdrempelig, toegankelijk en overzichtelijk: definitie, executie en rapportage in één Excel werkboek. Goedkoop t.o.v. commerciële (test)tools Technische of programmeerkennis is niet vereist (alleen Excel) Gebruik(er)svriendelijk en begrijpbaar (syntaxcontrole/wysiwyg) Onderhoudbaarheid is hoog (alleen functioneel in definitie of executie) Herbruikbaarheid is hoog en parallelle ontwikkeling testware is mogelijk STA is zeer geschikt als testhulpmiddel bij iteratieve ontwikkeltrajecten Agile/Scrum) omdat reeds bij de ontwerpfase (per iteratie) testacties ontwikkeld kunnen worden. Aan het einde van een iteratie kan een stuk werkende (lees: succesvol geteste) software opgeleverd worden, tezamen met de (gebruikte) testacties en testscripts. Bovendien zijn de testproducten vanaf dat moment herbruikbaar bij regressietests (van software increments).

9 Status en vervolgstappen Software nog in ontwikkeling en naar verwachting in Q afgerond Eerste uit te geven betaversie in Q beschikbaar Bekendmaking loopt al via eigen netwerk (veelal leveranciers) Process Based Testing mogelijk maken in Q Licentiesysteem bij distributie als product en/of beschrijving van dienstverlening bij afname als dienst is nog under construction