Van Risicoanalyse tot Teststrategie

Transcriptie

1 Van Risicoanalyse tot Teststrategie Cees Dulfer, Sr. Testconsultant Rabobank Nederland TestNet, 2 november /28

2 TestNet, 2 november /28

3 Agenda Historie Testproces en positionering Product Risico Analyse Overal Teststrategie Teststrategie per Testsoort Voor- en nadelen Vragen TestNet, 2 november /28

4 Historie (1) Tot 1 januari 2005: Diverse informatica eenheden Testen meestal rol van ontwikkelaar, projectmanager Testpersoneel verdeeld over ontwikkeleenheden 1 januari 2005: oprichting Groep ICT Samenvoeging van alle Informatica eenheden van RN Testen van rol naar vak Alle testactiviteiten ondergebracht in Testcentrum TestNet, 2 november /28

5 Historie (2) START TestNet, 2 november /28

6 START - Proces Product RisicoAnalyse Stakeholders, TC is faciliterend Intake Testopdracht Testconsultant Overall Teststrategie Testmanager Teststrategie Testsoort Testcoördinator Testontwerp Testanalist Testuitvoering Tester Testrapportage Testmanager TestNet, 2 november /28

7 Product Risico Intake test opdracht START en voortbrengingsproces Analyse Overall test strategie Detail test strategie Specificeren testgevallen Intake testbasis Afronden testtraject Afronden Uitvoeren (her)test TestNet, 2 november /28

8 START en Prince2 lijn-of programmamanagement mobilisatie supportdiensten goedgekeurde PID Afwijkingsrapportage aankondiging projectafsluiting Product Risico Analyse Intake test opdracht projectmandaat Opstarten van een project (SU) initiatiefaseplan project Brief autorisatie PID Initiëren van een project (IP) Overall test strategie projectplan faseplan advies Dirigeren van een project (DP) rapportages Beheersen van een fase (CS) werkpakket anagen productoplevering (P) Afronde n anagen van fase overgangen (SB) voortgangsrapportage kwaliteitslogboek werkpakketresultaat Detail test strategie faseplan projecteind- rapport Afsluiten project (CP) Intake testbasis fase-eindrapport leerpuntenrapport Specificere n testgevallen Aanbevelingen voor vervolgacties Afronden testtraject Uitvoeren (her)test Opstellen van een plan (PL) TestNet, 2 november /28

9 Product Risico Analyse (1) Requirements n:m Acceptatiecriteria Product Risico s TestNet, 2 november /28

10 Product Risico Analyse (2) Inventariseren requirements, productrisico s en acceptatiecriteria S c h a d e H Bepalen aanpak vervolg Identificeren stakeholders Aanvullen en matchen requirements, productrisico s en acceptatiecriteria Kans Should Prioriteren productrisico s, requirements en acceptatiecriteria L Could Would Opstellen Rapport Product Risico Analyse ust L H Kans TestNet, 2 november /28

11 Opstellen Teststrategie + TP Koppelen kwaliteitsattributen en testsoorten aan productrisico s Opstellen Relatief Belang atrix Opstellen Strategiematrix Opstellen begroting en planning Opstellen TP TestNet, 2 november /28

12 Koppelen kwaliteitsattributen en testsoort aan productrisico s (1) 4 Testsoort Risico Risico omschrijving Prio- Kwaliteitsattribuut Nr. riteit Layout van de rapportages niet conform (functionele) specificaties Functionaliteit ST 2 Rapportages zijn niet binnen de gestelde tijdsnormen op het scherm beschikbaar. Efficiëntie PAT 3 Export functionaliteit niet conform verwachting. S Functionaliteit ST 4 Kwaliteit definities (omschrijving) onvoldoende. C Bruikbaarheid GAT TestNet, 2 november /28

13 Koppelen kwaliteitsattributen en testsoort aan productrisico s (2) Test- Kwaliteitsattribuut Prio- Risiconummers soort riteit Totaal risico s ST Functionaliteit 1, 5, 7, 10, 15 5 S 3, 8, 12 3 GAT Bruikbaarheid C 4, 6, 9,11 4 PAT Efficiëntie 2, 13, 14 3 TestNet, 2 november /28

14 Relatie prioriteit, punten en testtechniek Prioriteit Punten Testtechniek Diepgang 7 Formeel Hoog S 5 Formeel Gemiddeld/Laag C 3 Informeel Gemiddeld W 1 Error Guessing n.v.t. TestNet, 2 november /28

15 Opstellen Relatief Belang matrix Prioriteit Testsoort Kwaliteitsattribuut Punten Prioriteit Aantal Risico s Rel. bel. Punten Rel. bel. procenten ST Functionaliteit S GAT Bruikbaarheid C PAT Efficiëntie TOTAAL TestNet, 2 november /28

16 Opstellen Strategiematrix Kwaliteitsattribuut Functionaliteit Testsoort ST GAT KT PAT Relatief belang Kwaliteitsattribuut ** Bruikbaarheid Efficiëntie Relatief belang Testsoort ** ** Relatief belang in procenten TestNet, 2 november /28

17 TestNet, 2 november /28

18 Opstellen Teststrategie + DTP Testsoort Vaststellen risico s v.d. Testsoort Bepalen testonderdelen Koppelen risico s/kwaliteitsattributen aan testonderdeel Opstellen Relatief Belang atrix Opstellen Strategiematrix Koppelen testspecificatietechnieken aan testonderdelen Opstellen begroting en planning Opstellen DTP Testsoort TestNet, 2 november /28

19 Vaststellen risico s testsoort Risico Nr. Risico omschrijving Prioriteit Kwaliteitsattribuut 1 Layout van de rapportages niet conform (functionele) specificaties Functionaliteit 3 Export functionaliteit niet conform verwachting. S Functionaliteit 5 Klant kan niet opgevoerd worden Functionaliteit 7 Correspondentieadres kan niet opgevoerd worden Functionaliteit 8 Woonadres kan niet opgevoerd worden S Functionaliteit TestNet, 2 november /28

20 Bepalen testonderdelen Onderdeel van het systeem Rapportages Exporteren Opvoeren klanten Opvoeren adressen TestNet, 2 november /28

21 Koppelen risico s per testonderdeel Onderdeel van het systeem Prioriteit Risiconummers Totaal aant. Risico s Rapportages Exporteren Opvoeren klant Opvoeren adres Opvoeren adres 1, 10 2 S 3 1 5, 12, S 8 1 TestNet, 2 november /28

22 Opstellen Relatief Belang matrix Kwaliteitsattribuut Onderdeel van het systeem Prioriteit Punten Prioriteit Aantal Risico s Rel. bel. Punten Rel. bel. procenten Functionaliteit Rapportages Exporteren Opvoeren klant Opvoeren adres Opvoeren adres TOTAAL S S TestNet, 2 november /28

23 Opstellen Strategiematrix Kwaliteitsattribuut Onderdeel van het systeem Functionaliteit Relatief belang onderdeel Rapportage Exporteren Opvoeren Klant Opvoeren adres Relatief belang kwaliteitsattr TestNet, 2 november /28

24 Koppelen testspecificatietechnieken Kwaliteitsattribuut Onderdeel van het systeem Testtechniek Prioriteit Verwerkingslogica Diepgang Functionaliteit Rapportages EVT DCC grens Exporteren S DFT Eq. klasse Opvoeren klant EVT DCC Opvoeren adres BTT DCC Opvoeren adres S BTT CC TestNet, 2 november /28

25 Testrapportage voor stakeholders Risico s die zijn afgedekt Requirements die zijn gerealiseerd Acceptatiecriteria waaraan is voldaan Openstaande bevindingen Resterende risico s TestNet, 2 november /28

26 Voordelen Teststrategie wordt niet begrepen door stakeholders, risico s en prioriteiten wel PRA heeft directe koppeling met teststrategie Teststrategie heeft directe koppeling met verdeling testinspanning Opstellen teststrategie is automatiseerbaar Organisatie-, domein- en productgebonden risico s integreerbaar Toevoegen/verwijderen requirements/risico s relatief eenvoudig TestNet, 2 november /28

27 Nadelen Zegt alleen iets over de verdeling van de testinspanning Relatie prioriteit en testinspanning zwak oscow heeft lading (we gaan toch wel alles testen?) Niveau requirements, risico s en acceptatiecriteria moet gelijk zijn TestNet, 2 november /28

28 TestNet, 2 november /28