Testverbetering met TMM bij Philips

Transcriptie

1 Testverbetering met TMM bij Philips Medical Systems Cardio/Vascular Jurian van de Laar Improve Quality Services Wim van Rooij Philips Medical Systems

2 Philips Medical Systems C/V Imaging Systems X-Ray Cardio/Vascular System Integration & Test Contact: Wim van Rooij (System Test Manager) Günther van de Rijt (Competence Area Manager)

3 Improve Quality Services BV Dienstverlener Testen & Kwaliteitsmanagement Advisering, Detachering en Opleidingen Gespecialiseerd en gekwalificeerd (CISA, ISTQB) Onafhankelijk, trendsettend (EU-projecten, TU/e) Opgericht januari 1998, 30 medewerkers Contact: Jurian van de Laar (Quality consultant) Erik van Veenendaal (Oprichter, DGA)

4 Agenda Systeemtesten bij PMS C/V Teststrategie TMM als kapstok Toepassing in de projecten Resultaten

5 PMS Cardio/Vascular Visualisatie van bloedvaten

6 PMS Cardio/Vascular Karakteristieken: - wereldwijde markt - kapitaalgoederen - weinig concurrenten - multi-site ontwikkeling - multi-disciplinair - innovatief

7 PMS C/V System I&T Productomgeving - patiënt: veiligheid, minimale dosis - dokter: gebruiksvriendelijk, klinische relevantie - business: betrouwbaarheid, kostprijs, time-to-market Systeemtesten - integratie - verificatie - validatie - vrijgave Professionele testorganisatie

8 PMS C/V System I&T 5 jr geleden 3 jr geleden Nu Risico Matrix Proj. Mgr I&T Mgr Develop. Integrat. No 1 I&T Design Sys. V&V Master Test Plan 2 Author. No Yes 4 Author. Dev. I&V Yes 3 5 Sys. Integr. Sys. V&V 6 Test Levels 9 Author. 8 Release Advice Rel. Test 7 gefragmenteerd strategie uniformiteit

9 Veranderende business en testen Doelen Business Inrichting Testen Testen & Vrijgave Meer releases, minder tijd Kwaliteitsborging Inzichtelijk / beheersbaar

10 Agenda Systeemtesten bij PMS C/V Teststrategie TMM als kapstok Toepassing in de projecten Resultaten

11 Strategie van systeemtesten Doelen Business Inrichting Testen Testen & Vrijgave Balans TTM Q Risico Matrix Test Levels Kwaliteitskarakteristieken Performance Indicatoren

12 Risico Matrix PRISMA Balans doorlooptijd kwaliteit Communicatie / Inzicht Test diepgang Regressietesten Technical stakeholder Business stakeholder Business Risk II IV Technical Risk I III Test designs Effort & Time

13 Strategie van systeemtesten Doelen Business Inrichting Testen Testen & Vrijgave Risico Matrix Test Levels Q-karakteristieken Test Strategie Planning & Uitvoering KPI s

14 Waarom TMM? Borgen werkwijze Stapsgewijze verbetering Focus (motiverend!) Past op ingeslagen weg Level 5: Optimizing Level 4 Management & Measurement Level 3: Integration Level 2: Phase Definition -Test policy and goals -Test techniques and methods -Test planning -Test environment Level 1: Initial

15 TMM Level 2 process areas Doelen Business Inrichting Testen Testen & Vrijgave Test techniques & methods Planning Uitvoering Policy & Goals Test Planning Test Environment

16 TMM aanpak Quick Scan 2005 Verbeterteams Documenten, opleiding, toepassing Test Policy Werk instructies, bijv. risk based testing Best Practices: Test technieken Testomgeving

17 Agenda Systeemtesten bij PMS C/V Teststrategie TMM als kapstok Toepassing in de projecten Resultaten

18 Test en vrijgave in projecten Doelen Business Inrichting Testen Testen & Vrijgave Schattingen Master Testplan KPI s Test Life Cycle Vrijgave

19 Effort schattingen Work Breakdown Structure Wide Band Delphi 10% nauwkeurigheid Urenregistratie Post Mortem Analyse Overrated Underrated

20 Master Testplan Belangrijkste doelen: Implementeren teststrategie Afspraken toeleveranciers Decompositie van testen Kwaliteitskarakteristieken Test- en vrijgave-aanpak

21 Test Life Cycle Planning en beheer Voorbereiding en specificatie Uitvoering Afronding Preparation and specification Test planning and control Execution Completion

22 Key Performance Indicators Business doelen Meer releases, minder tijd Kwaliteitsborging Inzichtelijk / beheersbaar Performance indicator Duration slip, Effort slip, Effort distribution, Automation level Maturity grid, Defect trend Test prep./exec. progress, Test system uptime 15% 3% 6% 1% 41% 34%

23 Product vrijgave Vrijgave bepaalt testaanpak Multidisciplinair vrijgaveproces Soorten vrijgaven: Familie vrijgave Applicatie systeem Upgrades Field Change Order Special

24 Resultaten Meer doen in minder tijd meer releases meer functionaliteit meer configuraties Number of releases fcst 2006

25 Resultaten Kwaliteitsborging Kwaliteitsbouwwerk KPI s productkwaliteit Inzichtelijk / beheersbaar KPI s test voortgang Betere communicatie Stem in de organisatie

26 Kritische Succes Factoren Professionele testorganisatie (ISTQB) TMM (geeft richting en borging) Commitment (Top Down) Enthousiast verbeterteam (Bottom Up) Focus (leiderschap)

27 Nog veel uitdagingen Andere disciplines (CMMI) Scope verbreding (Integrated CathLab) Meer parallelle ontwikkeling Groeiend aantal configuraties Met TMM hebben we een basis voor de toekomstige veranderingen gelegd.

28

29 Management van TMM Proces voor accreditatie en certificering