Ontwerp interne QC. Sigma metrics Power curves OpSpec chart

Transcriptie

1 Ontwerp interne QC Sigma metrics Power curves OpSpec chart

2 Wat bepaalt de uiteindelijk vereiste kwaliteit van meten? ⱱ ⱱ ⱱ Stabiele apparatuur met een hoge precisie Stabiele reagentia Calibratoren met bekende toegekende waarden ⱱ Lang houdbare controle materialen ⱱ Juiste procedures voor de procesbewaking ⱱ ⱱ Organisatoren van kwaliteitsenquetes Referentiematerialen

3 Kwaliteitsnorm / eis voor een analytische procedure op basis van het referentie interval

4 Kwaliteitsnorm / eis voor een analytische procedure op basis van het referentie interval

5 De hulpmiddelen voor het ontwerpen Sigma Metrics / power curves Westgard advisor OPSPec Chart

6 Stap 1 : Stel de tolerantie vast

7 Wat zijn de bronnen waaruit de aanvaardbare tolerantie is te verkrijgen? prioritering conform Stockholm conferentie Specifieke klinische toepassing Biologische variatie Gepubliceerde aanbevelingen experts Wet- en regelgeving Uitkomsten ringonderzoek State of the art gegevens ADA Ricos CLIA, Rilibäk EQAS

8 Bronnen van aanvaardbare tolerantie in het antwoord? prioritering conform Stockholm conferentie Specifieke klinische toepassing Biologische variatie Gepubliceerde aanbevelingen experts Wet- en regelgeving Uitkomsten ringonderzoek State of the art gegevens ADA Ricos CLIA, Rilibäk EQAS

9 De 2sd- en 3sd grenzen en de kansverdeling (normaal verdeling) 95% 99%

10 Kwaliteitsnorm / eis voor een analytische procedure op basis precisie en juistheid Maximale imprecisie CV a < 0.5 * CV i CV a = CV allowable Maximale systematische afwijking (bias) B(%) < 0.25 * (CV i2 + CV b2 ) 0.5 TE a = 1,65 VC a + Bias

11 Beschrijving van de performance van het proces Sigma score = (TE a bias)/vc Voorde bias wordtaltijdde absolute waarde genomen! SE crit = Sigma score 1,65 SE crit = [(TE a bias)/vc] 1,65 C pk = (Tolerance specification - bias)/3vc RE crit = [(TE a bias)/1.96 VC

12 De biologische variatie database Beschrijving van de tolerantie in het antwoord CV a < 0.5 * CV w B(%) < 0.25 * (CV w2 + CV g2 ) 0.5 TE a = 1.65 CV a + B Testcode CV w CV g I(%) B(%) TE(%) Trig 20,9 37,2 10,5 10,7 27,9 AF 6,4 24,8 3,2 6,4 11,7 Lipase 23,1 33,1 11,6 10,1 29,1

13 Het ontwerpen van de meest geschikte bewaking Gebruik van de Power curves en de Westgard Advisor

14 De bewakingsregels van Westgard Soort fout Westgard regel Waarschuwing 1 2s Willekeurige fout (random) 1 2.5s, 1 3s, 1 3.5s R 4s, Systematische fout 2 2s, 4 1s, 2 of 3 2s, 3 1s 6 x, 8 x, 9 x, 10 x, 12 x x 0.05, x 0.01 cusum

15 1 3s bewakingsregel Foutdetectie > 90 % Percentage onterecht afkeuren (0,27% bij 3sd bewaking)

16 Maximale foutdetectie 4,35

17 De karakteristieken van bewakingslijnen 1 Sigma score ,9 0,8 N R Kans foutdetectie 0,7 0,6 0,5 0,4 0,3 1 2s 1 3s 1 4s 1 2s 1 3s 1 4s ,2 0, SE crit = Sigma score 1,65 in sd-eenheden

18 De karakteristieken van bewakingslijnen Kans op onterecht afkeuren van controle resultaat Kans foutdetectie 1 0,9 0,8 0,7 0,6 0,5 0,4 0,3 0,2 0,1 Sigma score s 1 3s 1 3s /2 2s /R 4s 1 3s /2 2s /R 4s /4 1s 1 3s /2 2s /R 4s /3 1s /6 x N R SE crit = Sigma score 1,65 in sd-eenheden

19 1 0,9 0,8 0,7 0,6 0,5 0,4 0,3 0,2 0, Risico analyse Kwaliteitsmodel naar Juran Totale kosten voor kwaliteit Faalkosten Kosten voor kwaliteitsborging en assessment % Kwaliteit

20 Weergave van een 6-Sigma proces Tolerantie in het product (resultaat) = 6 sd sd Aantal fouten (defecten) per miljoen = 0,002

21 Weergave van een 6-Sigma proces Tolerantie in het product (TE a = 1,65 VC a + bias a ) 1,65 VC a bias a

22 Interpretatie van de Sigma-score voor het proces van meten Sigma score Interpretatie >6 Te bewaken met een simpele QC procedure zoals 1 3,5s met 2 metingen 5 Te bewaken met een 1 3s QC procedure met 2 of 3 controlemetingen 4 Te bewaken met een gecombineerde regel met 4 controle metingen <3 Gebruik van een multiregel met minimaal 6 metingen Verbeter de methode of zoek een andere bron voor de TE

23 Bias (%) Sigma Sigma Score = (TE a Bias) / VC a Sigma Score * VC a = TE a - Bias Bias (y) = - Sigma Score (m) * VC a (x) + TE a (a) Y = m * X + a 5-Sigma 4-Sigma VC (%) 22

24 Testcode CV w CV g I(%) B(%) TE(%) Trig 20,9 37,2 10,5 10,7 27,9 25 Sigma Score = (TE a Bias) / VC a 20 VC a =2% Bias =5% Bias (%) Sigma Sigma Score = (27,9 5) / 2 = 11, VC (%) 23

25 12 Testcode CV w CV g I(%) B(%) TE(%) AF 6,4 24,8 3,2 6,4 11, Sigma Score = (TE a Bias) / VC a VC a =1,5% Bias =4,1% Bias (%) Sigma Sigma Score = (11,7 4,2)/1,5 = Sigma 5-Sigma VC (%) 24

26 Als het analytische proces in kaart is gebracht in termen van een Sigma score Kan bepaald worden welke Westgard regels optimaal zijn in termen van: Welke Westgard regels Frequentie van meten Aantal levels Zo laag mogelijk kans om controle resulaten onterecht af te keuren Maximale detectie van echte fouten De optimale keuze van de Westgard regels kan worden vastgesteld met voor dat doel ontworpen programmatuur door J.Westgard ( EZ rules 3 of de Westgard Advisor ) 25

27 Ontwikkelen van een procedure welk beschrijft hoe de QC wordt ontworpen per analyt in termen van frequentie van controle metingen, en de te gebruiken Westgard regel(s) Zoek op : TE a, de VC analytisch en de bias en bereken de Sigma score Stel vast welke bewakingsregels dienen te worden gebruikt waarbij : de P fr zo laag mogelijk is de P ed > 90% 26

28 Visgraat diagram (ISO 15189) 1. Analytische doelen Beslisgrens Error budget PT criteria 3. Keuze SQC Beoogd doel Xc TEa 2. Evaluatie analytische prestaties Methodevergelijk EP15 Sigma Bias Precisie (TEa-bias)/SD Method decision chart Bewakingdregels Aantal controles Frequentie Sigma metrics OPSpec kaart 13s, combiregel N Sigma metrics Hoge sigma Sigma Lage sigma 4. Formuleren AQC strategie Minmale SQC Optimale SQC +non-sqc + Risico analyse + andere vormen QC 27

29 Ernst RISK Detecteerbaarheid Frequentie ISO CLSI EP18 CLSI EP23 GUIDELINES Six Sigma ISO RISICO FMEA ANALYSE Ontwerp IQC TOOLS QC PLAN Defect rate Risico matrix Sigma metrics Frequentie QC 28

30 VOORBEELD 1 Sigma 1 = (TE a - BIAS ± Δbias )/VC a Sigma 1 = (TE a - BIAS )/VC a ± Δbias/VC a Sigma 1 = Sigma ± Δbias/VC a 3,96 2,98

31 Kreatinine

32 Kreatinine

33 3,96 2,98

34 14,2 18,4 VOORBEELD 2

35 Bilirubine

36 Bilirubine

37 3,96 2,98

38 2,34 2,8

39 Glucose

40 Glucose

41 2,34 2,8

42

43 Begrens op 5 sd Ontwerp Maximale QC / SA

44