Externe kwaliteitsevaluatie. Alcoholbepaling in bloed 2006/2. Oktober

Transcriptie

1 Wetenschappelijk Instituut Volksgezondheid Afdeling Klinische Biologie Externe kwaliteitsevaluatie Alcoholbepaling in bloed 2006/2 Oktober Dit rapport mag uitsluitend worden gereproduceerd, gepubliceerd of gedistribueerd met toestemming van het WIV. 23/01/07 1/28

2 EXPERTENCOMITE ALCOHOLBEPALING IN BLOED WIV (secretariaat) tel: 02/ ; fax: 02/ ; Enquête coördinator: Dr N. Hamers: Tel: 02/ ; Statisticus: W. Coucke: tel:02/ ; C. Charlier tel: 04/ ; fax: 04/ ; c.charlier@chu.ulg.ac.be W. Lambert tel : 09/ ; fax: 09/ ; willy.lambert@ugent.be F. Martens tel: 056/ ; fax: 056/ ; frank.martens@azgroeninge.be H. Neels tel: 03/ ; fax: 03/ ; hugo.neels@zna.be E. Noël tel: 065/ ; fax: 065/ ; J. Tytgat tel: 016/ ; Jan.Tytgat@pharm.kuleuven.ac.be V. Maes tel: 02/ ; fax: 02/ ; viviane.maes@az.vub.ac.be M. Van Damme tel: 02/ ; fax: 02/ ; mvandamm@ulb.ac.be A. Verstraete tel: 09/ ; fax: 09/ ; alain.verstraete@ugent.be P. Wallemacq tel: 02/ ; fax: 02/ ; Wallemacq@lbcm.ucl.ac.be 23/01/07 2/28

3 INHOUDSTABEL 1. INLEIDING RESULTATEN... 5 Gebruikte interne standaard STATISTISCHE VERWERKING... 8 Evaluatie van de klassieke dispersie parameters... 8 Aanvullende studie met betrekking tot de lineariteit ANALYSE VAN DE RESULTATEN A Inleiding B. Gedetailleerde tabel met de resultaten bekomen voor iedere subgroep gesorteerd per methode en per stijgende orde voor staal E/ C. Lineariteitsstudie op alle gegevens C1 Outliers C2 Lack of fit C3 Gewogen regressie en betrouwbaarheidsinterval C3.1. Op alle punten en alle methoden C3.2. Bespreking per methode ALGEMENE CONCLUSIE /01/07 3/28

4 1. Inleiding De volgende stalen werden naar de laboratoria gestuurd : Staal Ethanol (g/l) Nr E/4734 ± 0.5 E/4736 ± 1.0 E/4737 ± 2.0 E/4738 ± 1.5 Voor het vijfde staal hebben de laboratoria verschillende stalen ontvangen die al in andere enquêtes waren gebruikt: Staal Ethanol (g/l) Nr 7244 Onpare Labo s NL E/ g/L Pare Labo s NL E/ g/L Onpare Labo s FR E/ g/L Pare Labo s FR E/ g/L 23/01/07 4/28

5 2. Resultaten Ethyl-alcohol (01880) g/l E/4734 METHOD Median SD CV No.labs 001 Casier Delaunois % Direct Gas Chromatography - (capillary-column) % Direct Gas chromatography (packed-column) % Headspace chromatography (capillary-column ) % ADH - Abbott (Aeroset) ADH- Abbott AxSym % ADH- Abbott TDx/ADx % ADH- Beckman % ADH- Dade (Emit) % ADH- Roche % ADH- Vitros % ADH - Dade Dimension % 10 Global results (all methods and all measuring systems) % 199 Ethyl-alcohol (01880) g/l E/4736 METHOD Median SD CV No.labs 001 Casier Delaunois % Direct Gas Chromatography - (capillary-column) % Direct Gas chromatography (packed-column) % Headspace chromatography (capillary-column ) % ADH - Abbott (Aeroset) ADH- Abbott AxSym % ADH- Abbott TDx/ADx % ADH- Beckman % ADH- Dade (Emit) % ADH- Roche % ADH- Vitros % ADH - Dade Dimension % 10 Global results (all methods and all measuring systems) % /01/07 5/28

6 Ethyl-alcohol (01880) g/l E/4737 METHOD Median SD CV No.labs 001 Casier Delaunois % Direct Gas Chromatography - (capillary-column) % Direct Gas chromatography (packed-column) % Headspace chromatography (capillary-column ) % ADH - Abbott (Aeroset) ADH- Abbott AxSym % ADH- Abbott TDx/ADx % ADH- Beckman % ADH- Dade (Emit) % ADH- Roche % ADH- Vitros % ADH - Dade Dimension % 10 Global results (all methods and all measuring systems) % 199 Ethyl-alcohol (01880) g/l E/4738 METHOD Median SD CV No.labs 001 Casier Delaunois % Direct Gas Chromatography - (capillary-column) % Direct Gas chromatography (packed-column) % Headspace chromatography (capillary-column ) % ADH - Abbott (Aeroset) ADH- Abbott AxSym % ADH- Abbott TDx/ADx % ADH- Beckman % ADH- Dade (Emit) % ADH- Roche % ADH- Vitros % ADH - Dade Dimension % 10 Global results (all methods and all measuring systems) % /01/07 6/28

7 Gebruikte interne standaard Interne standaard N.labs 2-butanon (ethyl methyl keton) 1 acetonitrile 2 Isopropanol(2-propanol, 2-hydroxypropaan, dimethylcarbinol 6 n-butanol(1-butanol, 1-hydroxybutaan, propylcarbinol) 4 n-propanol(1-propanol, 1-hydroxypropaan, ethylcarbinol) 8 t-butanol (2-methyl-2-propanol, t-butylalcool) 3 THF, tetrahydrofuraan, 1,4-epoxybutaan, tetramethyleen oxyde 3 23/01/07 7/28

8 3. Statistische verwerking Evaluatie van de klassieke dispersie parameters De vergelijking van de resultaten gebeurde volgens een niet-parametrische methode, de methode van Tukey (J.W. Exploratory data analysis. Reading, M.A. : Addison- Wesley, 1977). Deze methode is beschreven in de brochure van Professor Albert en is beschikbaar op onze website via volgende link: (kies «brochures») In het globaal rapport wordt een reeks parameters, berekend volgens deze nietparametrische methode, opgenomen: de mediaan, de standaarddeviatie (SD) en de variatiecoëfficient (CV). Deze worden gegeven voor elke groep apart enerzijds en voor het geheel van de resultaten voor alle methoden (global results) anderzijds. Het individueel rapport bevat de volgende informatie: de mediaan, de standaarddeviatie (SD) en de variatiecoëfficient (CV) van uw methode met de afwijkingsindex (D) van uw resultaten in vergelijking met de mediaan van deze methode, evenals de grafische voorstelling van de positie van uw resultaat. de mediaan, de standaarddeviatie (SD) en de globale variatiecoëfficient (CV) met de afwijkingsindex (D) van uw resultaten in vergelijking met de mediaan van de globale resultaten, evenals de grafische voorstelling van de positie van uw resultaat. Berekening van D D = (R-M)/SD R : resultaat M : mediaan van de gebruikte methode SD : standaarddeviatie van de gebruikte methode Grafische voorstelling R (uw resultaat) O I M I O slecht twijfelachtig goed twijfelachtig slecht 23/01/07 8/28

9 Aanvullende studie met betrekking tot de lineariteit Globaal rapport : een «lack of fit» test werd gemaakt alsook een gewogen lineaire gewogen regressie (zie paragraaf 4C). Individueel rapport : voor elk laboratorium werd een regressielijn opgesteld. 23/01/07 9/28

10 4. Analyse van de resultaten A Inleiding Voor de 4 eerste stalen hebben alle labo s tijdens deze enquête dezelfde stalen gekregen. Voor het laatste staal (E/7244) werden in feite 4 verschillende stalen tussen de laboratoria verdeeld, zoals in de onderstaande tabellen weergegeven. Voor elk staal werden targetwaarden in vorige enquêtes bepaald met de resultaten van de chromatografische methoden. Nederlandstalige labo s onpaar - n = 41 E/6509 enquête 2005/2- Target waarde : 1.21g/L Nederlandstalige labo s paar n = 50 E/6507 enquête 2005/2 - Target waarde : 1.52g/L Franstalige labo s onpaar + Luxemburgers n = 47 E/6395 enquête 2005/2 - Target waarde : 0.82g/L Franstalige labo s paar n = 44 E/5190 enquête 2004/1 - Target waarde : 0.21g/L N supprimé /01/07 10/28

11 B. Gedetailleerde tabel met de resultaten bekomen voor iedere subgroep gesorteerd per methode en per stijgende orde voor staal E/7244. B1 Franstalige labo s paar - E/5190 enquête 2004/1 targetwaarde : 0.21g/L Lab Ap Fab kit Kit E/4734 E/4736 E/4737 E/4738 E/7244 Met 118 Modular P Roche Roche ,64 1,05 2,05 1, Roche Roche ,61 1,01 2,09 1,54 <0, Other Roche an. Roche Roche ,52 0,92 1,88 1,4 <0, Roche Roche ,57 0,94 1,95 1,44 0, Roche Roche ,57 0,94 1,96 1,47 0, Roche Roche ,58 1,01 2,04 1,52 0, Other Roche an. Roche Roche ,6 0,99 2,02 1,54 0, AxSYM Abbott AxSym 3B ,57 0,92 1,92 1,49 0, ,6 1,12 2,18 1,52 0, Roche Roche ,6 0,98 1,99 1,48 0, ,57 0,92 1,96 1,52 0, AxSYM Abbott AxSym 3B ,6 0,89 2,04 1,45 0, ,58 0,94 2,02 1,47 0, Integra 400 Roche Roche ,61 0,99 1,95 1,47 0, Cobas 6000 (c 501) Roche Roche ,67 1,08 2,2 1,72 0, ,6 0,99 2,01 1,51 0, ,62 0,95 1,87 1,45 0, ,58 0,93 2 1,46 0, Modular P Roche Roche ,63 1,02 2,06 1,55 0, Other Ortho an. OCD OCD ,56 0,93 1,98 1,47 0, AU 600 Dade Emit II (9K309) 0,66 1,05 2,09 1,58 0, Integra 800 Roche Roche ,61 0,98 1,99 1,48 0, Integra 800 Roche Roche ,6 1 1,9 1,5 0, Modular P Roche Roche ,6 1,01 2,01 1,51 0, ,52 0,86 1,7 1,3 0, AU 600 Dade Emit II (9K309) 0,59 0,99 1,97 1,47 0, Roche Roche ,64 1,05 2,12 1,58 0, Fusion 5.1 OCD OCD ,6 0,99 2,04 1,48 0, ,6 0,97 1,93 1,52 0, LX 20 Dade Emit II (9K309) 0,6 1,05 2,1 1,53 0, ,65 1,04 2,05 1,57 0, TDxFLx Abbott AxSym 3B ,74 1,11 2,25 1,72 <0, AxSYM Abbott AxSym 3B , ,5 <0, ,63 0,99 2,03 1,47 0, Modular P Dade Emit II (9K309) 0,63 1 2,09 1,47 0, Integra 400 Roche Roche , ,49 0, Roche Roche ,54 0,96 1,86 1,38 0, MODULAR Roche Roche ,65 1,02 1,98 1,51 0, Integra 800 Roche Roche ,66 1,03 2,04 1,55 0, Modular P Roche Roche ,7 1,1 2,01 1,52 0, Dade Emit II (9K309) 0,63 1,03 2,05 1,52 0, TDxFLx Abbott ADx ( ) 0,65 1,01 2,13 1,56 0, Fusion 5.1 OCD OCD ,61 1,02 2,11 1,56 0, Integra 400 Roche Roche ,63 1,05 2,05 1,56 0, /01/07 11/28

12 143 Dimension RxL Dade Dimension (DF18) 0,71 1,08 2,19 1,59 0, DXC800 Dade Emit II (9K309) 0,67 1,06 2,05 1,56 0, AxSYM Abbott AxSym 3B ,66 1,02 2,04 1,55 0, ,7 1,03 2,15 1,65 0, ,72 1,14 2,19 1,68 0, Dimension RxL Dade Dimension (DF18) 0,63 0,96 1,88 1,52 0,79 49 De mediaanwaarde voor alle methoden voor staal E/7244 is 0.20 g/l. Ze is in overeenstemming met de targetwaarde 0.21g/L bekomen tijdens de eerste enquête en gebruikt voor de statistische verwerking. Het laboratorium nr 18 geeft een resultaat vier maal hoger dan het verstuurde staal! B2 Franstalige labo s onpaar + Luxemburgers - E/6395 enquête 2005/2 - targetwaarde : 0.82g/L Lab Ap Fab kit Kit E/4734 E/4736 E/4737 E/4738 E/7244 Met 61 Other Roche an. Roche Roche ,67 1,06 2,14 1,58 0, ,61 0,95 1,86 1,44 0, Modular P Roche Roche ,71 1,05 1,96 1,53 0, Integra 800 Roche Roche , ,5 0, Roche Roche ,56 0,95 2,03 1,45 0, AxSYM Abbott AxSym 3B ,6 1,02 2,1 1,49 0, Vitros 5,1 FS OCD OCD ,59 0,99 2,02 1,45 0, AxSYM Abbott ADx ( ) 0,61 0,97 2,02 1,42 0, MODULAR Roche Roche ,57 0,9 1,91 1,4 0, Modular P Roche Roche ,6 1,02 2,02 1,53 0, ,59 0,97 1,95 1,48 0,8 4 1 Integra 400 Roche Roche ,6 1 1,96 1,47 0, Integra 400 Roche Roche , ,5 0, Integra 400 Roche Roche ,58 1 1,95 1,48 0, Integra 800 Roche Roche ,6 0,95 1,9 1,5 0, Roche Roche , ,51 0, Integra 800 Roche Roche ,57 0,99 1,97 1,46 0, Other Ortho an. OCD OCD ,62 1,03 1,98 1,53 0, ,58 0,99 1,97 1,5 0, ,6 1,01 2,02 1,52 0, Abbott AxSym 3B ,56 0,97 2,06 1,52 0, ,61 1 2,1 1,5 0, Integra 400 Roche Roche ,61 1 1,99 1,49 0, Roche Roche ,62 1,01 1,98 1,48 0, Roche Roche ,6 1,02 2,05 1,53 0, Roche Roche ,61 0,97 2,02 1,5 0, Integra 800 Roche Roche ,61 1,03 1,98 1,48 0, Integra 800 Roche Roche ,59 0,99 1,95 1,43 0, MODULAR Roche Roche ,61 1,01 2,03 1,51 0, LX 20 Coulter Synchron LX (474947) 0,63 1,02 2 1,51 0, Roche Roche ,61 1,03 2,04 1,54 0, Roche Roche ,62 1,02 1,99 1,51 0, Integra 700 Roche Roche ,59 0,99 2 1,49 0, Vitros 950IRC OCD OCD ,64 1,04 2,19 1,62 0, ,64 1,03 2,09 1,57 0, LX 20 Dade Emit II (9K309) 0,65 1,03 2,06 1,58 0, /01/07 12/28

13 9 917 Roche Roche ,62 1,02 2,06 1,55 0, Integra 800 Roche Roche ,63 1 2,07 1,55 0, AxSYM Abbott AxSym 3B ,56 1,03 2,08 1,47 0, TDxFLx Abbott TDx ,66 1,08 2,25 1,66 0, Modular P Roche Roche ,63 1,02 2,11 1,58 0, Vitros 5,1 FS OCD OCD ,66 1,1 2,41 1,72 0, Dimension RxL Dade Dimension (DF18) 0,64 1,02 2,06 1,56 0, Dimension RxL Dade Dimension (DF18) 0,65 1,05 2,07 1,55 0, AU 600 Dade Emit II (9K309) 0,65 1,07 2,11 1,58 0, LX 20 Roche Roche ,66 1,06 2,03 1,51 0, Other Roche an. Roche Roche ,65 1 2,2 1,6 0, ,74 1,09 2,28 1,79 0, Roche Roche ,63 0,89 1,08 2,18 1,61 46 De mediaanwaarde voor alle methoden voor staal E/7244 is 0.81 g/l. Ze is in overeenstemming met de targetwaarde 0.82g/L bekomen tijdens de eerste enquête en gebruikt voor de statistische verwerking. De laboratoria 61 en 142 (voor 2 methoden) geven 4 maal lagere resultaten! Het laboratorium nr 3 geeft een resultaat twee maal hoger dan het controle staal, dit laboratorium heeft drie stalen omgewisseld. B3 Nederlandstalige labo s onpaar - E/6509 enquête 2005/2- target waarde : 1.21g/L Lab Ap Fab kit Kit E/4734 E/4736 E/4737 E/4738 E/7244 Met 96 LX 20 Coulter Synchron LX (474947) 0,64 1,03 1,98 1,41 1, LX 20 Coulter Synchron LX (474947) 0,63 0,97 1,94 1,45 1, Roche Roche ,58 0,97 1,92 1,44 1, ,54 0,88 1,96 1,5 1, Integra 800 Roche Roche ,59 0,96 1,85 1,49 1, Vitros 250 OCD OCD ,6 0,95 2 1,44 1, Integra 800 Roche Roche ,61 1,01 2,01 1,5 1, Integra 400 Roche Roche ,63 1 1,97 1,48 1, ,61 1,02 2,04 1,51 1, ,61 0,97 1,94 1,47 1, Integra 800 Roche Roche ,59 0,98 1,96 1,45 1, Integra 800 Roche Roche ,57 0,98 1,99 1,47 1, Integra 700 Roche Roche ,6 1 1,95 1,5 1, Integra 400 Roche Roche ,62 1,01 2 1,5 1, Integra 800 Roche Roche , ,5 1, Other Ortho an. OCD OCD ,6 1 2,1 1,55 1, Vitros 950IRC OCD OCD ,6 1 1,9 1,5 1, Other Ortho an. OCD OCD ,57 0,92 1,88 1,52 1, ,63 1,02 2,02 1,52 1, ,6 0,99 1,97 1,5 1, Cobas Mira Dade Emit II (9K309) 0,67 1,01 2,01 1,5 1, Integra 400 Roche Roche ,63 1,03 2,01 1,51 1, Roche Roche ,612 1,014 2,001 1,534 1, Integra 800 Roche Roche ,6 0,99 2,03 1,49 1, Vitros 250 OCD OCD ,61 0,99 2,19 1,52 1, Vitros 250 OCD OCD ,6 0,99 2,2 1,56 1, ,67 1,02 1,94 1,55 1, ,64 1,03 2,03 1,55 1, Roche Roche ,63 1,01 2,02 1,52 1, /01/07 13/28

14 Roche Roche ,63 1,02 2,01 1,52 1, Modular P Roche Roche ,62 1 2,08 1,54 1, Fusion 5.1 OCD OCD ,61 1,02 2,17 1,57 1, ,6 0,99 2,09 1,55 1, AEROSET Roche Roche ,59 1,03 2,02 1,55 1, Other Roche an. Roche Roche ,6 1,04 2,06 1,58 1, LX 20 Dade Emit II (9K309) 0,6 0,98 2,01 1,5 1, Integra 800 Roche Roche ,63 1,02 2,11 1,56 1, AEROSET Abbott Aeroset 1 E ,66 1,05 2,06 1,57 1, TDxFLx Abbott TDx ,63 1,03 2,09 1,56 1, Integra 700 Roche Roche ,65 1,05 2,17 1,62 1, Fusion 5.1 OCD OCD ,6 1,02 2,15 1,55 1, Dimension RxL Dade Dimension (DF18) 0,67 1,08 2,14 1,6 1, TDx Abbott TDx ,67 1,07 2,17 1,56 1, Vitros 250 OCD OCD ,66 1,09 2,34 1,67 1, Fusion 5.1 OCD OCD ,61 1,05 2,45 1,68 1,33 48 De mediaanwaarde voor staal E/7244 voor alle methoden is 1.21 g/l, ze is in overeenstemming met de targetwaarde 1.21g/L bekomen tijdens de eerste enquête en gebruikt voor de statistische verwerking. B4 Nederlandstalige labo s paar E/6507 enquête 2005/2 - target waarde : 1.52g/L Lab Ap Fab kit Kit E/4734 E/4736 E/4737 E/4738 E/7244 Met 113 0,58 0,99 1,98 1,5 1, AxSYM Abbott AxSym 3B ,58 0,95 1 1,42 1, Modular P Dade Emit II (9K309) 0,59 0,94 1,88 1,44 1, Integra 700 Roche Roche ,59 0,99 1,83 1,39 1, Vitros 950IRC OCD OCD ,6 0,9 1,7 1,3 1, Integra 700 Roche Roche ,62 0,97 1,94 1,46 1, LX 20 Coulter Synchron LX (474947) 0,62 0,0451 1,91 1,44 1, ,63 1 1,93 1,49 1, Integra 700 Roche Roche ,61 0,96 1,9 1,37 1, Integra 800 Roche Roche ,58 1 1,95 1,43 1, MODULAR Roche Roche ,58 0,97 1,94 1,47 1, ,58 1 1,98 1,51 1, Integra 400 Roche Roche ,6 0,98 1,94 1,46 1, Integra 800 Roche Roche ,6 0,97 1,95 1,48 1, Integra 800 Roche Roche ,62 1 1,91 1,42 1, Integra 400 Roche Roche ,59 0,97 1,94 1,45 1, Other Ortho an. OCD OCD ,59 0,98 2,09 1,52 1, ,59 0,97 1,98 1,47 1, Integra 400 Roche Roche ,59 1 1,98 1,48 1, Dimension RxL Dade Dimension (DF18) 0,59 1 1,96 1,49 1, Integra 800 Roche Roche ,58 0,998 1,97 1,43 1, Integra 800 Roche Roche ,56 0,97 1,96 1,46 1, ,63 1 1,96 1,51 1, AxSYM Abbott AxSym 3B ,55 0,93 1,97 1,46 1, /01/07 14/28

15 166 Abbott TDx , ,51 1, Roche Roche ,6 1 1,9 1,5 1, Modular P Roche Roche , ,5 1, Modular P Roche Roche , ,5 1, Integra 700 Roche Roche ,63 1,05 2,04 1,49 1, Integra 800 Roche Roche ,61 1,02 2,01 1,49 1, Modular P Roche Roche ,62 1,01 2,04 1,5 1, Fusion 5.1 OCD OCD ,63 1,04 2,16 1,68 1, Integra 700 Roche Roche ,61 1,02 1,99 1,52 1, Dimension RxL Dade Dimension (DF18) 0,71 1,03 2,06 1,5 1, ,49 0,97 2 1,51 1, ,63 1,03 2,13 1,54 1, ,71 1,06 1,96 1,55 1, Roche Roche ,64 1,02 2,01 1,52 1, Modular P Roche Roche ,64 1,04 2,08 1,55 1, Integra 400 Roche Roche ,62 1,03 2,02 1,54 1, Vitros 5,1 FS OCD OCD ,60 1 2,07 1,52 1, Vitros 250 OCD OCD ,59 0,96 2,17 1,61 1, Dimension RxL Dade Dimension (DF18) 0,65 1,02 2,07 1,55 1, Vitros 250 OCD OCD ,59 0,92 2,09 1,54 1, Fusion 5.1 OCD OCD ,62 1,03 2,09 1,54 1, ,62 1,02 2,09 1,56 1, AxSYM Abbott AxSym 3B ,58 1,09 2,08 1,61 1, Vitros 250 OCD OCD ,61 0,98 2,06 1,56 1, Dimension RxL Dade Dimension (DF18) 0,64 1,03 2,04 1,53 1, AEROSET Abbott Aeroset 3L ,64 1,03 2,04 1,55 1, TDx Abbott TDx ,6 1 2,02 1,54 1, LX 20 Coulter Synchron LX (474947) 0,67 1,07 2,02 1,5 1, Dade Emit II (9K309) 0,63 1,06 2,09 1,59 1, Vitros 250 OCD OCD ,61 1,02 2,09 1,64 1, Dimension RxL Dade Dimension (DF18) 0, ,6 1, MODULAR Roche Roche ,69 1,09 2,15 1,62 1, Cobas 6000 (c 501) Roche Roche ,7 1,16 2,2 1,67 1, ,72 1,1 2,26 1,83 1,7 4 De mediaanwaarde voor alle methoden voor staal E/7244 is 1.51 g/l. Ze is in overeenstemming met de targetwaarde 1.52 g/l bekomen tijdens de eerste enquête en gebruikt voor de statistische verwerking. Het laboratorium nr 13 geeft een resultaat met een belangrijke negatieve bias voor het controlestaal. 23/01/07 15/28

16 C. Lineariteitsstudie op alle gegevens De resultaten bekomen door de deelnemers werden vergeleken met de targetwaarden. Voor de vier eerste stalen (E/4734, E/4736, E/4738, E/4739) werd de mediaan bekomen met alle resultaten van de chromatografische methoden tijdens deze enquête, respectievelijk: 0.61g/L, 1.0 g/l, 1.99g/L en 1.51g/L, gebruikt als targetwaarde. Voor het staal 7244 zijn de targetwaarden de bekomen resultaten bekomen door de chromatografische methoden tijdens een vorige enquête: 1.21g/L (E/6509), 1.52g/L (E/6507), 0.82g/L (E/6395) en 0.21g/L (E/5190). C1 Outliers Het is belangrijk om bij de evaluatie van de gegevens geen verkeerde waarden te gebruiken. De gegevens worden eerst uitgeplot om de duidelijke afwijkingen op te sporen (zie onderstaande grafiek). Laboratorium nr 3 heeft drie outliers geleverd (waarschijnlijk een omwisseling van stalen), de laboratoria 18, 30, 48, 61 en 142 hebben één outlier geleverd. Eén laboratorium heeft een nulwaarde gerapporteerd voor de laagste concentratie. Ook dit resultaat werd uit de dataset gehaald. Enkele labo's hebben ook twee keer gemeten met dezelfde methode. Hiervan zal telkens de tweede meting weggelaten worden. reported target 23/01/07 16/28

17 C2 Lack of fit Voor iedere methode werd een lack of fit test uitgevoerd. Deze test gaat na of de punten kunnen beschouwd worden als liggende op één lijn of niet. De P-waarden werden in de onderstaande tabel opgenomen, een significante P-waarde duidt erop dat de punten niet kunnen worden beschouwd als liggende op één lijn. Méthode P lack of fit 046 ADH- Roche Bij weglaten van staal met concentratie 0.21 g/l Headspace chromatography (capillary-column ) ADH - Dade Dimension ADH- Vitros ADH- Abbott TDx/ADx Casier Delaunois ADH- Abbott AxSym ADH- Dade (Emit) Direct Gas chromatography (packed-column) Direct Gas Chromatography - (capillary-column) ADH- Beckman Bij weglaten van staal met concentratie 1.21 g/l Er blijken twee methodes te zijn die een afwijking van lack of fit vertonen: ADH-Roche en ADH-Beckman. Bij ADH-Roche blijft, zelfs bij het weglaten van het staal van 0.21 g/l (cursieve tekst), de «lack of fit» significant (voor deze groep is de power van de test hoger dan voor de andere groepen want er zijn meer resultaten). Bij ADH-Beckman wordt de «lack of fit» niet meer significant bij het weglaten van het staal van 1.21 g/l (cursieve tekst), waarvoor de dispersie laag is maar de waarde negatief gebiased (zie grafiek hoofdstuk C.3.2). 23/01/07 17/28

18 C3 Gewogen regressie en betrouwbaarheidsinterval Eerst wordt voor alle labo's een gewogen lineaire regressielijn berekend, rekening houdend met alle stalen gestuurd tijdens de enquête voor de grafische voorstelling. Een regressierechte wordt door een intercept en helling gekarakteriseerd. De y as is wat in statistiek de afhankelijke variabele genoemd is(ttz de resultaten van de labo s) en de x as is de onafhankelijke variabele (ttz de target waarden). Een intercept dient echter met de grootste omzichtigheid te worden geïnterpreteerd als de gegevens van de onafhankelijke variabele geen 0-waarden bevatten. Het is in het algemeen zeer gevaarlijk om bij lineaire regressie uitspraken te doen over het gedrag van de afhankelijke variabele (=gerapporteerde waarde) voor een waarde van de onafhankelijke variabele (=consensus waarde) die buiten de range valt van de concentraties van stalen die zijn rondgestuurd. Tijdens de enquête worden stalen rondgestuurd met een concentratie van 0.2 tot 2 g/l. Bijgevolg mogen de resultaten van de regressie niet geextrapoleerd worden tot 0g/l. Mathematisch kan men ook bewijzen dat de variatie op de intercept groter wordt naarmate de waarden van de onafhankelijke variabele zich verder van 0 bevinden. Indien men de intercept wel wil interpreteren dient men ervoor te zorgen dat de range van de waarden van de onafhankelijke variabele wel 0 bevatten. Dit kan men doen door van iedere waarde een vast getal af te trekken. Dit is hier gebeurd door van ieder punt 0.21 af te trekken. In deze studie dient de intercept geïnterpreteerd te worden als de verwachte gerapporteerde waarde bij het staal met de laagste concentratie, 0.21g/l. De 45 -lijn wordt gekenmerkt door een lijn met intercept 0.21g/L en helling 1. C3.1. Op alle punten en alle methoden De intercepten worden tegenover de hellingen in grafiek gezet en hun uiterste betrouwbaarheidsinterval (99.9 %) wordt berekend onder de vorm van een ellips voor alle resultaten en alle methoden. 23/01/07 18/28

19 Hoe breder de dispersie van de resultaten, hoe breder de ellips. Hoe groter de intercept met de y as hoe verder de ellips zich van de verticale as bevindt. Hoe hoger de helling, hoe verder het centrum van de ellips ten opzichte van de x as verschoven is. In de onderstaande grafiek blijken er twee punten te zijn die buiten de ellips en dus buiten de uiterste confidentielimieten vallen (99.9%). Het zijn de resultaten van labo s 81 en 170 (zwarte pijl). Deze twee labo s hebben een hoger helling dan alle andere deelnemers. In dezelfde grafiek valt het resultaat (rode pijl) binnen het betrouwbaarheidsinterval. Het heeft wel de hoogste intercept. slope Intercept 23/01/07 19/28

20 C3.2. Bespreking per methode Voor elke methode hebben wij 2 verschillende grafieken opgesteld, enerzijds de gewone regressielijn (linker grafiek) en anderzijds het betrouwbaarheidinterval rond de helling en intercept (rechter grafiek). Links staat een grafiek met alle gewogen regressielijnen voor elke methode. De zwarte lijn is de 45 -lijn. De donker blauwe lijnen zijn de lijnen van alle laboratoria. Lichtblauwe lijnen zijn de lijnen van de labo's die als mogelijke outlier waren aangeduid (zie bij Vitros met 2 outliers). Rechts worden de hellingen tegenover de intercepts voor ieder methode uitgeplot Zoals bij de globale resultaten, geldt bij de voorstelling van het betrouwbaarheidsinterval door middel van een ellips: - Hoe breder de dispersie van de resultaten, hoe breder de ellips. - Hoe groter het intercept met de y as in de gewone grafiek (linker grafiek) hoe meer verschoven het centrum van de ellips van zijn verticale as. - Hoe hoger de helling in de gewone grafiek (linker grafiek), hoe meer het centrum van de ellips in de rechtergrafiek ten opzichte van de x as verschoven is. Drie ellipsen werden per grafiek getekend: - zwarte ellips: 95%-confidentie-ellips rond de 45 theoretisch-lijn. Elk punt dat buiten deze ellips valt verschilt significant van de 45 -lijn (P<0.05). Twee gebruikers van Vitros en één gebruiker van TDx/ADx liggen buiten het betrouwbaarheidsinterval. - grote blauwe ellips: 95%-confidentie-ellips van de resultaten bekomen met een methode. Elk punt dat buiten deze ellips valt is een outlier tegenover zijn eigen groep (P<0.05). De twee zelfde Vitros gebruikers liggen buiten het betrouwbaarheidsinterval van hun groep. Eén gebruiker van Abbott TDx/ADx bevindt zich op de limiet van het betrouwbaarheidinterval van deze groep. Ideaal zouden deze twee ellipsen zo dun mogelijk moeten zijn (in dit geval is de methode precies) en samenvallen, wat betekent dat de methode nauwkeurig is. 23/01/07 20/28

21 - de grijze bolletjes zijn de intercepts en hellingen voor ieder laboratorium. - het rode bolletje is de gemiddelde intercept en helling voor elke methode; - de lichtblauwe stippen zijn de intercepts en hellingen van de labo's die hierboven als mogelijke outlier werden aangeduid. - het zwarte kruis is het theoretisch punt van de 45 -lijn. - de kleine blauwe ellips (stippellijn): confidentie-ellips rond de gemiddelde intercept en helling (rode bolletje). Indien het punt (intercept 0.21; helling1) buiten deze ellips valt verschilt de gemiddelde regressierechte (rood bolletje) significant van de 45 -lijn (zwart kruisje). In dit geval zijn alle punten voor een bepaalde methode gebiased (tweede manier om de nauwkeurigheid weer te geven). 23/01/07 21/28

22 De volgende resultaten worden bekomen : Casier Delaunois Reported value Slope Target value Intercept Voor Casier Delaunois is er geen statistisch significant verschil tussen de resultaten bekomen door de labo's en de theoretische 45 -lijn. De evaluatie van deze groep is echter moeilijk omdat de variatie groot is en het aantal gegevens laag. De ellips is het grootste in vergelijking met alle andere methoden. Wij hebben de assen moeten aanpassen voor beide grafieken. Direct Gas Chromatography (capillary-column) Reported value Slope Target value Intercept Voor directe gaschromatografie (n=8) is de gemiddelde intercept en helling statistisch licht verschillend van de 45 -lijn (P=0.016). 23/01/07 22/28

23 Direct Gas chromatography (packed-column) Reported value Slope Target value Intercept Voor de gebruikers van de direct packed gas chromatografie (n=8) is er geen significant verschil tussen het gemiddelde van de hellingen en intercepten en de theoretische 45 -lijn. Headspace chromatography (capillary-column) Reported value Slope Target value Intercept Voor Headspace chromatografie (n=14) is er geen significant verschil tussen het gemiddelde van de hellingen en intercepten en de theoretische 45 -lijn. 23/01/07 23/28

24 ADH- Abbott AxSym Reported value Slope Target value Intercept Voor Abbott Axsym (n=11) is er een licht significant effect, met een lagere intercept en hogere helling dan bij de theoretische 45 -lijn (P=0.03). Er is één punt dat wat afwijkt van de rest; het verschil met de theoretische 45 -lijn is echter niet significant (P=0.06). ADH- Abbott TDx/ADx Reported value Slope Target value Intercept Voor Abbott TDx/ADx (n=8), is er een licht significant effect, met vooral hogere helling dan bij de theoretische 45 -lijn (P=0.03). Er is één punt dat wat afwijkt van de rest; het verschil met de theoretische 45 -lijn is significant(p<0.05). 23/01/07 24/28

25 ADH- Beckman Reported value Slope Target value Intercept Voor Beckman (n=5) is er geen significant verschil tussen het gemiddelde van de intercepten en hellingen en de 45 -lijn. De grotere dispersie rond de interceptwaarden is bëinvloed door het feit dat geen enkel laboratorium het staal met lage concentratie 0.21 g/l heeft gekregen, de onzekerheid rond de intercept is dus groter. ADH- Dade (Emit) Reported value Slope Target value Intercept Voor de gebruikers van Dade (Emit) (n=12) is de intercept hoger, wat een gemiddeld licht positieve bias suggereert. Er is echter geen significant verschil voor de regressies. 23/01/07 25/28

26 ADH- Roche Reported value Slope Target value Intercept Voor de gebruikers van Roche (n=88) is er een licht significant verschil met de theoretische 45 -lijn (P<0.05), waarbij de intercept en helling licht hoger zijn wat een licht positieve bias suggereert. De punten buiten de ellips zijn te wijten aan het feit dat voor deze methode een groter aantal resultaten bestaan en dat de ellipsen met een betrouwbaarheidsinterval van 95 % getekend zijn wat impliceert dat er bij dit aantal gegevens van nature een vijftal punten buiten de ellips liggen. ADH- Vitros Reported value Slope Target value Intercept Voor de Vitros gebruikers (n=26) is de intercept significant lager en de helling significant hoger (P=0.0014) (de twee blauwe punten buiten de ellips). Twee laboratoria hebben een regressierechte die significant afwijkt van de 45 -lijn (de licht blauwe lijnen op de linker grafiek). De grote afwijking heeft ons verplicht de assen aan te passen om de linker grafiek op te stellen. 23/01/07 26/28

27 ADH - Dade Dimension Reported value Slope Target value Intercept Voor de gebruikers van Dade (Dimension) (n=10) is het gemiddelde van de intercepten en hellingen hoger (licht positieve bias) (P=0.006). Er is geen significant verschill tussen de regressies (waarschijnlijk gebonden aan het kleine aantal resultaten). 23/01/07 27/28

28 5. Algemene conclusie Zoals tijdens de vorige enquêtes blijft de de Casier Delaunois methode de zwakste wat betreft performantie. Tijdens deze enquête zijn de methoden met een goede precisie en waarvoor de gemiddelde regressie het dichts bij de theoretische lijn valt de methoden Roche, de headspace capillaire gaschromatografische methode, de direct packed gaschromatografie en ADH Beckman. Een tussen-methoden vergelijking in het huidig bestel moet voorzichtig gebeuren omdat de interpretatie sterk bemoeilijkt wordt doordat het aantal deelnemers per groep niet homogeen is en door het feit dat de laboratoria niet dezelfde stalen gedoseerd hebben. Deze studie geeft u de gelegenheid om uw resultaten tegenover uw methode te vergelijken. Op uw individueel rapport wordt uw gewogen regressielijn en uw geanonimiseerd laboratorium nummer weergegeven. Opgepast, voor de individuele rapporten werden de ruwe data gebruikt zonder de aanpassing te doen zoals in het globaal rapport voor de intercepten en hellingen waar alle lijnen met g/L werden verschoven om de intercept beter te kunnen evalueren. This report may not be reproduced, published nor distributed without prior consent from the WIV-ISP END 23/01/07 28/28