Congres Evidence Based Zorglogistiek Evidentie uit benchmarking: van data naar bewijs Benchmarking OK: een kwestie van leren Lizette Berkx Geert Kazemier Slide 1 Programma workshop Korte inleiding op het project Benchmarking OK Evidence Based Management QUIZ Levert benchmarking evidence? een casus Discussie naar aanleiding van casusmateriaal Uitkomsten Evidence Based Management QUIZ 1
Benchmarking OK project groeit uit tot volwassen samenwerking Benchmarking OK is een kwestie van leren in een veilige en unieke omgeving Doelstelling is leren van elkaar op het gebied van bedrijfsvoering OK s Uniek in de zin van 8 Universitair Medische Centra (UMC s), 8 grote operatiekamercomplexen met meerdere locaties Deelnemers uit verschillende disciplines Organisatie: stuurgroep en projectgroep Zonder externe (financiële) ondersteuning Anders dan de oliebollenlijstjes Samenwerkingsovereenkomst Vertrouwelijkheid en eigenaarschap van data Nadruk op de verhalen achter de cijfers en de verschillen Geen ranglijsten Openheid en vertrouwen vooral tijdens studiemiddagen Sterk en groot netwerk Steeds meer samenwerking perioperatieve normothermie werkgroep risicomanagement 2
Niet alleen doelmatigheid maar integrale bedrijfsvoering van de OK Focus op gebruik van OK-tijd Prestatie-indicatoren gericht op capaciteitsmanagement Inkooponderzoek Personele kosten Patiënttevredenheid Centrale Sterilisatie Afdeling Veiligheid & Kwaliteit: Time Out Procedure Operatieve Checklist Meldingen Incidenten Patiënten Postoperatieve Wondinfecties Uniforme definities en een enorme hoeveelheid aan data 8 UMC s 8 OK-complexen met meerdere locaties 2005-2010 195 OK s 211.131 OK-dagen 729.806 OK-zittingen 3
Indicatoren beoordelen in relatie tot organisatiekenmerken Benchmarking is een proces dat gebruikt kan worden om onderdelen van de organisatie te verbeteren door de kenmerken, methoden en uitkomsten van de eigen organisatie in een veilige leeromgeving te vergelijken met anderen. Hoe kunnen de UMC s van elkaar leren? Een OK-dag wordt in het geheel geëvalueerd met de benutting: de tijd binnen bedrijfstijd dat een patiënt op OK aanwezig is. De onbenutte tijd wordt vervolgens verklaard door late start, wisseltijd en vroeg einde leegstand. OK-benutting biedt beperkte aanknopingspunten doordat de verschillen hierin tussen de UMC s niet groot zijn. Juist door de onderliggende prestatie-indicatoren te analyseren wordt duidelijk waar verbeterpunten liggen. 4
Hoe wordt leren van elkaar gefaciliteerd? Web-based rapportagetool Managementrapportages Aanvullende analyses op aanvraag Studiemiddagen (1x per 2 maanden) Werkgroepen Jaarlijks landelijk congres bevordert een bredere kennismaking en komt de uitwisseling van ideeën ten goede Congres Evidence Based Zorglogistiek Evidentie uit benchmarking: van data naar bewijs Benchmarking OK: een kwestie van leren Slide 10 5
The Evidence Based Management QUIZ Worden in uw organisatie beslissingen gebaseerd op basis van bewezen concepten? Met andere woorden, is er sprake van Evidence Based Management (EBM)? Licht uw antwoord toe Maak de QUIZ en lever uw antwoorden in Aan het einde van de workshop worden de resultaten van de QUIZ bekeken en vergeleken met uw eerdere mening Casus: Evidence Based Management en Late Start van klinische OK s 6
Definities late start Om het begin van een OK-dag te beoordelen is de indicator late start gedefinieerd. De late start is de tijd tussen de start van de bedrijfstijd (8:00 uur) en de aankomst van de eerste patiënt op OK De frequentie per OK-dag kan geïnterpreteerd worden als het percentage van het totaal aantal OK s dat te laat start op een willekeurige werkdag Late start duur Teller: Noemer: De som van de perioden tussen Start Bedrijfstijd en Aankomst OK van de patiënten die als eerste binnen bedrijfstijd starten Aantal OK-dagen waarop late start berekend is Late start frequentie Teller: aantal OK-dagen waarop late start berekend is Noemer: totaal aantal OK-dagen dat uitgegeven is Scan de wetenschappelijke publicaties over late start ( tardy first case of the day starts ) Bestudeer de benchmarkdata en kies een UMC uit Wat valt op aan de data? Casus: vorm duo s en discussieer aan de hand van onderstaande vragen Zijn de afgelopen 6 jaar (2005-2010) trends te ontdekken? Welke? Hoe gaat u te werk als evidence based manager? Wat is uw aanpak gezien deze data? Heeft u nog meer informatie nodig? Zo ja, welke? Schrijf uw plan van aanpak op een flip-over en licht de stappen mondeling toe aan de rest van de groep en benadruk daarbij wat uw aanpak evidence based maakt 7
Tabellen (Excel sheets) uitdelen Congres Evidence Based Zorglogistiek Evidentie uit benchmarking: van data naar bewijs Benchmarking OK: een kwestie van leren Slide 17 8
Evidence Based Medicine Het gewetensvol, expliciet en oordeelkundig toepassen van het beste huidige bewijsmateriaal om beslissingen te nemen bij individuele patiënten in het behandelproces Waarbij het gaat om de integratie van (eigen) klinische expertise wensen, voorkeuren, verwachtingen patiënt het best beschikbare bewijs Bron: Sackett et al, 1992 Evidence Based Management translating principles based on best evidence into organisational practice Rousseau, 2006 Is there such a thing as Evidence Based Management? Academy of Management Review systematic use of the best available evidence to improve management practice Reay et al. 2009, What s the Evidence on Evidence Based Management? Academy of Management Perspectives family of approaches that support decision making Briner et al. 2009 Evidence Based Management: Concept clean-up time? Academy of Management Perspectives Wat valt op? 9
Evidence Based Management translating principles based on best evidence into organisational practice Rousseau, 2006 Is there such a thing as Evidence Based Management? Academy of Management Review systematic use of the best available evidence to improve management practice Reay et al. 2009, What s the Evidence on Evidence Based Management? Academy of Management Perspectives family of approaches that support decision making Briner et al. 2009 Evidence Based Management: Concept clean-up time? Academy of Management Perspectives Wat valt op? Evidence Based Management Het maken van management/organisatie beslissingen door het gewetensvol, expliciet en oordeelkundig toepassen van vier bronnen informatie: 10
Niveaus van evidence Bron: Center for Evidence Based Management (www.cebma.org) Verschillende vragen verschillende methoden Bron: Center for Evidence Based Management (www.cebma.org) 11
Levert benchmarking evidence? Voor welke soort vragen levert benchmarking evidence? Effectiveness: does it work, does A work better than B? Mechanism: how does it work, why does it work? Context: in what circumstances does it work? Acceptability: will the target group accept the intervention? Prevalence: how often is this intervention/method applied? Appropriateness: is this the right intervention/method? Levert benchmarking evidence? Voor welke soort vragen levert benchmarking evidence? Effectiveness: does it work, does A work better than B? - Mechanism: how does it work, why does it work? + Context: in what circumstances does it work? +/- Acceptability: will the target group accept the intervention? +/- Prevalence: how often is this intervention/method applied? - Appropriateness: is this the right intervention/method? + 12
Op welk niveau levert benchmarking evidence? Bron: Center for Evidence Based Management (www.cebma.org) Can Benchmarking Produce Evidence? Bron: Pfeffer and Sutton, Harvard Business School 2006 There is nothing wrong with learning from others experience It s a lot cheaper and easier to learn from the mistakes and successes of others than to treat every management challenge as something no organization has ever faced before The problem lies with the way that benchmarking is usually practiced: it s far too casual. The logic behind what works at top performers, why it works, and what will work elsewhere is barely unraveled, resulting in mindless imitation 13
Take Home Message Benchmarking OK: Evidence Based Operating Room Management? een actief beheerde databron nodigt uit tot analyse en leren van elkaar vorm van longitudinaal onderzoek, continu meten, dezelfde meetpunten en indicatoren een rijke bron voor evidence om ontwikkelingen en trends te volgen ambitie: evidence creëren of best practices uit het ene UMC ook succes boeken in een ander UMC (andere context) en waarom dit wel of niet het geval is Take Home Message Hoe kunt u vanaf morgen zelf meer evidence based te werk gaan? vraag altijd eerst het bewijs dat onderbouwt dat voorgestelde interventie ook werkt onderzoek de logica van het geleverde bewijs; ga de level of evidence na aan de hand van de onderzoeksopzet en kijk of de context aansluit bij uw eigen situatie twijfel aan de eigen kennis check uw eigen kennis en die van anderen aan de hand van recente literatuur pas op voor management trends waar mogelijk, neem de organisatie als een prototype en zoek bevestiging voor het bewijs in de eigen organisatie via experimenteren 14
Ideeën, suggesties, opmerkingen en/of vragen? Drs. E. (Lizette) Berkx Projectleider Benchmarking OK In dit project werken de operatiekamercomplexen van alle acht Universitair Medische Centra in Nederland (UMC s) samen. Bezoek de website www.benchmarking-ok.nl Erasmus MC Postbus 2040 3000 CA Rotterdam Kamer Hs-311 Tel (010-70)32528 of 35901 mobiel: 06 2434 2635 e.berkx@erasmusmc.nl www.erasmusmc.nl 15