Resultaten van de eerste MIM Snomed Hackathon

Vergelijkbare documenten
1 e MIM Snomed Hackathon 2018 Elzenveld Antwerpen, 23 november MIM-BMIA (Belgian Medical Informatics Association) AZ Sint-Lucas Gent

Implementatie van SNOMED CT in het EPD: secundair gebruik van data voor ICD-10-BE 25/09/2015

National Release Center Belgium Strategie en Visie

Terminologiebeleid in België De rol van SNOMED CT

De weg naar meer structuur en codering. MIC november Dr. Filip Veldeman

Clinical Documentation Improvement

Terminologie in de roadmap

Het Terminologiebeleid in België Het actieplan e-gezondheid

Context Informatiestandaarden

Introductie in SNOMED CT. NRC België

Gestructureerd registreren

Belgische release SNOMED CT

Laboratoriuminformatiesystemen in (perifere) ziekenhuizen: goed op weg naar het L-EPD?

23 april 2015 Dr. Hilde Pincé (UZ Leuven- KU Leuven) Dr. Ingrid Mertens (FOD Volksgezondheid)

Mapping van oude SNOMED versies

AP6 Delen om samen te werken

Base24 database suite

Resultaten gesprekssessie 1 Elektronische Productinformatie

Software Mobiliteit. UAMS - 6 maart Theo D'Hondt Lab voor Pogrammeerkunde Vrije Universiteit Brussel

UiJreksel roadmap Actualisering Roadmap e- Gezondheid Ac>epunt 6 Minimaal EPD Sessie 6 01 juni /30/15

Memo Tekstmining. Technieken en toepassingen in de zorg. mei De Praktijk Index

Workshop 12 ART-DECOR en Acute overdracht. Michael Tan Kai Heitmann Maarten Ligtvoet

De balans herstellen tussen big data en inzichtelijke informatie FREESTONE SERVICE OFFER INTELLIGENT REPORTING

ROYAL DIRKZWAGER. Royal Dirkzwager The Maritime Information and Service Provider Royal Dirkzwager The Maritime

FaceTalk veilige videoconsulten. Pieter Peletier

Een jaar na het winnen van de Prijs voor Examens. Marije Lesterhuis & Roos Van Gasse NVE congres 2019

BEFDSS. Het Belgische uitwisselingsformaat voor onderzoekgegevens afkomstig van visueel rioolonderzoek. 1/12/ / 6

Aanmelding Model van zorginformatiebouwstenen (zib s) aan de Basisinfrastructuur

De integratie van het OCMW in de gemeente technisch bekeken Shopt-IT 2015 Slide 1

Naam van het project: iknow Portal

Ecosysteemdiensten t in kaart brengen en waarderen

Computing Healthcare Quality Indicators Automatically

THE COMPLETE DOCUMENT MANAGEMENT SOLUTION

BIM Loket. Beheerdersdag Workshop ronde 1

Nederlandse Vereniging voor Heelkunde Postbus LB Utrecht. Leiden, 30 mei Geachte heer/mevrouw,

Software Asset Management bij UWV

RECENTE EVOLUTIES IN HET VLAAMSE GEURBELEID

3M All rights reserved.

Het Terminologiebeleid in België Het actieplan e-gezondheid

Bewaren van digitale informatie: hoe kom je tot een goede beslissing?

Ervaringen met Digitale Uitwisseling 6 februari 2019

Vertaling van SNOMED CT: Aanpak, processen en tools

Flubber, verdediging. Pieter-Jan Vandormael. Groep 7: Jan van den Boom. Pieter-Jan Vandormael. Roel Van Reeth

Ontologie, classificatie, terminologie en codificatie in de Authentieke Bron Geneesmiddelen voor het e-health Platform in België

Verificatie & Validatie

Voorstel bachelor proef Phara

Het etcs project Gestructureerde samenwerking van WoonZorgCentra met Huisartsen en Ziekenhuizen

EIGENSCHAPPEN CONVERGED HARDWARE

NICTIZ. standaardisatie nationaal en internationaal in de gezondheidszorg. HL7 en WMO maandag 29 januari 2007

CFD als tool voor de Fire Safety Engineer: case-study

Open Data in België en Vlaanderen; Interessante complexiteit. Noël Van Herreweghe

Tales en Markomo heten u van harte. Welkom. Wegwijs op het mobiel internet

Zorginformatiebouwsteen:

Registratie aan de Bron

Scope van deze namiddag.

Aanvullende informatie over elke mindset krijgt u door te klikken op de vlakken in de roadmap.

T Titel stage/afstudeeropdracht : Toekomstvaste Applicatie Integratie - Interconnectiviteit

Wie is leidend of lijdend?

Vroegtijdige interventies in de Belgische context: onderzoek en perspectieven

IHE helpt bij medicatie & implantaten

informatie architectuur lesweek 4 IAM V

Koppeltaal GGZ Nederland

ehealth PROMIS Linda Mook Erasmus MC

SIGRA Visie op ICT, op weg naar 2025 SIGRA Conferentie ICT en ehealth 2016, Positieve gezondheid, welzijn en ehealth

MACHINE LEARNING. Een egocentrische presentatie door een data scientist van Axians. Michel van Gelder Data Scientist bij Axians

INSTRUMENTEN TER ONDERSTEUNING VAN SCRIPTIESTUDENTEN

DTL focus meeting Ongoing initiatives to establish automated links between clinical care and clinical research

MIC2018. EPD ervaringen in de praktijk. gebruik en hergebruik van data

DIENSTHOOFD. Netinfradiensten Domeindiensten/Technische diensten Asse, Brugge, Gent, Ronse

ACTUALISATIE ROADMAP egezondheid SESSIE Nr 2 18/05/15 Project A13: Realisatie van een nationaal terminologiebeleid.

Make it work! Virtuele mobiliteit in internationale stages integreren: een snelgids

Hoe help je eenzame senioren? Door mensen te laten langskomen (dankzij technologie)

Vervolg op het STEVIN Programma

De mindset van een verbinder

Evaluatie diagnosethesaurus

Competentieprofiel deskundige ICT

Opleiding Mindfulness voor Professionals. Mindfulness

SIG Research Information & SURF programma Open Access OPTIMAAL BENUTTEN DOOR AFSTEMMING

Deeltijdse ICT-medewerker SASK

WORKSHOP MONARC (GEOPTIMALISEERDE RISICOANALYSEMETHODE CASES)

Doe meer met het Elektronisch Medisch Dossier. Dr. Filip Veldeman Microsoft Innovation Center Vlaanderen 21 februari 2013

Kernachtig communiceren

WST 1 AP 1 (DMG = EMD) Basis. Actiepunten

Zorginformatiebouwsteen:

COOKBOOK Businessproject: Sumehr

KNVB en UNIT4 helpen amateurvoetbal met het bepalen van ambities

Goed, beter, best. Eenvoudig en betrouwbaar beoordelen met D-PAC

Zorginformatiebouwsteen:

Belangrijkste uitdagingen voor landelijke versnelling van verwijzen

Whitepaper Hybride Cloud Met z n allen naar de cloud.

Competenties kwaliteitsvol beoordelen

Web building gevorderden: CSS & JavaScript. Karel Nijs 2008/11

Hallo, overlopen wij eens uw medicatieschema?

ALGEMENE VOORWAARDEN FME Hackathon 2017

PILOOTPROJECT BELRAISCREENER VVSG Mechelen,

Functiebeschrijving. Applicatiebeheerder. Graad B1-B3

Woningpas. VEA 16 december 2016

Zorginformatiebouwsteen:

Informatiestandaard eoverdracht. Pim Volkert Coördinator Terminologie

Uitdagingen in de realiteit van de werkvloer. K. Balcaen

Transcriptie:

Resultaten van de eerste MIM Snomed Hackathon

1. Context AZ Sint-Lucas Gent Vandaag - één ziekenhuisbreed kerndossier (medisch) met één centrale medische voorgeschiedenis gedeeld en samen beheerd synthese, probleemlijst, lijn/lijn, in vrije tekst mogelijkheid tot gespecialiseerde aanvulling in detailveld Gepland evolutie naar Centraal EPD (medisch-zorg-spoed-ok-iz- ) met één centrale medische voorgeschiedenis gedeeld en samen beheerd synthese, probleemlijst, lijn/lijn, gestructureerd met Snomed CT niet met lege voorgeschiedenis beginnen voorbereiden migratie

2. Hoe 400.000+ voorgeschiedenislijnen structureren en migreren? Rosetta project 2 talen (Nederlands en Engels) 3 geschriften (vrije tekst, Snomed CT en ICD-10) hulp bij structureren en migreren voorverwerking acceptatie validatie

3. Hulp van NLP (natural language processing) en AI (artificiële intelligentie)? Vereisten: snel, schaalbaar, betrouwbaar, begrijpbaar, bruikbaar Idee: Snomed Hackathon Met z n allen samenwerken om een gezamenlijk probleem oplossen (400.000 voorgeschiedenislijnen structureren naar Snomed CT) Naar analogie met IHE-Connectathon, focus op semantische interoperabiliteit

3. Snomed Hackathon evaluatie commissie MIM (Filip Veldeman, Michel Walravens) AZ Sint-Lucas Gent (Thomas Caesens, Günther Kostka) FOD Volksgezondheid / Belgisch Snomed NRC (Ingrid Mertens) LT3, Universiteit Gent (Els Lefever, Veronique Hoste) Vereisten: snel, schaalbaar, betrouwbaar, begrijpbaar, bruikbaar

4. Vier deelnemers géén wedstrijd wél update over stand vd technologie BT Clinical Computing EarlyTracks IBIS.ai Lynxcare Gouden standaard gecodeerd door MZG-medewerkers van AZ Sint-Lucas Baseline tot stand gekomen via Machine vertaling NL-EN en ctakes tool 4 categorieën: 1 = testlijnen met één concept uit top 500 2 = testlijnen met één concept uit top 5000 3 = testlijnen met meerdere concepten, incl. een top 5000 4 = overige testlijnen

5. Resultaten van automatische evaluatie Baseline Gemiddelde vd 4 Beste vd 4 Categorie 1 30,1 % 73,4 % 87,8% Categorie 2 36,0 % 58,2 % 72,7% Categorie 3 29,1 % 40,7 % 47,2% Categorie 4 23,0 % 26,6 % 37% Geen wedstrijd, geen ranking, geen winnaars of verliezers Eén oefening, geen cyclische verbetercyclus feedback en fine tuning We zien duidelijke trends en aanknopingspunten voor verdere verbetering We bespreken individuele resultaten met de leveranciers afzonderlijk

8. Anders kan ook betekenen beter dan gouden standaard - Deels vooraf opgevangen door meerdere goeie antwoorden te voorzien specifieke code = 1, minder specifieke parent code = 0,3 varianten wanneer Snomed ruimte laat voor interpretatie - Na de hackathon werd nog één update gedaan van de gouden standaard, met zaken die bij de verbetering aan bod kwamen (occasioniële fout of vaststelling van een allen tegen één resultaat) - Vb. laatste Snomed release heeft nog extra termen waar lateraliteit ineens is mee opgenomen, en die nog niet mee in de gouden standaard zaten. - Individuele betere resultaten niet mee opgenomen (niet mogelijk in beperkt tijdsbestek) - Zo zorgvuldig mogelijk, verder bluts met de buil

9. Fouten tegen technische en inhoudelijke afspraken van de Hackathon Technische fouten: mogelijke fouten omwille van conversieprobleem met utf-8 manier van rapporteren wanneer geen concept code gevonden is manier van rapporteren bij negatie => zo goed mogelijk opgevangen om maximaal resultaat te bekomen => voor iedereen gelijk Inhoudelijke fouten: andere semantische tags (situation, event, body structure, physical object) onvolledig samengenomen concepten

10.Fouten tegen regels van Snomed - Niet altijd de laatste Snomed CT versie? - Keuze van oude voorkeuromschrijving voor FSN - Keuze van een geïnactiveerd concept - Foute semantic tags: concept krijgt andere tag dan in Snomed release - Bron?

11.NLP-gerelateerde fouten, of combinatie medisch inhoudelijk en NLP Problemen met correcte omzetting door: - Spelfouten - Ongekende afkortingen - Fonetische zoekacties die de mist ingaan - Herkennen van samengestelde termen tot één concept - Integreren van medische kennis - Problematiek van vertaling NL-EN - Integreren van specifieke richtlijnen bij keuze van concepten => op te vangen door feedback en training

12. Lessons learned - algemeen Voorgeschiedenis omzetten naar Snomed CT is een leerproces - Een gestructureerde probleemlijst is anders dan een voorgeschiedenis: dossierhygiëne, leren werken met structuur, leren kiezen uit lijsten - Kennisopbouw Snomed CT bij medewerkers: top 500, top 5000, vastleggen afspraken in codeerfiches, - Nood aan verdere uitbouw van de Belgische Snomed CT release - Nood aan ondersteunende tools: Opzetten van een terminologie server, zorgen voor release updates Integratie van NLP tools kunnen het manuele werk versnellen - Nood aan integratie in bestaande en nieuwe EPD omgeving (ter klinische validatie)

12. Lessons learned - NLP - We verwachten de grootste meerwaarde van NLP op categorie 3 en 4 - NLP van baseline en Hackathon deelnemers biedt een belangrijke tijdswinst in het toekennen en accepteren van Snomed concepten - Globaal scoren de Hackathon deelnemers in categorie 3 en 4 beter dan baseline - Er is nog veel ruimte voor verbetering, in onderlinge samenwerking tussen leveranciers en gebruikers - Nood aan initiatieven om kennis te delen en expertise uit te wisselen

13. Tot slot Een hackathon organiseren is een leerproces - Veel overleg en afstemming - Veel onduidelijkheden en misverstanden wegwerken - Veel energie stoppen in inhoud (gouden standaard, baseline) Kan bijdragen tot kennisdeling én oplossen van een probleem waar iedereen mee te maken krijgt in een nieuwe EPD-omgeving Dank aan alle medewerkers in MIM, AZ Sint-Lucas, Evaluatiecommissie Dank aan alle medewerkers bij de leveranciers Dank aan alle aanwezigen op het MIC2018 Voldoende ideeën voor 2 e editie vd Snomed Hackathon