Leren en ervaren in een schijnwereld Virtual reality en serious gaming in zorg en onderwijs

Transcriptie

1 Leren en ervaren in een schijnwereld Virtual reality en serious gaming in zorg en onderwijs Michelle Heijblom, Saxion Hogeschool 15 September 2016 Deventer Ziekenhuis Beter worden werkt!

2 Wie heeft er ervaring? 2

3 Doel van deze presentatie Laten zien wat serious gaming, virtual reality en augmented reality inhouden en samen nadenken over hoe deze kunnen ingezet in de zorg en het zorgonderwijs. 3

4 Inhoud Introductie Wat en voor wie? Serious gaming Virtual reality Augmented reality Veel voorkomende termen Voordelen en huidige beperkingen Mogelijke toepassingen in het zorgonderwijs 4

5 Introductie even voorstellen Michelle Heijblom : Technische Geneeskunde, Universiteit Twente : Promotieonderzoek, UT/MST fotoakoestische mammografie : Postdoc, UT/MST detectie schildwachtlymfeklier Sept 2015: Hoofddocent Technologie in de zorg, Saxion Geen uitgebreide onderzoekservaring virtual reality en serious gaming Helikopterview Beide elementen krijgen een prominente rol in het onderwijs van Hbo-v en Hbo-v G&T. Als lesstof Als lesmiddel In praktijkgericht onderzoek 5

6 Wat is serious gaming? Serious gaming: Een game (spel) met een ander (hoger) doel dan primair vermaak. Leren door te doen. Communiceren, activeren, werven of selecteren, onderwijzen, inzicht verwerven Op een interactieve, betekenisvolle en aantrekkelijke manier nieuwe kennis en vaardigheden opdoen Een serious game hoeft geen computerspel te zijn! Een game is een interactieve, door regels bepaalde omgeving waarbinnen spelers conflicten aangaan om doelen te bereiken die in een kwantificeerbare en/of betekenisvolle uitkomst resulteren ( Niet zomaar een spelletje: De verschillende game-elementen moeten worden afgestemd op de te halen competenties en gewenste leeruitkomsten. 6

7 Serious gaming: Voor wie en wat? Voor de zorgvrager: Inzicht verwerven in (omgang met) ziekte/aandoening Therapie Mentaal Fysiek (EenVandaag) Activeren (Tovertafel, Silverfit) Voor de omgeving: Ervaren van een ziektebeeld/aandoening Voor de zorgverlener: Oefenen van vaardigheden en situaties Praktisch Communicatief (Ervaren van een ziektebeeld/aandoening) 7

8 Waarom gaming in het zorgonderwijs? Waarom toepassing van serious gaming in het zorgonderwijs? Vanuit het publiek? Beoogde doelen van serious gaming, vanuit de literatuur: Handelingen: Beter (chirurgische) handelingen uitvoeren, door dat oefenen buiten de OK mogelijk is en handelingen kunnen worden gestandaardiseerd; Anatomie en chirurgische handelingen zijn bij serious gaming realistischer dan op poppen en goedkoper dan op lichamen Training (via serious gaming) verbetert precisie en efficiëntie voor nieuwelingen bij chirurgische handelingen. Groepsprocessen: (Crisis) teamtrainingen en triage-oefeningen zijn mogelijk in een realistische omgeving Weinig effectstudies gepubliceerd meer validatie nodig op Effect Kostenefficiency 8

9 Waar doe je serious gaming In een fysieke ruimte (klaslokaal, IC, fabriekshal) Run je eigen praktijk! Achter de computer In een virtuele wereld In een wereld met echte en virtuele elementen (augmented reality). Computer (Klas)lokaal Serious gaming praktijkruimte Augmented reality Virtuele wereld Virtual reality 9

10 Wat is virtual reality? Virtual reality: Een op de computer gesimuleerde wereld waarin je je lijkt te bevinden. Zintuigen worden gemanipuleerd Zien, horen, voelen en/of beïnvloeden van de virtuele wereld; Benodigdheden (computer), display, speciaal sensorenpak, handschoenen, etc. Augmented reality: Een technologie de de realiteit en virtuele wereld met elkaar verbindt Extra digitale inhoud aan het gezichtsveld toegevoegd. Benodigdheden: camera, (computer), display 10

11 VR en AR in zorg(onderwijs): voor wie en wat? Voor de zorgvrager: Exposure therapy (arachnophobia) Revalidatietraining Chemotherapie/pijn draaglijker maken/immersion Voorbereiden op een ingreep/situatie. Ophalen van herinneringen (bv bij dementie) Stem op Saxion studenten! Voor de omgeving: Je verplaatsen in een ander (into dmentia) De zorgprofessional: Leren/oefenen van vaardigheden in 3D Voorbereiden op een ingreep Oefenen van noodsituaties Tijdens een ingreep 11

12 12

13 Nr Term 1 Virtual reality 2 Augmented reality 3 Oculus rift, HTC vive 5 HMD 6 Motion capture outfit 7 Haptic feedback 8 (3D) renderen Je hoort weleens wat wat hoort bij wat? Omschrijving Een display die je op je hoofd zet Hoort bij de bekendste merken VR-brillen Hoort bij de bekendste merken AR-brillen Aanrakingen en krachten in de virtuele wereld, worden teruggekoppeld aan het lichaam. Het genereren van de afbeelding/video op basis van de data (animaties en videomaterialen), zodat deze op de juiste manier getoond kan worden. Een pak met sensoren erin om je positie en stand van de lichaamsdelen in de echte wereld terug te kunnen koppelen aan de virtuele wereld. Een hoesje met twee lenzen waar je je telefoon in kunt schuiven L E E E T L J 9 Google cardboard De schijnwerkelijkheid S 10 Hololens De echte werkelijkheid verrijkt met de schijnwereld 13 P

14 Je hoort weleens wat Virtual reality: Een schijnwerkelijkheid waarin je je kunt begeven Oculus rift, HTC-vive: Twee bekenden merken VR-brillen; Google cardboard: een kartonnen hoesje met twee lenzen waar je je telefoon in kunt schuiven om een VR waarneming te creëren. Augmented reality: De echte wereld verrijkt met virtuele componententen Hololens: Een AR-bril van Microsoft. HMD Head mounted display: Een display die je op je hoofd zet, zoals de Oculus Rift, HTC-vive en Hololens. Google glass: Een HMD/slimme bril van google, waarmee je kunt zien en aanwijzingen kunt krijgen en geven. Motion capture outfit: Een pak met sensoren erin, om je positie en stand van de lichaamsdelen in de echte wereld terug te kunnen koppelen aan de virtuele wereld. Haptic/force feedback: Aanrakingen en krachten in de virtuele wereld (bv tegen een muur lopen) worden teruggekoppeld aan het lichaam, waardoor deze aanrakingen ook echt lijken. (3D) Renderen: Het genereren van de afbeelding/video op basis van de animaties en videomaterialen, zodat deze getoond kan worden 14

15 Potentiële voor- en nadelen VR Potentiële voordelen: Ervaringsgericht en actief leren Mogelijkheid om dingen te visualiseren Leren in een omgeving/context die moeilijk is om je in het echte leven voor te stellen Versterken van de motivatie Mogelijkheid tot het oefenen in samenwerken Flexibiliteit/aanpasbaarheid Evaluatiemogelijkheden. Potentiële nadelen en huidige tekortkomingen: Geen vervanging van de werkelijkheid Kosten nog meer technologische ontwikkelingen nodig Misselijkheid en duizeligheid Vaak grote en veilige fysieke ruimte nodig Escapisme VR/gaming in grote groepen leidt nog tot belasting van het wifi netwerk. Meer effectstudies nodig! 15

16 Hoe kunnen we deze technologie inzetten? Hoe kunnen serious gaming en AR/VR simulaties worden ingezet in de zorg en het zorgonderwijs? Ga naar Schrijf jouw ideeën op de (virtuele) muur 16

17 Samenvatting Serious gaming biedt veel mogelijkheden in de zorg en het zorgonderwijs. Om te ervaren Om te oefenen Als therapie Virtual Reality en Augmented Reality kunnen worden ingezet om mensen in een (gedeeltelijke) schijnwerkelijkheid bepaalde situaties te laten ervaren. Er is nog meer wetenschappelijk onderzoek nodig naar het effect van gaming en simulaties in het zorgonderwijs Er zijn nog enkele technische tekortkomingen die grote toepassing van VR/AR tot op heden hebben tegengehouden. 17

18 Toepassingen van VR Wat dachten jullie? Deventer Ziekenhuis heeft ook nagedacht 18