De Digitale Script Concordance Test voor Klinisch Redeneren

De Digitale Script Concordance Test voor Klinisch Redeneren
Workshop 9 oktober 2014
Wil de Groot-Bolluijt & Marion Janssen
Opzet workshop
1. Introductie Script Concordance Test en project
2. Hands on workshop: laptop of tablet
3. Zelf aan de slag
4. Plenaire bespreking resultaten en ervaring gebruik
5. Samenvatting / uw mening
Vorig jaar op dit symposium als pilot
Nu online beschikbaar in IQualify van Infoland
het Leer Management Systeem van Leerstation Zorg
Project Digitaal Toetsen MANP (afgesloten sept 2014)
• Onderzoeken digitale beoordeling van Klinisch Redeneren
• Deelnemers project: MANP-Opleidingen Fontys, Zuyd, Hogeschool
Rotterdam en Stichting Leerstation Zorg
• Keuze ontwikkeling digitale Script Concordance Test (SCT)
• SCT nieuwe digitale leermogelijkheden en (bij)scholing
• Toetsen om te leren
Dit project is tot stand gekomen met steun van de Stichting SURF.
In SURF werken universiteiten, hogescholen en onderzoeksinstellingen samen.
Meer informatie: www.surf.nl
Vignet
Scenario
Info bij vignet
Beoordeling
Scoreberekening:
De hoogste score (100 punten) wordt gegeven aan het antwoord dat het meest is gegeven door de
experts. De andere antwoorden worden gescoord naar verhouding a.h.v. de hoeveelheid experts
die dat antwoord hebben gegeven.
MANP project – Digitaal Toetsen
•
•
•
•
•
•
Klinisch Redeneren belangrijk onderdeel curriculum
Groot beroep op medische en verpleegkundige kennis
Leren gebruiken relevante informatie (geschiedenis,
anamnese en lichamelijk onderzoek)
Stellen diagnose en behandeling
Moeilijk om ‘black box’ denken aan te leren
Leren stap voor stap redeneren
MANP project:
Medisch en verpleegkundig redeneren gecombineerd
Klinisch Rederen opleiding MANP
Situatie beoordelen kennis student voor start project
Rol docenten en praktijk verschillend
Vaak casuistiekbeoordeling
•
•
•
Vraagontwikkeling en evaluatie is erg arbeidsintensief
Interbeoordelaar betrouwbaarheid ?
Experts (meestal) niet direct betrokken
Script Concordance Test (SCT)
•
•
•
•
•
•
Stap voor stap naar een juiste behandeling / diagnose
Er is meer dan 1 plausibel antwoord
Inzichtskeuzes met beperkte informatie in korte tijd
Validatie door expertpanels (artsen en VS-en)
Scoringsregels met gewogen antwoorden
Sterke psychometrische eigenschappen: betrouwbaar en valide
(reliability, face validity, and construct validity)
Resultaat SCT project:
Paper: http://link.springer.com/chapter/10.1007/978-3-319-08657-6_13
Peeters et all Digital Script Concordance Test for Clinical Reasoning. In: Kalz,M.,Ras,E.
(eds) CAA 2014. CCIS, V (439), pp. 138-144. Springer International Publishing
Switserland.
Script Concordance Test opbouw
Script in drie onderdelen:
1. Vignet: beschrijving bepaalde klinisch relevante situatie
met informatie waarvan het onbekend is of er betekenis aan
moet worden toegekend of niet.
2. Scenario’s: er wordt steeds nieuwe informatie gegeven.
Mogelijkheden: 1) een hypothese, 2) een voorgenomen
diagnostische actie 3) een voorgenomen behandeling.
3. Keuze antwoorden: om de actie te beoordelen
meer of minder waarschijnlijk / meer of minder zinvol.
Likert schaal (5 punts)
Conclusies project bijdrage SCT voor MANP opleidingen
• Kwaliteitsverbetering:
De gemeenschappelijke constructie van toetsvragen en toetsen
- door verschillende opleidingen samen met inhoudsdeskundigen –
draagt bij aan de kwaliteit van het onderwijs.
• Bijdrage leerproces:
Zowel studenten als docenten ervaren een positieve bijdrage aan het
leerproces en mogelijkheden voor toetsing.
• Bruikbaarheid digitale afname:
Makkelijk in gebruik, snelle resultaten en statistische analyse.
• Bijdrage experts:
Het bijeen brengen en inzetten van expertpanels versterkt de
uitwisseling tussen opleiding en beroepspraktijk.
Beperkingen:
• Constructie van het vraagtype is erg arbeidsintensief
• Aantrekken experts voor validatie vragen is niet eenvoudig te
realiseren
Vignet
Scenario
Info bij vignet
Beoordeling
Scenario B
Scenario B
Scenario C
Scenario C
opmerking maken
Vrije tekst
Scoreberekening:
De hoogste score (100 punten) wordt gegeven aan het antwoord dat het meest is gegeven door de
experts. De andere antwoorden worden gescoord naar verhouding a.h.v. de hoeveelheid experts
die dat antwoord hebben gegeven.
Een hoge score houdt in dat er grote overeenstemming bestaat tussen de leden van het
expertpanel in deze specifieke voorgestelde klinische situatie.
Ga naar: www.leerstationzorg.nl
Hands on workshop: laptop of tablet
 Test en vergelijk digitaal uw deskundigheid van het
klinisch redeneren met expertpanels.
 Keuze onderwerpen: Hart, Longen, Neurologie, MDL
>GGZ = nog geen expertvalidatie!
Plenaire bespreking resultaten
 Kijk en vergelijk / wat zeggen de experts
/ welke stappen zijn er gemaakt
 Sluit dit aan bij uw eigen (leer) ervaring?
Kan het SCT-vraagtype een belangrijke bijdrage leveren aan de
ontwikkeling en het onderhoud van Klinisch Redeneervaardigheden
van Verpleegkundig Specialisten (i.o) ?
SCT: interactive simulation-based
system for strengthening clinical
reasoning skills
Meer info over werken met SCT?
MANP opleidingen
Hogeschool Rotterdam, Fontys en Zuyd.
Het projectmanagement:
Wil de Groot-Bolluijt MScN
[email protected]
Robbert Gobbens
[email protected]

Download Report