Casus HHs – stimuleringsregeling Uitwisseling van

Informatie over de indiener van de casus:
Instelling: De Haagse Hogeschool
Afdeling: Faculteit Business, Finance & Marketing
Naam indiener: Simone Fredriksz
Functie indiener: Directeur Faculteit BFM
E-mail indiener: [email protected]
Telefoonnummer indiener: 070-4458230
Naam contactpersoon: Arno Boerboom
E-mail contactpersoon: [email protected]
Telefoonnummer contactpersoon: 070 445 8181
Titel casus: Uitwisseling van toetsen en items tussen de centrale itembank van het project
‘Toets & Leer’ in RemindoToets en QMP t.b.v. digitale, summatieve afname van toetsen.
Context
De HHs participeert in het project ‘Toets & Leer’. Dit project is een doorstart van het SURF-project
Toetsbabe (“Toets- en vragenbank bedrijfsadministratie en bedrijfseconomie”) waarin zes
verschillende instellingen (Hogeschool Rotterdam, Saxion, Hogeschool van Amsterdam, De Haagse
Hogeschool en Hogeschool Utrecht en Ecabo) gezamenlijk werkten aan een vragenbank met
digitale toetsvragen voor bedrijfsadministratie (boekhouden, ba) en bedrijfseconomie (be).
Binnen de projectperiode zijn voor beide vakgebieden meer dan 1.000 items ontwikkeld. Die items
zijn inclusief feedback ontwikkeld ten behoeve van zowel oefentoetsen voor studenten als
summatieve toetsen voor docenten.
Komend jaar wordt de toetsenbank uitgebreid met vragen voor het vak marketing en wil men
summatieve toetsen gaan afnemen. Bij voorkeur worden deze summatieve toetsen ook digitaal
afgenomen.
Het uitwisselingsprobleem
Tijdens het project Toetsbabe is RemindoToets van Paragin gekozen als gezamenlijke
auteursomgeving en itembank. Vanuit dit cloudgebaseerde systeem zouden items en toetsen
geëxporteerd en geïmporteerd moeten kunnen worden naar de standaard toetssystemen die de
aangesloten instellingen lokaal gebruiken: voor Saxion is dat Surpass, voor Hogeschool Utrecht
TestVision en voor Hogeschool Rotterdam, Hogeschool van Amsterdam en de Haagse Hogeschool is
dat Questionmark Perception (QMP).
Voorliggende casus gaat over de uitwisseling van items, toetsen en analysegegevens tussen
RemindoToets en QMP. Het importeren van deze bestanden in QMP lukt niet rechtstreeks uit
Remindo. Onderzocht dient te worden hoe een goede uitwisseling tussen Remindo en QMP te
realiseren valt, bijvoorbeeld via Question Test Interoperability (QTI). Op dit moment worden echter
nog verschillende versies van QTI gebruikt bij QMP enerzijds en Remindo anderzijds. Learning Tools
Interoperability (LTI) is een andere standaard die een mogelijke oplossing kan bieden voor dit
probleem. Dit zal echter nader onderzocht moeten worden.
Voor de uitwisselingsproblematiek tussen RemindoToets met Surpass en TestVision verwijzen wij
graag naar de casussen die ingediend zijn door respectievelijk Saxion en Hogeschool Utrecht.
Voordelen
Uitwisseling tussen RemindoToets en QMP maakt het veilig summatief afnemen van digitale toetsen
vanuit de gezamenlijk ontwikkelde itembank mogelijk. De standaard toetsapplicatie QMP is op de
instellingen zo ingericht qua procedures en beveiliging dat een veilige afname gewaarborgd is.
Instellingen geven tevens de voorkeur aan het werken met zo min mogelijk verschillende
toetsapplicaties. Op instellingsniveau is het anders niet haalbaar om alle applicaties (goed) te
Casus HHs – stimuleringsregeling Uitwisseling van toetssystemen
beheren.
Daarnaast biedt QMP andersoortige vraagtypes die de rekenkundige vaardigheden van studenten op
een meer valide manier kunnen toetsen. Wanneer de toetsvragen die in dit format in QMP zijn
ontwikkeld, gedeeld worden via RemindoToets met alle deelnemende instellingen, kunnen toetsen
samengesteld worden met vragen van verschillende types. Dit komt de toetskwaliteit ten goede.
Verder maakt het uitwisselen van resultaten en andere data het mogelijk om toetsen en items op
grotere schaal te analyseren. Ook dit komt de kwaliteit van toetsen en items ten goede.
Tot slot zal een goede uitwisseling tussen RemindoToets en QMP drempelverlagend werken voor
nieuwe instellingen die willen aansluiten bij het project Toets & Leer. Hierdoor wordt het project
duurzamer en kunnen meer studenten en docenten gebruik maken van de mogelijkheden die de
centrale toetsvragenbank biedt.
Belemmeringen
De grootste belemmering van het huidige uitwisselingsprobleem is dat hierdoor het afnemen van
summatieve digitale toetsen geen reële doelstelling is. Dat zou een dure en gemiste kans zijn voor
alle middelen en energie die zijn gestoken in de ontwikkeling van de grote toetsvragenbank.
Relevantie voor het hoger onderwijs
Het project Toetsbabe is met groot succes afgerond: er is een waardevolle en grote vragenbank met
toetsvragen ontwikkeld voor bedrijfsadministratie en bedrijfseconomie en de vragenbank zal komend
jaar uitgebreid worden met het vak ‘marketing’. De samenwerkende instellingen in het project Toets &
Leer willen zich open stellen voor andere instellingen die als ‘klant’ ook gebruik kunnen maken van
de toetsvragenbank. Er hebben zich reeds andere hogescholen gemeld die interesse hebben in het
project en willen praten over aansluiting. Om dit mogelijk te maken is goede
uitwisselingsmogelijkheden tussen de basisomgeving (RemindoToets) en de standaard
toetsapplicatie van de betreffende instelling cruciaal.
Los gezien van het project Toets & Leer, is het de verwachting dat er in het hoger onderwijs meer
gezamenlijk getoetst zal worden in de toekomst. Naar aanleiding van o.a. het rapport Vreemde ogen
dwingen werken hogescholen meer dan ooit te voren samen aan de ontwikkeling van gevalideerde
toetsvragenbanken. Ook in dit soort projecten en pilots zullen er vragen leven rondom
uitwisselbaarheid van toetsen en items tussen verschillende systemen. Deze projecten zouden
kunnen leren van de ervaring die het project Toets & Leer hiermee op kan doen binnen de
stimuleringsregeling.
Doel en haalbaarheid
In het project Toets & Leer is in de jaardoelstelling van 2014-2015 expliciet opgenomen dat er een
betere aansluiting dient te komen tussen RemindoToets enerzijds en de standaardapplicatie van de
aangesloten instellingen (QMP, Test Vision en Surpass) anderzijds. Hier werken alle aangesloten
instellingen aan mee (zie ook casussen van Saxion en Hogeschool Utrecht). Voor de aansluiting
RemindoToets en QMP is de Haagse Hogeschool initiatiefnemer, maar er zal intensief samengewerkt
worden met de Hogeschool van Amsterdam en Hogeschool Rotterdam, aangezien zij ook direct
belang hebben bij deze verbetering.
De bewaking van het eindresultaat van de stimuleringsregeling (wanneer deze ons toegewezen zou
worden) is dus mede geborgd vanuit het gemeenschappelijke project Toets & Leer en wordt door 2
andere instellingen daadwerkelijk ondersteund.
Participerende partijen
 De Haagse Hogeschool (indiener/penvoerder), Hogeschool van Amsterdam, Hogeschool
Rotterdam
 Paragin (leverancier van Remindo Toets)
 UP learning (leverancier van QMP)
Casus HHs – stimuleringsregeling Uitwisseling van toetssystemen