Onderzoeksrapportage Kwantitatieve evaluatie

Onderzoeksrapportage
Kwantitatieve evaluatie Grassrootsproject
Marit de Koning
Managementsamenvatting
Stageopdracht voor de master Onderwijskundig Ontwerp en Advisering van de Universiteit Utrecht.
In opdracht van:
Onderwijskundig Centrum Focus, Technische Universiteit Delft
Contactpersoon:
Linda Mebus (OC Focus)
Begeleider UU:
Jos Jaspers, later Nies Kraan
Datum:
28.04.2014 (definitieve versie)
Inhoudsopgave
Management samenvatting
p. 3

Inleiding
p. 3

Hoofdvraag evaluatie
p. 3

Methode
p. 4

Belangrijkste bevindingen
p. 4
 Belangrijkste aanbevelingen
p. 5
Samenvatting
Inleiding
Deze evaluatie is uitgevoerd in opdracht van Onderwijskundig Centrum [OC] Focus. Sinds
2007 hebben zij aan de Technische Universiteit [TU] Delft de leiding over het Grassroots
project. Dit project werd geïntroduceerd in Nederland nadat in Canada werd bewezen dat dit
een effectief middel is om de overstap te maken van 'leren over media' naar 'leren middels
media' en tegelijkertijd zo docenten een laagdrempelige mogelijkheid te bieden om innoveren
met ICT in hun eigen onderwijs te integreren. Docenten kunnen namelijk binnen het
Grassroots project een projectvoorstel indienen voor een innovatie met ICT voor het eigen
onderwijs. Zij ontvangen voor de ontwikkeling van deze innovatie vanuit het Grassroots op
verschillende vlakken ondersteuning.
Het betrekken van ICT in onderwijs is enerzijds van belang daar het gebruiken van
ICT in elke organisatie van steeds essentiëler wordt voor het bestaan van de organisatie, en
anderzijds biedt het gebruik van ICT vele positieve mogelijkheden voor toepassing in
educatie. Deze positieve mogelijkheden lopen uiteen van meer ruimte in inroostering tot
grotere betrokkenheid van studenten en het behalen van betere studieresultaten. Dit wordt
weerspiegeld in de grote variatie aan mogelijkheden om ICT in het onderwijs te betrekken,
wat kan variëren van het gebruik van een Electronische LeerOmgeving [ELO] als
communicatiemiddel tot volledig online onderwijs. De TU Delft staat voor haar
campusonderwijs een blended onderwijsconcept voor met een optimale mix van online leren
en contactonderwijs.
Hoofdvraag evaluatie
Elke innovatie doorloopt het proces van initiatie, implementatie en komt vervolgens al dan
niet in de institutionaliseringsfase terecht waarin de innovatie duurzaam ingebed raakt in de
organisatie. Het Grassroots project loopt aan de TU Delft sinds academisch jaar 2005-2006 en
was tot nu toe niet in zijn algemeenheid geëvalueerd. Op vraag van OC Focus, dat de leiding
over het project heeft, is de huidige evaluatie uitgevoerd.
Voor huidige evaluatie is er gekeken naar de algemene effectiviteit van het Grassroots
project en effectiviteit in termen van de individuele doelstellingen van het project. Daarnaast
is er gekeken naar een algemeen plaatje van duurzaamheid van zowel het Grassroots project
als geheel als de individuele innovaties die zij heeft voortgebracht. Tevens wordt bezien hoe
duurzaam het project is in zowel langdurig gebruik onder deelnemers als disseminatie onder
niet deelnemers. De verschillende hoofd en deelvragen die dit heeft opgeleverd zullen worden
beantwoord om te bezien hoe het tot nu toe met het project gaat, waar de sterke punten liggen
en waar nog ruimte zou zijn voor verbeteringen.
Methode
Er is in huidige evaluatie gezorgd voor triangulatie door een literatuurstudie, een
documentanalyse, een evaluatieonderzoek middels een vragenlijst onder deelnemers en een
vragenlijst onder alle docenten om de zichtbaarheid en aantrekkelijkheid van het Grassroots
project onder een bredere groep docenten te kunnen peilen. Zo is er een combinatie ontstaan
aan literaire onderbouwing welke is gecombineerd met informatie over de situatie zoals deze
is aan de TU Delft.
Belangrijkste bevindingen
Met betrekking tot effectiviteit van het Grassroots project kan worden geconcludeerd dat er
aan veel voorwaarden wordt voldaan die nodig zijn om effectief te kunnen innoveren. Ook is
het project effectief in de meeste van zijn eigen doelstellingen. Zo wordt er bijvoorbeeld na
deelname aan de Grassroots anderhalf keer zoveel gebruik gemaakt van de support en tools
die de TU Delft aan zijn personeel aanbiedt als voor deelname. Tevens is 75% van de
deelnemers meer gebruik gaan maken van ICT in het eigen onderwijs, al dan niet middels
nieuwe innovaties.
Verscheidene
innovaties
Enkele innovaties
Geen innovatie,
meer ICT
Geen van deze
Figuur 1. Gedrag docenten na deelname in betrekking ICT in hun onderwijs.
Met betrekking tot de duurzaamheid van het Grassroots project kan worden
geconcludeerd dat er aan veel voorwaarden wordt voldaan die nodig zijn om duurzaam te
kunnen innoveren. Ook is het project duurzaam gebleken in het langdurig gebruik onder de
eigen deelnemers; 50% van de deelnemers gebruikt zijn/haar innovatie nog steeds en 75% van
de deelnemers is meer gebruik gaan maken van ICT in het eigen onderwijs, al dan niet
middels nieuwe innovaties. Tevens is het Grassroots succesvol in de disseminatie van zowel
de individuele innovaties van deelnemers onder hun collega’s als een toenemend gebruik van
ICT in het onderwijs van niet deelnemers.
Meerdere collega's
innovatie
Ja meerdere
Ja sommige
Enkele collega's
innovatie
Meerdere meer
gebruik ICT
Nee
N.v.t.
Enkeling meer gebruik
ICT
Nee
Geen zicht op
Figuur 2. Reacties van docenten op de vraag of hun innovatie door collega’s is overgenomen
(links) en of hun collega’s zelf op eniger wijze meer ICT zijn gaan betrekken.
Belangrijkste aanbevelingen
Met betrekking tot de effectiviteit
- Het sterker betrekken van de student als stakeholder bij de individuele projecten.
Met betrekking tot zowel effectiviteit als duurzaamheid
- Leidinggevenden actiever betrekken. Hiermee wordt een hoger niveau van bewustzijn
beoogd en niet het continue aanspreken van docenten.
- Om het gebruik van de tools en ondersteuning die de universiteit biedt nog verder te
stimuleren kan bij docenten duidelijker onder de aandacht worden gebracht dat deze
tools niet exclusief toebehoren aan het Grassroots project.
Met betrekking tot de duurzaamheid
- Voor het stimuleren van docenten tot deelname; meer duidelijkheid scheppen over de
voordelen van het gebruik van ICT in onderwijs en hoe dit in elke praktijk toepasbaar is.
Maak daarnaast inzichtelijk hoeveel tijd deelname daadwerkelijk kost en hoe €1000,van grote hulp kan zijn.
[De volledige onderzoeksrapportage is verkrijgbaar via Linda Mebus, OC Focus, TU Delft
([email protected]).]

Download Report