Skeleton Concept Mapping - Technische Universiteit Eindhoven

Eindhoven School of Education
Industrial Design
www.tue.nl/esoe
www.tue.nl/id
Den Dolech 2, 5612 AZ Eindhoven
Postbus 513, 5600 MB Eindhoven
Auteurs
dr.ir.ing. Ton Marée
dr.ir. Frank Delbressine
dr.ir. Leo Pel
Skeleton Concept Mapping1
Opdrachtgever
Een pilot studie voor het vak
Toegepaste Natuurwetenschappen conceptueel
aan de faculteit Industrial Design
Programma ICT in onderwijs /
Prof. dr. ir. Lex Lemmens
Datum
1 april 2014
Eindrapportage
1
Dit project is door het programma ICT in onderwijs (PICTO) gefinancierd.
Eindhoven School of Education
Industrial Design
www.tue.nl/esoe
www.tue.nl/id
Den Dolech 2, 5612 AZ Eindhoven
Postbus 513, 5600 MB Eindhoven
Auteurs
dr.ir.ing. Ton Marée
dr.ir. Frank Delbressine
dr.ir. Leo Pel
Opdrachtgever
Programma ICT in onderwijs /
Prof. dr. ir. Lex Lemmens
Datum
1 april 2014
Skeleton Concept Mapping
Inhoudsopgave
Introductie ................................................................................................... 4
Skeleton concept mapping ...................................................................... 4
Waarom dit project? ............................................................................... 4
Doel ......................................................................................................... 4
Methode ...................................................................................................... 4
Participanten ........................................................................................... 4
Ontwerp .................................................................................................. 5
Procedure ................................................................................................ 5
Instrumenten ........................................................................................... 6
De Mindmap Applied Physical Sciences .............................................. 6
Multimedia content en de 4-Step Concept Script. .............................. 7
Voortgangsindicator ............................................................................ 7
Feedbackformulier .............................................................................. 8
Evaluatielijst pilot studie ..................................................................... 8
Reguliere toets .................................................................................... 8
ESCoM toets ........................................................................................ 8
Resultaten ............................................................................................... 8
De reguliere eindtoets van het vak Calculus [2WAB1]........................ 8
De reguliere eindtoets van het vak TNW [3NAB1]. ............................. 9
De peergroups ESCoM scores. ............................................................ 9
De 7 evaluatie topics. .......................................................................... 9
Conclusies en discussie ............................................................................. 10
Bijlagen ...................................................................................................... 13
Projectteam ........................................................................................... 13
Feedback Form ...................................................................................... 14
Evaluatielijst .......................................................................................... 20
Literatuurlijst ............................................................................................. 27
Technische Universiteit Eindhoven University of Technology
Introductie
Skeleton concept mapping
In een concept map worden kernbegrippen van een kennisdomein grafisch weergegeven en
onderling verbonden op basis van hun inhoud. Een concept map begint meestal met een
leeg veld. Voor studenten is dit in een complex domein veelal lastig. In een multimediale
verrijkte skeleton concept map: de Enriched Skeleton Concept Map (ESCoM) plaatst de
docent alle kernbegrippen (kernconcepten) die voor een vakgebied of een (sub)domein
belangrijk zijn. De docent hecht aan elk concept foto's en/of animaties met daarnaast
opdrachten (scripts) die de studenten in tweetallen uitwerken en waarover ze discussiëren.
De scripts fungeren als stappenplan om betekenis te geven aan de concepten en de dialoog
tussen studenten te borgen. De samenwerking wordt hiermee dus, in plaats van door een
docent, gestuurd door een script. Daarnaast leggen de studenten aan de hand van een script
verbindingen tussen de concepten. Doordat de studenten samen actief op zoek gaan naar de
bijbehorende informatie, zowel uit het leerboek als ook uit andere (internet)bronnen,
discussiëren over de opdrachten en heel intensief samenwerken, blijft de leerstof veel langer
hangen. Daardoor bereik je een vorm van betekenisvol leren (Marée, van Bruggen, &
Jochems, 2013).
Waarom dit project?
In de visie van het Bachelor College speelt de ontwikkeling van activerende onderwijsvormen
een belangrijke rol. Bij Industrial Design (ID) was men voor het vak Toegepaste Natuurwetenschappen (TNW) op zoek naar een alternatieve werkvorm die beter past in de Self-Directed
Learning onderwijs filosofie van de faculteit ID en waarmee de leerprestaties van de
studenten kunnen worden verbeterd. De Enriched Skeleton Concept Mapping methode om
aan betekenisvol leren invulling te geven is er met enthousiasme ontvangen. Hierop is
besloten om een experiment op te zetten om de ESCoM methode voor dit vak in te gaan
zetten.
Doel
Dit experiment had als doel om te kijken of:
1. studenten de leerstof beter begrijpen;
2. de ESCoM-methode ruimte biedt voor tijd-, en plaats-onafhankelijk leren;
3. de docent-contacttijd met deze blended onderwijsvorm afneemt;
Bij succes ligt er een basis om deze werkvorm verder te dissemineren binnen de TU/e,
waarvoor dan vervolg projecten gestart kunnen worden.
Methode
Participanten
Alle eerste jaars studenten van Industrial Design namen deel in deze studie; een
experimentele groep die de ESCoM methode volgde en een controle groep die het
traditionele onderwijs volgde; zie voor een overzicht Tabel 1.
Skeleton Concept Mapping
4
Technische Universiteit Eindhoven University of Technology
Tabel 1
Student participanten in de pilot studie.
Experimentele
groep
Controle
groep
N [#]
162
M V
Leeftijd [Jaar]
Vooropleiding
Vwo
BuiteNL Divers
NTG EMC
NG
van-tot M
SD
NT
10 8
18-23 20.6 1.5
33%
6%
56%
77 67
18-30 20.1 1.6
31%
4%
49%
6%
2%
10%
4%
Het projectteam bestond uit twee docent experts, een student assistent een
onderwijskundige en drie stakeholders, zie bijlage: Projectteam (blz. 13).
Ontwerp
De pilot studie is uitgevoerd bij Industrial Design voor het vak Toegepaste Natuurwetenschappen conceptueel [3NAB0] over een periode van 8 weken in het tweede kwartaal (Q2).
De totale studielast voor dit vak bedraagt 5 EC (140 uur).
Uiteindelijk 2 hebben zich 18 studenten vrijwillig aangemeld voor de experimentele groep. De
18 studenten zijn verdeeld in 9 peergroups van 2 studenten. De peergroups hadden elke
week 2 ingeroosterde “ESCoM bijeenkomsten” van 2 uur waarin ze werkte aan de Enriched
Skeleton Concept Maps met daarnaast een “opgaven instructie-uur” onder begeleiding van
een student assistent. De controle groep volgde het reguliere programma met elke week 2
hoorcolleges van 2 uur en daarnaast 2 instructie uren van 2 uur.
Procedure
De studenten in de experimentele groep hebben in de eerste cursus-week een workshop
gevolgd van één uur. Ze maakten gebruik van een laptop waarop ze de concept mapping
software Mindjet / MindManager van te voren moesten installeren. In de workshop leerde
ze, aan de hand van de hand-out (Marée, 2013), hoe ze annotaties en data konden
toevoegen aan de concepten, verbindingen konden leggen tussen de concepten en de
voortgangsindicator konden instellen. Daarnaast leerden ze gebruik te maken van de voor
elke peergroup ingerichte SharePoint omgeving om informatie te raadplegen en de ESCoMs
te kunnen down- en uploaden.
Aan het eind van de week, vrijdag voor 12 uur, plaatsten de peergroups hun ESCoMs in de
betreffende SharePoint omgeving. Vervolgens kregen de peergroups aan het eind van elke
week een korte feedback op de uitgewerkte scripts middels een feedbackformulier, zie
bijlage: Feedback Form (blz. 14) met een overzicht van alle ESCoMs en concepten.
Na de cursus hebben ze een evaluatie-lijst ingevuld bestaande uit 40 stellingen en 2 open
vragen, zie bijlage: Evaluatielijst (blz. 20).
Bij alle studenten is dezelfde reguliere tussentijdse toets en eindtoets afgenomen ter
afsluiting van de vak TNW. Deze toetsen bestaan uit 15 opgaven (sommen).
2
In de paragraaf Conclusies en Discussie wordt hierop nader ingegaan.
Skeleton Concept Mapping
5
Technische Universiteit Eindhoven University of Technology
Instrumenten
De Mindmap Applied Physical Sciences
De Mindmap Applied Physical Sciences (Toegepaste Natuurwetenschappen Conceptueel) is
samengesteld door twee docent experts en een onderwijskundige. De Mindmap ESCoM
Applied Physical Sciences bestaat uit 11 ESCoMs, zie Figuur 1.
Figuur 1: Mindmap Applied Physical Sciences
De twee docent experts hebben gekozen voor een totaal van 94 kernconcepten. Zij zijn van
mening dat de 94 kern-concepten een essentiële representatie zijn van het vak Applied
Physical Sciences (TNW Conceptueel). Hiervoor hebben ze gebruik gemaakt van het
standaard cursusboek Sears and Zemansky's University physics: With modern physics (Young
& Freedman, 2012). Voor de overzichtelijkheid hebben ze de 94 kernconcepten gegroepeerd
in 11 (deel) ESCoMs, zie bijvoorbeeld, Figuur 2: De ESCoM “1 - Newton’s Law”. Voor een
overzicht van alle ESCoMs en concepten zie bijlage: Feedback Form (blz. 14).
Figuur 2: De ESCoM Newton’s Law
Skeleton Concept Mapping
6
Technische Universiteit Eindhoven University of Technology
Multimedia content en de 4-Step Concept Script.
Aan elk concept hebben de docent experts vervolgens essentiële multimedia content
toegevoegd (attached) die de studenten kunnen gebruiken bij het betekenis geven aan de
concepten. Bovendien bevat elk concept een werkblad met een stappenplan, een “4-Step
Concept Script”, die door studenten moet worden uitgewerkt om betekenis te geven aan het
concept, zie bijvoorbeeld het concept “Newton’s third law” in Figuur 3, waaraan een
videoclip, een plaatje en een 4-Step Concept Script is toegevoegd.
Figuur 3: Concept Newton’s third law inclusief een videoclip, plaatje en een 4 staps script
Voortgangsindicator
Bij elke concept maakten de peergroups gebruik van een zogenaamde voortgangsindicator
die zowel voor de peergroups zelf als door de docent wordt gebruikt als monitor tool, zie
Figuur 4:
Skeleton Concept Mapping
7
Technische Universiteit Eindhoven University of Technology
Figuur 4: 4-Step voortgangsindicator bij het concept Newton’s third law.
Feedbackformulier
Aan het eind van de week, vrijdag voor 12 uur, plaatsen de peergroups hun ESCoMs in de
betreffende SharePoint omgeving. Vervolgens kregen de peergroups aan het eind van elke
week een korte feedback op de uitgewerkte scripts op een 5 punts Likert schaal, zie bijlage:
Feedback Form (blz. 14) met een overzicht van alle ESCoMs en concepten.
Evaluatielijst pilot studie
Na de cursus hebben de studenten een evaluatie-lijst ingevuld bestaande uit 40 stellingen en
2 open vragen met betrekking tot de pilot studie. De 40 stellingen worden gemeten met een
5 punts Likert schaal. Ze zijn ingedeeld in de volgende 7 topics: (1) Algemene inleiding en
instructie, (2) MindManager/Mindjet en SharePoint, (3) Het kennisdomein, (4) Motivatie, (5)
Script, (6) Leerproces en (7) Student karakteristieken. Daarnaast zijn de volgden 2 open
vragen gesteld (a) Heb je nog verbetersuggesties? en (b) Heb je nog opmerkingen? /
Vragen?. Zie ook bijlage: Evaluatielijst (blz. 20).
Reguliere toets
Bij alle studenten is dezelfde reguliere tussentijdse toets en de reguliere eindtoets
afgenomen ter afsluiting van de vak TNW. De reguliere tussentijdse toets bestond uit 15
opgaven en de eindtoets bestond ook uit 15 opgaven.
ESCoM toets
Alle peergroups hebben een eindbeoordeling gekregen, met een afgerond cijfer van 1 tot 10,
op de kwaliteit van de uitgewerkte scripts van alle concepten in de ESCoMs.
Resultaten
De reguliere eindtoets van het vak Calculus [2WAB1].
In het voorafgaande kwartiel (Q1) hebben de studenten het vak Calculus afgesloten. De
scores op de eindtoets [2WAB1] van het vak Calculus worden gebruikt als covariaat. Met
deze covariaat beogen we het onderscheidingsvermogen van de scores op de eindtoets van
het vak TNW te vergroten.
De gemiddelden en standaard deviaties van de scores op de reguliere eindtoets van het vak
Calculus [2WAB1] zijn weergegeven in Tabel 2.
Skeleton Concept Mapping
8
Technische Universiteit Eindhoven University of Technology
Tabel 2
Gemiddelden en standaard deviaties van de scores op de eindtoets Calculus [2WAB1].
Experimentele groep
Controle groep
Total
N
17
136
153
M
5.18
5.66
5.61
SD
1.65
1.90
1.87
Min, Max
1, 10
1, 10
1, 10
Opmerking: Eén student van de experimentele groep en acht studenten van de controle groep hebben
niet deelgenomen aan de eindtoets Calculus [2WAB1].
De reguliere eindtoets van het vak TNW [3NAB1].
De gemiddelden en standaard deviaties van de scores op de reguliere eindtoets van het vak
TNW [3NAB1], in kwartiel Q2, zijn weergegeven in Tabel 3.
Tabel 3
Gemiddelden en standaard deviaties van de scores op de reguliere eindtoets TNW [3NAB1].
Experimentele groep
Controle groep
Total
N
16
125
141
M
5.61
5.38
5.40
SD
1.49
1.79
1.75
Min, Max
1, 10
1, 10
1, 10
Opmerking: De aantallen studenten betreffen de studenten die zowel hebben deelgenomen aan de
eindtoets Calculus [2WAB1] als ook aan de eindtoets TNW [3NAB1]. Dus 2 studenten van de
experimentele groep en 19 studenten van de controle groep hebben niet deelgenomen aan beide
toetsen.
De correlatie tussen de scores op de eindtoets Calculus [2WAB1] en de scores op de
reguliere eindtoets TNW [3NAB1] is matig (r = .497, p = .000).
De univariate analysis of covariance laten geen significant experimenteel effect zien van de
scores op de reguliere eindtoets van het vak TNW [3NAB1] tussen de experimentele groep
en de controle groep (ANCOVA, F(1,141) = 1.29, MSE = 2.99, p = .259, ƞp2 = .009).
De peergroups ESCoM scores.
De gemiddelden en standaard deviaties van de 9 peergroups ESCoM scores zijn weergegeven
in Tabel 4.
Tabel 4
Gemiddelden en standaard deviaties van de 9 peergroups ESCoM scores
Peergroups
N
9
M
6.11
SD
3.44
Min, Max
1, 10
Opvallend is de grote spreiding in de ESCoM scores. In de paragraaf Conclusies en Discussie
wordt hierop nader ingegaan.
We vinden geen significante experimentele correlatie tussen de ESCoM scores en de
reguliere eindtoets (r = -0.08, p = .83).
De 7 evaluatie topics.
De gemiddelde resultaten en standaard deviaties op de 7 evaluatie topics, op een 5 punts
Likert schaal, worden weergegeven in Tabel 5.
Skeleton Concept Mapping
9
Technische Universiteit Eindhoven University of Technology
Tabel 5
Gemiddelden en standaard deviaties op de 7 evaluatie topics op een 5 punts Likert schaal
Evaluatie Topics
N
Min
Max
M
SD
Algemene inleiding en instructie
14
3.20
5.00
4.20
0.55
MindManager/Mindjet en SharePoint
14
1.80
4.60
3.47
0.81
Het kennisdomein
14
2.50
4.50
3.73
0.58
Motivatie
14
1.67
4.83
3.56
0.90
Script
14
2.50
4.25
3.39
0.50
Leerproces
14
2.90
4.70
3.62
0.48
Student karakteristieken
14
2.67
4.17
3.50
0.53
De resultaten op alle 40 stellingen staan in bijlage: Evaluatielijst (blz. 20). De resultaten op de
open vragen komen aan de orde in de paragraaf conclusies en discussie.
Conclusies en discussie
Dit experiment had als doel om te kijken of:
1. studenten de leerstof beter begrijpen;
2. de ESCoM-methode ruimte biedt voor tijds-, en plaats-onafhankelijk leren
3. de docent-contacttijd met deze blended onderwijsvorm afneemt;
De volgende conclusies kunnen worden getrokken.
De ESCoM methode laat geen significant effect zien van de scores op de reguliere
eindtoets van het vak TNW [3NAB1] tussen de experimentele groep en de controle groep.
We kunnen niet aantonen dat “studenten de leerstof beter begrijpen”: vergelijkbare toets
resultaten zijn hoger” (doelstelling 1). De toetsresultaten van de experimentele groep zijn
weliswaar iets hoger maar niet significant hoger. Een mogelijke verklaring zou kunnen zijn
dat bij de ESCoM methode de focus meer ligt op conceptuele kennis (Marée et al., 2013),
maar dat er getoetst wordt in het maken van opgaven, waarbij de focus meer ligt op
procedurele kennis. Volgens de docent experts zal het maken van opgaven voor studenten in
een technische universiteit ook altijd nodig zijn bij een vak als TNW. De ESCoM
onderwijsleeractiviteiten zijn niet in lijn met de wijze van toetsen. Een indicatie hiervoor zou
ook kunnen zijn dat we geen significante experimentele correlatie gevonden hebben tussen
de ESCoM scores en de reguliere eindtoets. Enige voorzichtigheid is hier wel op zijn plaats
aangezien er een grote spreiding in de ESCoM scores. Drie peergroups zijn de laatste weken
afgehaakt bij de ESCoM meetings. Bij navraag gaven ze aan dat ze het te druk hadden en de
prioriteit hebben gelegd bij het afronden van hun project, wat hieraan parallel liep. Tevens
kan worden opgemerkt dat er zich oorspronkelijk 28 studenten vrijwillig enthousiast hadden
aangemeld voor het experiment, maar dat er 10 studenten zijn afgehaakt, voornamelijk
omdat ze het idee hadden dat ze met de ESCoM methode onvoldoende werden voorbereid
op de toets.
Enkele opmerkingen van studenten die zijn afgehaakt (1) “In de APS ESCoM methode
ontbreken de formules die je nodig hebt om opgaven te maken waarop je toch getoetst
wordt.”, (2) “Het experiment vind ik een goed idee, ik heb altijd het gevoel dat ik beter leer
door dingen te doen en er actief mee bezig te zijn door zelf uit te zoeken, dan te luisteren
naar een docent die alleen de dingen zegt die hij het belangrijkste vind. Maar ik heb meer
Skeleton Concept Mapping
10
Technische Universiteit Eindhoven University of Technology
training nodig in opgaven maken om mijn Physics examen uiteindelijk te halen.”, (3) “Het
kost me te veel tijd, ik werk al meer dan 50 uur per week en ben onzeker of ik het assessment
op deze wijze wel haal”, (4) “Voor ons werkt de methode niet om te discussiëren over de stof.
Wij vinden het alle twee fijner om meerdere opgaves te maken om de stof goed tot ons te
nemen en om het te begrijpen dan te discussiëren”, (5) “Discussies kosten veel tijd die ik liever
in de opdrachten steek” en (6) “Het spijt me enorm, maar ik merk zelf dat ik liever op mezelf
leer, en dat ik het moeilijk vind om in te zien hoe discussies het begrijpen van formules kan
verbeteren”.
Na de tussentijdse toets "met alleen opgaven” kwam het verzoek van de studenten
om extra ondersteuning te krijgen in het maken van opgaven, mede daardoor hebben we na
elke ESCoM de studenten ook expliciet laten oefenen in het maken van opgaven en 2 extra
begeleide opgaven instructie-uren ingeroosterd naast de ESCoM meetings. Hoewel de twee
methodieken, de ESCoM methode en het maken van opgaven, haaks op elkaar te lijken staan
werd dat door de studenten in de experimentele groep niet zo ervaren. De studenten gaven
in de evaluatie wel aan dat er voor het maken van de opgaven wat meer nadruk gelegd mag
worden op de formules.
Het is inherent aan de blended ESCoM methode, waarin de ESCoMs via de online
(SharePoint) omgeving benaderbaar zijn en waar ook online digitale feedback kan worden
gegeven dat deze ruimte biedt voor tijds- en plaats onafhankelijk werken (doelstelling 2).
Van de ingeroosterde ESCoM meetings onder begeleiding van een student-assistent, werd
door de helft van de peergroups gebruikt gemaakt. Tijdens de ESCoM meetings werd weinig
beroep gedaan op de student assistent.
De docent-contacttijd met betrekking tot de hoorcolleges is voor de ESCoM methode
niet nodig. De experimentele groep volgde geen hoorcolleges en de meeste peergroups
werkte geheel zelfstandig aan de ESCoMs. Ten aanzien van de hoorcolleges is doelstelling 3
aangetoond: de docent-contacttijd met deze blended onderwijsvorm neemt af. Van de
ingeroosterde ESCoM meetings onder begeleiding van een student-assistent, werd door de
helft van de peergroups gebruikt gemaakt. Tijdens de ESCoM meetings werd weinig beroep
gedaan op de student assistent. De ESCoM methode biedt dan ook voldoende ruimte voor
tijds- en plaats onafhankelijk werken. In de evaluatie gaven de studenten wel aan dat het ze
het prettig vonden dat er toezicht werd gehouden aan het einde van de week en feedback
werd gegeven over hun vorderingen, wat tevens kan voorkomen dat ze achterstand oplopen.
Dit wordt ook bevestigd door de scores op de evaluatie stelling 40: De docent moet
regelmatig voortgangscontrole uitvoeren (M = 4.14, SD = 0.83).
Uit de evaluatie blijkt dat de studenten de (1) Algemene inleiding en instructie ruim
voldoende hebben gewaardeerd, (2) de hand-out workshop voldoende hebben gewaardeerd
maar dat ze verschillende studenten – in het begin nog - moeite hadden met het gebruik van
MindManager/Mindjet en SharePoint, (3) De uitgereikte skeleton concept map geeft een
goed overzicht van de belangrijkste kernconcepten uit het kennisdomein "Applied Physical
Sciences", (4) de studenten waren goed gemotiveerd, echter de scores waren sterk verdeeld
over de stellingen 18 en 19: Het werken met de skeleton concept map en de scripts vind ik
stimulerend. Mogelijk houdt dit ook verband dat er onvoldoende (M = 2.57) wordt gescoord
op stelling 37: Ik vind de cursus Applied Physical interessant. (5) De scripts werden ruim als
voldoende gewaardeerd. Echter de wekelijkse feedback op de scripts (vraag 24, M = 2.86)
Skeleton Concept Mapping
11
Technische Universiteit Eindhoven University of Technology
dient te worden verbeterd. (6) De ESCoM methode als leerproces werd ruim voldoende
gewaardeerd. Echter over stelling 27: Door deze werkvorm wordt op een effectieve manier
de twee blokken van 2 uur benut, waren de meningen wat sterker verdeeld (M = 3.07, SD =
1.22). Dit blijkt mogelijk ook uit het gegeven dat slechts de helft van de peergroups aanwezig
was op de ESCoM meetings. (7) De stelling 37: De skeleton concept map heeft voordelen
boven hoorcolleges met PowerPoint, werd hoog gescoord (M = 4.36, SD = 0.61). Deze score
dient wel gerelativeerd te worden aangezien deze studenten vrijwillig voor de ESCoM
methode hebben gekozen. Zorgelijk is echter de onvoldoende score op stelling 37: Ik vind de
cursus Applied Physical Sciences interessant (M = 2.57, SD = 1.24). Hoewel de meningen
hierover wat sterker zijn verdeeld en het slechts een kleine experimentele groep betreft is
deze indicatie wel een punt van aandacht om de zinvolheid van dit vak zo mogelijk nog beter
in de context van Industrial Design te brengen.
We hebben in deze pilot studie laten zien dat de ESCoM methode bij een kleine
experimentele groep voor het vak Toegepaste Natuurkunde conceptueel kan werken. We
veronderstellen dan ook dat voor dit vak bij andere faculteiten ook zou kunnen werken.
Alvorens echter de ESCoM methode breed te gaan uitrollen voor dit vak, adviseren we om
eerst een aantal verbeterslagen te maken en ervaring op te doen met het opschalen binnen
Industrial Design. Bij succes ligt er dan een goede basis om de ESCoM methode verder te
dissemineren binnen de TU/e.
De verbeterslagen betreffen o.a.:
- Het aanpassen van de inleidende workshop, met name het gebruik van SharePoint en het
down- en uploaden van de concept map.
- Het aanpassen van de scripts, met name de stappen 3 en 4 verdienen verduidelijking
- Efficiëntere en effectievere wekelijkse feedback op de scripts, zo mogelijk d.m.v. rubrics
- Expliciete aandacht voor het hanteren van formules bij het maken van de opgaven.
Met betrekking tot het opschalen binnen de TU/e:
- Vanuit het Onderwijsinnovatiefonds Bachelor College 2014, wordt het komende
studiejaar gestart met het project “Enriched Skeleton Concept Mapping and student
feedback” voor alle eerstejaars studenten van ID. Hierin worden bovengenoemde
verbeterpunten uit de pilot studie meegenomen.
- Bij de faculteit Bouwkunde wordt komend studiejaar gestart met Skeleton Concept
Mapping bij de nieuw op te zetten cursus Environmental Performance of Buildings
[7S9X0]. Hierbij wordt dankbaar gebruik gemaakt van de expertise uit deze pilot studie.
- Mede in het kader van het opschalen, adviseren we een TU/e brede campuslicentie af te
sluiten voor het softwarepakket Mindjet / MindManager.
Een campuslicentie kost op basis van het huidige aantal studenten medewerkers
€ 8.946,00 per jaar (volgens Software coördinator, TU/e-Dienst ICT). Een individuele
licentie, via SURF, kost € 47,29. Dus bij 190 licenties is een campuslicentie al voordeliger.
Voor het komende studiejaar worden deze aantallen bij bovenstaande twee projecten
ruimschoots overschreden.
Skeleton Concept Mapping
12
Technische Universiteit Eindhoven University of Technology
Bijlagen
Projectteam
Naam
prof.dr.ir. Aarnout
Brombacher
dr.ir. Miguel
Bruns
dr. Richard
Engeln
Functie/rol
Stakeholder: Decaan ID
dr.ir. Frank
Delbressine
Projectmedewerker: Docent ID,
docent expert
dr.ir. Leo
Pel
Projectmedewerker: Docent TN,
docent expert
dr.ir.ing. Ton
Marée
Projectleider: Onderwjiskundige ESoE
Erik Saaltink
Student assistent: Ondersteuning
Stakeholder: Directeur onderwijs ID /
Sponsor
Stakeholder: Docent TN, docent
expert
Bijlagen Skeleton Concept Mapping
Verantwoordelijkheid
Formele, promotionele ondersteuning van de
pilot
Formele, onderwijskundige, promotionele
ondersteuning van de pilot
Eindverantwoordelijke docent voor het BC vak
TNW conceptueel [3NAB0]
Bouw van Skeleton Concept Mappen.
Docent van het (ID) vak TNW.
Studentbegeleiding / Monitoring.
Toets opstellen / afnemen
Bouw van Skeleton Concept Mappen.
Docent van het (ID) vak TNW.
Studentbegeleiding / Monitoring.
Toets opstellen / afnemen
Algehele projectvoortgang en resultaat.
Inhoudelijke inbreng over de inzet Enriched
Skeleton concept mapping.
Studentbegeleiding / Monitoring.
13
Technische Universiteit Eindhoven University of Technology
Feedback Form
APS ESCoM ID PGXX
0 - Basic Math concepts
Concept
# Steps
Vector
Comment:
Displacement
Comment:
Differentiating
& integrating
Comment:
Units
Comment:
Acceleration
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
1 - Newton's Law
Concept
# Steps
Tension
Comment:
Mass
Comment:
Force
Comment:
Friction
Comment:
Gravitation
Comment:
Newton's first
law
Comment:
Free-Body
diagrams
Comment:
Newton's
second law
Comment:
Newton's third
law
Comment:
Applications
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
Bijlagen Skeleton Concept Mapping
14
Technische Universiteit Eindhoven University of Technology
2 - Work-Energy Theorem
Concept
# Steps
Potential
Energy
Comment:
Conservative
and nonComment:
conservative
forces
Work
Comment:
Kinetic Energy
Comment:
Power
Comment:
Energy
Conservation
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
3 - Momentum, Impulse and
Collisions
Concept
# Steps
Collisions
Comment:
Center of Mass
Comment:
Momentum
Comment:
Conservation of
Momentum
Comment:
Impulse
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bijlagen Skeleton Concept Mapping
Bad
Normal
Very good
Normal
Very good
15
Technische Universiteit Eindhoven University of Technology
4 - Fluid Mechanics
Concept
# Steps
Continuity
equation
Comment:
Bernouilli's
equation
Comment:
Flow
Comment:
Density
Comment:
Laminar versus
turbulent flow
Comment:
Buoyancy
Comment:
Pressure
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
5 - Electricity
Concept
Resistors in
Parallel
Resistors in
Series
Electrical
Measuring
Instruments
Current
Score
Bad
Normal
Very good
Kirchhoff's
Rules
Circuit
Diagrams
Electromotive
Force
Resistance
Resistivity
R-C circuits
(Dis)Charging a
Capacitor
Callouts
Overall
# Steps
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Bijlagen Skeleton Concept Mapping
16
Technische Universiteit Eindhoven University of Technology
6 - Periodic Motion
Concept
# Steps
Energy
Conservation
Comment:
Damped and
forced
Comment:
oscillation
Period
Comment:
Frequency
Comment:
Amplitude
Comment:
Simple
Harmonic
Comment:
Motion (SHM)
Circular motion
and SHM
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
7 - Mechanical Waves
Concept
# Steps
Wave speed
Comment:
Interference,
boundary
Comment:
conditions and
superpos.
Normal modes
of a string
Comment:
Periodic waves
Comment:
Waves
(types of)
Comment:
Wave equation
Comment:
Standing waves
Comment:
String
instruments
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
Bijlagen Skeleton Concept Mapping
17
Technische Universiteit Eindhoven University of Technology
8 - Sound and Hearing
Concept
# Steps
Wind
Instruments
Comment:
Pressure
Amplitude
Comment:
Sound Intensity
Level
Comment:
Beats
Comment:
Sound Intensity
Comment:
Normal modes
Comment:
Standing Sound
Waves
Comment:
Perception of
Sound Waves
Comment:
Resonance
Comment:
Doppler Effect
Comment:
Interference
Comment:
Sound Waves
Comment:
Decibel
Comment:
Callouts
Comment:
Overall
Comment:
Bijlagen Skeleton Concept Mapping
Score
Bad
Normal
Very good
18
Technische Universiteit Eindhoven University of Technology
9 - Temperature and Heat
Concept
# Steps
Thermal Stress
Comment:
Thermal
Expansion
Comment:
Radiation
Comment:
Quantity of
Heat
Comment:
Thermometers
Comment:
Molar Heat
Capacity
Comment:
Temperature
Scales
Comment:
Heat Transfer
Comment:
Conduction
Comment:
Convection
Comment:
Callouts
Comment:
Overall
Comment:
Score
Bad
Normal
Very good
10 - Light
Concept
Waves
Score
Bad
Normal
Very good
Snellius Laws
Polarization
Index of
Refraction
Total Internal
Reflection
The Nature of
Light
Wave Fronts
and Rays
Speed of Light
Reflection
Dispersion
Refraction
Callouts
Overall
# Steps
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Comment:
Bijlagen Skeleton Concept Mapping
19
Technische Universiteit Eindhoven University of Technology
Evaluatielijst
3NAB0 APS ESCoM Vragenlijst
Exp0
18
78%
ExGr
# Stud
Respons
Algemene inleiding en instructie
1
2
3
4
5
Het doel van de cursus Applied Physical Sciences, zoals opgezet met de uitgereikte
skeleton concept map, is helder.
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
0
4.43
50
Geen mening 3
7
StDev
25
Mee eens 4
43
0.62
0
Helemaal Mee eens 5
50
5
1
2
3
4
In het inleidend college is me precies verteld hoe er met z'n tweeën moet
worden gewerkt.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
0
50
Geen mening 3
0
25
Mee eens 4
79
0
Helemaal Mee eens 5
21
1
2
3
4
5
Vooraf werd duidelijk aangegeven waarop ik beoordeeld word.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
14
50
Geen mening 3
14
25
Mee eens 4
36
0
Helemaal Mee eens 5
36
1
3
2
Mean
4.21
StDev
0.41
Mean
3.93
StDev
1.03
4
5
De beoordeling van de uitgewerkte skeleton concept map telt voor 20% mee
voor het eindcijfer.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
7
50
Geen mening 3
0
25
Mee eens 4
29
0
Helemaal Mee eens 5
64
1
2
3
4
5
Mean
4.50
StDev
0.82
De cursus word afgesloten met een eindtoets met alleen opgaven over deze cursus.
Helemaal Mee Oneens
Mee Oneens
Geen mening
Mee eens
Helemaal Mee eens
Bijlagen Skeleton Concept Mapping
1
2
3
4
5
%
0
21
0
43
36
100
75
50
25
0
Mean
3.93
StDev
1.10
1
2
3
4
5
20
Technische Universiteit Eindhoven University of Technology
MindManager/Mindjet en SharePoint
6
7
8
9
Na de inleidende workshop kan ik met de cursus aan de slag.
%
100
Helemaal Mee Oneens 1
7
75
Mee Oneens 2
7
50
Geen mening 3
0
25
Mee eens 4
71
0
Helemaal Mee eens 5
14
1
2
Mean
3.79
StDev
1.01
3
4
5
Met behulp van de Handout kan ik zonder verdere gebruiksaanwijzing met
MindManager/Mindjet aan de slag.
%
100
Helemaal Mee Oneens 1
7
75
Mee Oneens 2
14
50
Geen mening 3
7
25
Mee eens 4
43
0
Helemaal Mee eens 5
29
3
4
5
1
2
Met behulp van de Handout kan ik zonder verdere gebruiksaanwijzing met
SharePoint aan de slag.
%
100
Helemaal Mee Oneens 1
7
75
Mee Oneens 2
7
50
Geen mening 3
21
25
Mee eens 4
43
0
Helemaal Mee eens 5
21
1
2
3
4
5
Ik vind Mindmanager/Mindjet gebruiksvriendelijk om mee te werken.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
36
50
Geen mening 3
36
25
Mee eens 4
21
0
Helemaal Mee eens 5
7
1
2
3
4
10 Ik vind SharePoint gebruiksvriendelijk om mee te werken.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
21
50
Geen mening 3
43
25
Mee eens 4
29
0
1
2
Helemaal Mee eens 5
7
Mean
3.71
StDev
1.22
Mean
3.64
StDev
1.11
Mean
3.00
StDev
0.93
5
Mean
3.21
StDev
0.86
3
4
5
Het kennisdomein
11
De uitgereikte skeleton concept map geeft een goed overzicht van de belangrijkste
onderwerpen (concepten) uit het kennisdomein "Applied Physical Sciences".
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
14
3.86
50
Geen mening 3
7
StDev
25
Mee eens 4
57
0.91
0
Helemaal Mee eens 5
21
1
2
3
4
5
Bijlagen Skeleton Concept Mapping
21
Technische Universiteit Eindhoven University of Technology
12
De concepten in de uitgereikte skeleton concept map zijn een goed startpunt om de
skeleton concept map samen verder uit te werken.
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
14
3.93
50
Geen mening 3
0
StDev
25
Mee eens 4
64
0.88
0
Helemaal Mee eens 5
21
1
2
3
4
5
De "Topic Notes" (animaties, videoclips, plaatjes) boven de scripts bij de concepten in
13 de uitgereikte skeleton concept map bieden goede aangrijpings-punten om betekenis te
geven aan de concepten.
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
0
3.64
50
Geen mening 3
43
StDev
25
Mee eens 4
50
0.61
0
Helemaal Mee eens 5
7
1
2
3
4
5
14
De uitgereikte skeleton concept map sluit goed aan bij het studieboek (Sears and
Zemansky's University physics).
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
21
3.50
50
Geen mening 3
14
StDev
25
Mee eens 4
57
0.91
0
4
1
2
3
5
Helemaal Mee eens 5
7
Motivatie
15
Deze manier van werken stimuleert mij om actief aan de cursus Applied Physical
Sciences te werken.
%
100
Helemaal Mee Oneens 1
14
Mean
75
Mee Oneens 2
21
3.21
50
Geen mening 3
7
StDev
25
Mee eens 4
43
1.32
0
Helemaal Mee eens 5
14
1
2
3
4
5
16 Ik word gestimuleerd betekenis te geven aan de concepten.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
7
50
Geen mening 3
0
25
Mee eens 4
64
0
Helemaal Mee eens 5
29
1
2
Mean
4.14
StDev
0.74
3
17 Ik word gestimuleerd verbanden te leggen tussen de concepten.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
0
50
Geen mening 3
7
25
Mee eens 4
50
0
Helemaal Mee eens 5
43
1
2
3
Bijlagen Skeleton Concept Mapping
4
5
Mean
4.36
StDev
0.61
4
5
22
Technische Universiteit Eindhoven University of Technology
18
19
20
Het werken met de skeleton concept map vind ik stimulerend.
%
100
Helemaal Mee Oneens 1
14
75
Mee Oneens 2
21
50
Geen mening 3
21
25
Mee eens 4
29
0
Helemaal Mee eens 5
14
1
2
Het werken volgens scripts vind ik stimulerend.
%
Helemaal Mee Oneens 1
14
Mee Oneens 2
21
Geen mening 3
21
Mee eens 4
36
Helemaal Mee eens 5
7
100
75
50
25
0
Mean
3.07
StDev
1.28
3
4
5
Mean
3.00
StDev
1.20
1
2
3
4
5
Ik heb tijdens deze cursus meer uren gemaakt dan gemiddeld 10 uur per week.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
36
50
25
Geen mening 3
7
0
Mee eens 4
21
1
2
3
4
5
Helemaal Mee eens 5
36
Mean
3.57
StDev
1.29
Script
21
22
Ik vind het met z'n tweeën doorlopen van het script behulpzaam bij de uit te voeren
activiteiten, zoals beschreven in het script.
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
14
3.50
50
Geen mening 3
29
StDev
25
Mee eens 4
50
0.82
0
Helemaal Mee eens 5
7
1
2
3
4
5
Ik vind het script een effectief hulpmiddel om de discussie op gang te brengen.
Helemaal Mee Oneens
Mee Oneens
Geen mening
Mee eens
Helemaal Mee eens
23
24
1
2
3
4
5
0
29
14
57
0
100
75
50
25
0
Mean
3.29
StDev
0.88
1
2
3
4
5
Door de scripts ben ik zelf informatie gaan zoeken over een bepaald concept.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
14
50
Geen mening 3
7
25
Mee eens 4
50
0
Helemaal Mee eens 5
29
1
2
3
4
5
Mean
3.93
StDev
0.96
De wekelijkse feedback op de scripts, d.m.v. van het feedbackformulier, is een effectief
hulpmiddelmiddel.
%
100
Helemaal Mee Oneens 1
0
Mean
75
Mee Oneens 2
36
2.86
50
25
Geen mening 3
43
StDev
0
Mee eens 4
21
0.74
1
2
3
4
5
Helemaal Mee eens 5
0
Bijlagen Skeleton Concept Mapping
23
Technische Universiteit Eindhoven University of Technology
Leerproces
25
Het eerst ieder afzonderlijk opzoeken van betekenisvolle informatie en daarna met
elkaar daarover in discussie gaan vind ik een prettige manier van werken.
Helemaal Mee Oneens
Mee Oneens
Geen mening
Mee eens
Helemaal Mee eens
26
27
28
1
2
3
4
5
7
14
14
57
7
100
75
50
25
0
Mean
3.43
StDev
1.05
1
2
3
4
5
Door begrippen aan elkaar uit te moeten leggen, heb ik ze beter begrepen.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
14
50
Geen mening 3
21
25
Mee eens 4
43
0
Helemaal Mee eens 5
21
1
2
3
4
5
Mean
3.71
StDev
0.96
Door deze werkvorm wordt op een effectieve manier de twee blokken van 2 uur
benut.
%
100
Helemaal Mee Oneens 1
7
Mean
75
Mee Oneens 2
36
3.07
50
Geen mening 3
14
StDev
25
Mee eens 4
29
1.22
0
Helemaal Mee eens 5
14
1
2
3
4
5
Ik heb geleerd zelf te navigeren door de leerstof.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
14
50
Geen mening 3
7
25
0
Mee eens 4
57
Helemaal Mee eens 5
21
Mean
3.86
StDev
0.91
1
2
3
4
5
29 Deze werkvorm maakt het mij makkelijk om kennis op te doen over dit onderwerp.
%
100
Helemaal Mee Oneens 1
7
Mean
75
Mee Oneens 2
7
3.79
50
Geen mening 3
14
StDev
25
0
Mee eens 4
43
1.15
1
2
3
4
5
Helemaal Mee eens 5
29
30 Welk percentage van de 4 contacturen per week zijn jullie met elkaar in discussie.
%
100
0 - 20 % 1
0
Mean
75
21 - 40 % 2
14
3.07
50
41 - 60 % 3
64
StDev
25
61 - 80 % 4
21
0.59
0
81 - 100 % 5
0
1
2
3
4
5
31 Deze werkvorm stuurt mijn studiegedrag voldoende.
%
100
Helemaal Mee Oneens 1
7
75
Mee Oneens 2
14
50
Geen mening 3
14
25
0
Mee eens 4
50
Helemaal Mee eens 5
14
Bijlagen Skeleton Concept Mapping
Mean
3.50
StDev
1.12
1
2
3
4
5
24
Technische Universiteit Eindhoven University of Technology
32 Na elke ESCoM opgaven oefenen is nodig als voorbereiding op de toets.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
0
50
Geen mening 3
7
25
0
Mee eens 4
29
1
2
3
4
Helemaal Mee eens 5
64
33 Na elke ESCoM opgaven oefenen is nodig om de leerstof te begrijpen.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
7
50
Geen mening 3
14
25
0
Mee eens 4
36
1
2
3
4
Helemaal Mee eens 5
43
34
Mean
4.57
StDev
0.62
5
Mean
4.14
StDev
0.91
5
Naast deze werkvorm is het nodig een werkcollege te volgen waarin begeleiding
plaatsvindt in het maken van opgaven.
%
100
Helemaal Mee Oneens 1
7
Mean
75
Mee Oneens 2
36
3.07
50
Geen mening 3
21
StDev
25
0
Mee eens 4
14
1.28
1
2
3
4
5
Helemaal Mee eens 5
21
Student karakteristieken
35 De skeleton concept map heeft voordelen boven hoorcolleges met PowerPoint.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
0
50
Geen mening 3
7
25
0
Mee eens 4
50
1
2
3
4
5
Helemaal Mee eens 5
43
36 De skeleton concept map heeft voordelen boven werkcolleges.
%
100
Helemaal Mee Oneens 1
0
75
Mee Oneens 2
29
50
Geen mening 3
21
25
0
Mee eens 4
36
1
2
Helemaal Mee eens 5
14
37 Ik vind de cursus Applied Physical Sciences interessant.
%
100
Helemaal Mee Oneens 1
21
75
Mee Oneens 2
36
50
Geen mening 3
14
25
0
Mee eens 4
21
1
Helemaal Mee eens 5
7
38 Ik studeer vooral om studiepunten te halen.
%
Helemaal Mee Oneens 1
14
Mee Oneens 2
21
Geen mening 3
50
Mee eens 4
7
Helemaal Mee eens 5
7
Bijlagen Skeleton Concept Mapping
100
75
50
25
0
Mean
4.36
StDev
0.61
Mean
3.36
StDev
1.04
3
4
5
Mean
2.57
StDev
1.24
2
3
4
5
Mean
2.71
StDev
1.03
1
2
3
4
5
25
Technische Universiteit Eindhoven University of Technology
39 Door de voortgangsindicator heb ik een goed overzicht hoe ver we zijn.
%
100
Helemaal Mee Oneens 1
7
75
Mee Oneens 2
0
50
Geen mening 3
14
25
0
Mee eens 4
57
3
4
1
2
Helemaal Mee eens 5
21
40 De docent moet regelmatig voortgangscontrole
%
Helemaal Mee Oneens 1
0
Mee Oneens 2
7
Geen mening 3
7
Mee eens 4
50
Helemaal Mee eens 5
36
Bijlagen Skeleton Concept Mapping
Mean
3.86
StDev
0.99
5
uitvoeren.
100
75
50
25
0
Mean
4.14
StDev
0.83
1
2
3
4
5
26
Technische Universiteit Eindhoven University of Technology
Literatuurlijst
Marée, T. J. (2013). Handout: Tips and Tricks for the Enriched Skeleton Concept Maps
Applied Physical Sciences with the ESCoM Method and by means of MindManager /
Mindjet. Eindhoven: Eindhoven University of Technology.
Marée, T. J., van Bruggen, J. M., & Jochems, W. M. G. (2013). Effective self-regulated science
learning through multimedia-enriched skeleton concept maps. Research in Science &
Technological Education, 16-30.
Young, Hugh D., & Freedman, Roger A. (2012). Sears and Zemansky's University physics: With
modern physics. (13 ed.). New York: Pearson Education.
Bijlagen Skeleton Concept Mapping
27