Zelftoetsen (in digitaal portfolio) Non Satis Scire WP6 Toetsen, beoordelen en toetsgestuurd leren in de universitaire lerarenopleidingen ORD 12 juni 2014 Judith Gullikers (WUR) Jan Volbers (UT) Martin Jacobs (TUD) Ruurd Taconis (TU/e) Zelftoetsen in digitaal portfolio • Doel en aanleiding • Achtergrond (theorie) • (Onderzoek)svragen • Activiteiten • ‘Pilot case studies’ • Uitkomsten (conclusie) Non Satis Scire: “Op welke wijze kan de beoordelingspraktijk van de universitaire lerarenopleiding eenduidiger en minder arbeidsintensief worden vormgegeven opdat het de werkdruk van opleiders vermindert en de studievoortgang van studenten verbetert?” Doel Projectdoel • Verlaging werkdruk en betere studievoortgang door zelftoetsen in digitale portfolio’s Producten • Bibliotheek met zelftoetsen • Procedure om zelftoetsen als beoordelingsinstrument in te gebruiken portfolio • Pilots: evaluatie / implementatie Onderzoek • => de pilots als ‘case study’ Aanleiding Lerarenopleiding => reflectieverslagen/ (Fox, White, & Kidd, 2011) • Tijdsvreter docenten in opleiding • Tijdsvreter opleiders • Reflectieverslag daadwerkelijk functioneren (DarlingHammond & Snyder, 2000) • Aansprekend voor docenten in opleiding? (α - β - γ - groen) There might also be significant • Actief experimenteren cruciaal (Taconis, van der Plas, v/d Sande, 2007) Alternatieven i.h.b. efficiëntie? ⇒ Digitale Zelftoetsen ? disciplinary differences in the way digital repositories are viewed and used, for example, in the social sciences (to support debate, argument and the solving of open ended problems) and in sciences (to support the acquisition of facts, the visualization of complex processes, to share test banks of assessment items etc.). ALT-SURF seminar , ePortfolios and Digital Repositories 22 and 23 April 2004, Edinburgh UK Achtergrond & theorie Opzet Werkpakket 6: 1 2 Zelftoetsen Inventariseren zelftoetsen Opzet Bijstelling Oplevering Inventariseren beoordelingsprocedures Ontwikkelen beoordelingprocedure Eerste versie Bijstelling Oplevering Implementeren zelftoetsen Evalueren ervaringen Rapporteren 2012 2013 3 4 1 2 2014 3 4 1 Opzet Werkpakket 6: 1 2 Zelftoetsen Inventariseren zelftoetsen Opzet Bijstelling Oplevering Inventariseren beoordelingsprocedures Ontwikkelen beoordelingprocedure Eerste versie Bijstelling Oplevering Implementeren zelftoetsen Evalueren ervaringen Rapporteren 2012 2013 3 4 1 2 2014 3 4 1 Inventariseren • WP2 => veel gebruikt (56%) (ontwikkelen < 5%) • Nader onderzoek: • beperkt en eenzijdig (Roos van Leary, soms Quick Scan) • Inzet alleen formatief /reflectief (‘toetsend’) • Verwachting − Studenten: zelfinzicht als opbrengst − Docenten: weinig invloed op het studietempo • Niet zozeer in portfolio, maar in diverse vakken − regie bij de opleiding − is meestal dossier ‘on top of’ − geen e-folio om in te implementeren => Beoordelingsprocedure wordt: gebruiksprocedure Inventariseren • WP2 => veel gebruikt (56%) (ontwikkelen < 5%) • Nader onderzoek: • beperkt en eenzijdig (Roos van Leary, soms Quick Scan) • Inzet alleen formatief /reflectief (‘toetsend’) • Verwachting − Studenten: zelfinzicht als opbrengst − Docenten: weinig invloed op het studietempo • Niet zozeer in portfolio, maar in diverse vakken − regie bij de opleiding − is meestal dossier ‘on top of’ − geen e-folio om in te implementeren => Beoordelingsprocedure wordt: gebruiksprocedure Gebruiksprocedure Theorie over m.n. feedback…. De lerende 1. staat positief tegenover het ontvangen van feedback, 2. reageert positief op de feedback, 3. accepteert dat de feedback aangeeft dat er een verandering noodzakelijk c.q. wenselijk is, 4. concludeert (daaruit) dat het eigen gedrag zal moeten veranderen, 5. gelooft dat een betekenisvolle verandering haalbaar is, 6. stelt zich toepasselijke en haalbare doelen om het eigen gedrag te reguleren en gericht bij te stellen, 7. onderneemt daadwerkelijk actie gericht op de verdere verbetering van gedrag / performance en ontwikkeling van competenties. Om tot een blijvende gedragsverandering te komen is de lerende : 8. Is bereid de gedragsverandering te abstraheren van de situatie en persoonlijk te integreren 9. Is daartoe in staat (heeft de middelen en omstandigheden) Gebruiksprocedure (handvat) Kernpunten: •Niet altijd geschikt •Self efficacy •Veranderbaarheid •Gedeelde regie •Op maat •Inbedden in ontwikkeling Bibliotheek Pilots Wie Wat TU/e Diverse (online) zelftoetsen bij mi en ma via Onderwijskunde, Diepteverwerking, Werkplekleren Naast QTI en Quickscan ook: WCQ, kernkwadranten, leerstijlen, stroryline WUR 2x 2 pilots bij de minoren zelftoetsen in twee doorlopende jaren. Inzet van ‘7 competentie Rubric’ en ‘checklist 7 competenties’ UT Zelftoets bij entrée assesment/intake (OPQ32) TUD Rubric portfolio beoordeling, Zelf toetsen bij werkplekleren Resultaten en bevindingen Soorten zelftoetsen: 1. Naar inhoud − Basiscompetenties (VIL/QTI, QuickScan) − Verbreding (functioneren als medewerker in school) − Stijl & profiel (ICT comp. , regulatiestijl, intercult. ondw.,) − Opleidingsproces (leerstijlen, kernkwadranten, …) 2. Naar bron en focus − Effectmeting (leerling perceptie van effecten bij leerlingen) − Gedragsmeting (leerling perceptie van docent gedrag) − Zelfevaluatie (zelfperceptie van docentkenmerken en gedrag) TU/e: Zelftoetsen toen … 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) … en straks 1. Roos van Leary/VIL/QTI http://www.corfstart.nl/vragenlijst/invullen.aspx?idBasis MetaInstrument=258&afnameID=876 2. Quickscan http://www.onderwijscooperatie.nl/scans/checklist.html Verbreding 3. Functioneren in de breedte (directie) http://pdf.klasse.be/KVL/KVL175/ 4. WCQ (CLES + Emphasis + regulative style) http://www.corfstart.nl/Stijl en profiel vragenlijst/invullen.aspx?idMetaInstrument=346&view=1&datum=25-92009%2015:06:01 5. Teaching in multicultural classes (Teekes) http://www.tactic.nl/NSS/Professional%20profile%20teekens%20MODIFIED%20v2a.do c 6. ICT competenties Keuze/ geschiktheid/ persoonlijke ontwikkeling Opleiden 7. Kernkwadranten http://www.atlasloopbaan.nl/kernkwaliteitenspel.html 8. OPQ32: Persoonlijkheid (http://www.123test.nl/kerntypering/ (beperkt) Leren 9. Ervaringsleren (‘Kolb in de stage’) http://www.tactic.nl/WPL/kolb_VO.htm 10. Leerstijlentest (Vermunt) Resultaten en bevindingen 1. Positief ontvangen door studenten (verwachting: zelfinzicht) 2. In de opleiding kost het (iets) méér tijd a) Inpasbaar en positief, maar ‘het komt er bij’ b) M.u.v. formele ‘zelf diagnose’ (entrée assesment) ? 3. Afhankelijk van goodwil van individuele opleiders => experiment karakter 4. Zelftestbibliotheek: a) Centraal systeem nu niet haalbaar b) Onderhoudsprobleem externe links Resultaten en bevindingen Bijdragen aan het leren: a) Bevordering doorstroming: vermoedelijk b) Functies a) Signaalfunctie (b.v. entree) b) Pointerfunctie (veranderrichting) c) Oriëntatie • Persoonlijk − ‘Bestaat dat ook?’ − ‘Hoort Oh, dat ook bij het vak van leraar? • Situationeel − ‘Bij mij is het anders op school’ Uitkomsten Noodzakelijk voorwaarden voor succesvolle implementatie: 1. Geleefde opleidingsdidactiek met veel zelf-sturing door studenten • Actief portfolio (e-folio) gebruik 2. Gebruiken als geïntegreerd onderdeel daarvan en/of Als formele/verplichte (zelf) diagnose (b.v. entrée assesments) 3. Durf: – het komt voor iets anders in de plaats
© Copyright 2024 ExpyDoc
