Hintergrundinformationen zur Auswertung

Institut für Bildungsevaluation
Assoziiertes Institut der
Universität Zürich
Wilfriedstrasse 15
CH-8032 Zürich
Telefon +41 43 268 39 60
Telefax +41 43 268 39 67
www.ibe.uzh.ch
Check Ergebnisse: Hintergrundinformationen zur Auswertung 2016
Durchführung
Zeitfenster
Die reguläre Durchführung des Check S2 fand zwischen Montag, 22. Februar und Freitag, 1. April
2016 statt. Für Schülerinnen und Schüler, die während dieser Zeit nicht am Check S2 teilnehmen
konnten, gab es die Möglichkeit, einzelne Tests zu einem späteren Termin nachzuholen.
Anzahl durchgeführter Tests
Während des regulären Testzeitfensters haben 9‘191 Schülerinnen und Schüler aus den Kantonen
Aargau und Solothurn am Check S2 teilgenommen (stand 29. April 2016).
Die Schülerinnen und Schüler haben in den Fächern Deutsch, Englisch, Französisch, Mathematik
sowie Natur und Technik insgesamt 76‘292 Online-Tests gelöst. Die Ergebnisse stehen ab 29. April
2016 zur Verfügung.
Für die Beurteilung der Schreibkompetenzen wurden Papier-Tests eingesetzt. Es wurden 9'044 Texte
in Deutsch und 8'770 Texte in Englisch verfasst. Die Ergebnisse stehen ab 12. Mai 2016 zur Verfügung.
Für die Beurteilung der Sprechkompetenzen in Englisch und Französisch wurde ein standardisiertes
Verfahren eingesetzt. In Englisch wurden die Sprechkompetenzen von 444, in Französisch von 160
Schülerinnen und Schülern beurteilt. Die Durchführung war freiwillig. Die Ergebnisse stehen ab
29. April 2016 zur Verfügung.
Technische Informationen
Von den 76'292 durchgeführten Online-Tests wurden 275 (0.36%) nicht korrekt abgeschlossen.
Von den 275 nicht abgeschlossenen Tests wurden 229 gestartet und nicht korrekt abgeschlossen.
Die übrigen Tests wurden von den Lehrerinnen und Lehrern bewusst abgebrochen.
Zu Beginn der Durchführung trat bei einzelnen Schülerinnen und Schülern während der Testdurchführung das Problem auf, dass die eingegebene Lösung bei einem erneuten Aufruf der Aufgabe nicht
mehr sichtbar war, obwohl die Antwort vom System gespeichert wurde. Dieser Fehler konnte am
9. März 2016 behoben werden.
Am Dienstag, 1. März 2016, war das Portal zwischen 13.00 und 13.30 Uhr aufgrund eines Serverproblems nicht verfügbar. Anschliessend war die Performanz des Portals gering. Das Problem konnte
am gleichen Tag behoben werden.
Auswertung
Umgang mit den Tests bei technischen Problemen
Lehrpersonen, die bei der Durchführung technische Probleme hatten, konnten die Tests wiederholen.
Insgesamt wurden 585 Tests (0.77%) wiederholt.
Kam es bei der Testdurchführung zu technischen Problemen oder konnte ein Test nicht wie vorgesehen beendet werden, wurden die Ergebnisse von uns speziell kontrolliert. Die Kontrollen ergaben,
dass die Daten vom System gespeichert wurden.
Institut für Bildungsevaluation
Assoziiertes Institut der
Universität Zürich
Berechnung der Testergebnisse
Für die Berechnung der Testergebnisse wurden Aufgaben, die in irgendeiner Weise nicht den teststatistischen Gütekriterien entsprachen, ausgeschlossen. Das bedeutet, dass einzelne Aufgaben, die für
einen Grossteil der Schülerinnen und Schüler unklar waren oder aufgrund technischer Probleme nicht
gelöst werden konnten, von der Auswertung ausgeschlossen wurden.
Einige Schülerinnen und Schüler haben in ihren Tests einzelne Aufgaben nicht bearbeitet. Nicht bearbeitete Aufgaben wurden bei den Auswertungen als falsch beurteilt. Ein Testergebnis wurde nur
dann berechnet, wenn eine Schülerin oder ein Schüler im entsprechenden Kompetenzbereich (z.B.
Deutsch Lesen) genügend Aufgaben gelöst hat.
Die Gesamtwerte in Deutsch und Mathematik werden aus den Ergebnissen in den einzelnen Kompetenzbereichen berechnet. Die Gesamtwerte in Englisch und Französisch werden aus den Ergebnissen in den einzelnen Kompetenzbereichen, aber ohne Ergebnis im Sprechen, berechnet.
Ergebnisse von Schülerinnen und Schülern mit individuellen Lernzielen
Ein Teil der Schülerinnen und Schüler, die am Check S2 teilnahmen, haben in einem oder in mehreren Fächern individuelle Lernziele. Die Ergebnisse dieser Schülerinnen und Schüler wurden bei der
Berechnung der Klassen- und Schulmittelwerte nicht berücksichtigt.
Interpretation der Testergebnisse
Vergleich der Testergebnisse mit Kompetenzstufen
Die Berechnung der Testergebnisse beruht auf der Item Response Theorie. Durch diese spezielle
Methode können die Testergebnisse mit Bezug zu den Testaufgaben interpretiert werden. Konkret
heisst dies, dass sich aufgrund der Testergebnisse für jede Aufgabe bestimmen lässt, wie wahrscheinlich es ist, dass ein Schüler oder eine Schülerin die Aufgabe richtig löst.
Die Punktzahl in der Ergebnisrückmeldung zeigt unter Nutzung der Interpretationshilfe, über welche
Kompetenzen die Schülerinnen und Schüler verfügen. Die Punktzahlen wurden zu Kompetenzstufen
zusammengefasst, die beschreiben, was die Schülerinnen und Schüler mit hinreichender Sicherheit
wissen und können. Die Interpretationshilfen in Form von ausführlichen Kompetenzbeschreibungen
befinden sich auf www.check-dein-wissen.ch.
Vergleich Testergebnisse mit Anforderungsprofilen
Die Jugendlichen können ihre Ergebnisse im Check S2 mit den schulischen Anforderungsprofilen für
die berufliche Grundbildung des Schweizerischen Gewerbeverbands vergleichen. Ausführliche Informationen befinden sich auf www.check-dein-wissen.ch sowie www.anforderungsprofile.ch.
Auskunft
Pädagogische und technische Fragen
Auswertung und Ergebnisse
Institut Weiterbildung und Beratung
Institut für Bildungsevaluation
Pädagogische Hochschule der
Fachhochschule Nordwestschweiz
Assoziiertes Institut der
Universität Zürich
Telefon: 056 202 72 33
Telefon: 043 268 39 60
E-Mail: [email protected]
E-Mail: [email protected]
Seite 2/2