SEIDENFUS.Web evaluation

Web based Evaluation- The German approach towards quality in teaching
Christoph Seidenfus
Valutazione basata sul Web – L’approccio tedesco rivolto alla qualità nell’insegnamento
Abstract: Valutazione basata sul Web dell’insegnamento dell’ Analisi Transazionale in Germania.
Un progetto di ricerca svolto dal Comitato per la scienza e ricerca DGTA, ha mostrato nell’autunno del 2010
che i TSTA e PTSTA tedeschi impegnati nel training avevano differenti approcci nel dare feedback e nel fare
valutazioni: si osservava infatti una ampia variabilità che andava dai feedback personali dati durante i
seminari a questionari standardizzati ai quali i trainee dovevano rispondere a distanza di alcuni giorni.
Pertanto i membri della commissione DGTA hanno seguito le raccomandazioni del Comitato e hanno deciso
di progettare e sviluppare uno strumento standardizzato che fosse in grado di:


provare scientificamente l’efficacia dell’AT
supportare l’orientamento strategico dell’insegnamento e della formazione AT con criteri di qualità
significativi.
Questo è stato fatto grazie all’aiuto dell’Università di Scienze applicate di Norimberga e al Prof Konig
dell’Istituto per la ricerca sulla valutazione e la pratica. E’ stata una grande fortuna trovare una partner in
grado di assicurare la qualità scientifica nel progettare il nostro strumento, ma anche prezioso partner esterno
capace di garantire la sicurezza dei dati e l’anonimato nel processo di feedback. Insieme abbiamo creato
un questionario sotto forma di checklist che rileva l’acquisizione di abilità in AT secondo quattro dimensioni:
competenze personali: quali il miglioramento dell’abilità di agire spontaneamente e appropriatamente alla
situazione specifica, migliorare l’abilità di percepire i propri sentimenti, la capacità di riflettere su aspetti etici;
competenze di riflessione: ad esempio la capacità di riflettere sulle proprie abilità al fine di usare al meglio i
feedback ricevuti;
competenze d’azione: ad esempio il miglioramento delle proprie abilità di ipotizzare ragionevoli diagnosi, di
creare chiare strategie, di migliorare anche l’organizzazione del proprio processo di apprendimento;
competenze relazionali: quali il miglioramento dell’abilità di creare relazioni con altre persone in un contesto
di OKNESS, il potenziamento delle abilità di comunicazione e le opzioni per mantenere un buon contatto
anche nelle situazioni di crisi.
La valutazione basata sul Web ha due finalità:
I formatori analisti transazionali dovrebbero avere disponibile uno strumento standardizzato i cui risultati siano
feedback comparabili sull’efficacia del loro insegnamento;
promuovere processi di miglioramento e di verifica della bontà di tale misurazione.
Il nostro DGTA nazionale dovrebbe raccogliere tutti i feedback anonimi in una banca dati che consenta la
ricerca scientifica e la valutazione dell’efficacia ed efficienza dell’insegnamento dell’AT nelle rispettive aree
di competenze. Ci proponiamo in questo lavoro di dimostrare l’efficacia dell’insegnamento dell’AT – un passo
importante per migliorare l’accettazione sociale e professionale dell’AT in Germania.
In questa presentazione mostrerò il processo dal suo inizio, riferendomi alla cooperazione con l’università, alla
creazione e all’analisi della valutazione basata sul Web, a come è stata condotta, ai risultati che abbiamo
raggiunto sinora.
Web based Evaluation- The German approach towards quality in teaching


Christoph Seidenfus
Abstract Web based evaluation of TA teaching in Germany.
A research project of the DGTA Council of science and research showed in autumn 2010 that
German TSTA’s and PTSTA’s engaged in training had very different approaches of feedback and
evaluation in use: a range from personal feedback in the seminar itself up to highly standardized
questionnaires to be answered after several days. Therefore the DGTA board members followed the Councils
recommendation and decided to design and develop a standardized tool which should be able:
to scientifically prove the effectiveness of TA and
to support the strategic orientation of teaching and trainings towards relevant quality criteria. With the
University of applied sciences, Nuremberg and the institute for evaluation and practice
research, Prof. König, we were lucky to find a partner who was not only able to ensure the scientific quality of
the design of our tool but as well served as external partner to guarantee data security and anonymity of the
feedback process. Together we created as core tool a questionnaire checking acquisition of skills in TA
training in four dimensions:




Personal competency e.g. improving the ability to act spontaneously and appropriate to the respective
situation, improving the ability to perceive own feelings or the reflection on ethical issues
Reflection competency e.g. own reflection abilities especially to take the best personal use out of feedback
Action competency e.g. improving own abilities to establish reasonable diagnosis, create clear strategies as
well as theaspect of better organzing own learning processes
Relation competency e.g. improving abilities to create relations to other people in an OK/OK-frame,
improvement of communication skills or options to stay in good contact even in crisis situations
The web based evaluation serves two purposes:
Teaching transactional analysts should have available a standardized and over time in its results
comparable feedback on the effectiveness of their own teaching seminars. This in order to foster
improvement processes and check the success of such measures.
Our national organization DGTA should collect all anonymous feedback data in an increasing data pool
which allows scientific research and evaluation on efficiency and effectiveness of TA-teaching in the
respective competencies. At the end of the day we will be able to prove effectiveness of TA teaching – an
important step to improve the social and professional acceptance of TA in Germany.
In this presentation I will show the process from the beginning, referring on the cooperation with the university,
the creation and evaluation of the web based evaluation itself, how we run it and what results we have
achieved so far. Given it should be a poster session I could show process and content as well on several
posters.

Download Report