Sluiten
Leerlingen buiten

Projecten

Replay - procesdata voor de schermen

Replay zet procesdata voor de schermen

Als leerlingen een digitale toets maken, vergaren we automatisch procesdata. We zien hoe lang ze over een opgave doen, hoe ze door de toets gaan en welke bewerkingen ze wijzigen. Procesdata vormen een bron van informatie die (veel) verder gaat dan alleen goed of fout. En die informatie kunnen leerkrachten en docenten goed gebruiken om toetsresultaten te interpreteren. Alleen: procesdata worden zelden gebruikt. Om hier verandering in te brengen, ontwikkelden we Replay. Een tool die procesdata inzichtelijk en bruikbaar maakt, en ze achter de schermen vandaan haalt.  
Dit is Replay
  • Een visualisatie die laat zien hoe leerlingen door een toets lopen.
  • Dit demo-prototype is een rekentoets voor groep 6.
  • Replay laat zien: 
    - welke leerlingen snel/langzaam door een toets gaan.
    - bij welke vragen leerlingen lang blijven hangen.
    - welke vragen leerlingen nog een keer bekijken of niet beantwoorden. 
    - hoe leerlingen hun antwoorden wijzigen.    

Net alsof je meekijkt over de schouder van de leerling

Wat zijn procesdata eigenlijk? Procesdata zijn data die alle interacties van leerlingen met een digitale toets weergeven.  Het is net alsof je over de schouder van een leerling meekijkt tijdens de toets en het gedrag van de leerling observeert.
Replay afbeelding 3
"Replay geeft inzicht in het toetsgedrag van leerlingen. Als leraar helpt het je om toetsresultaten te interpreteren en gericht feedback te geven."
Michelle ten Pas
R&D-medewerker

Wat heb jij als leraar aan procesdata?

Procesdata kunnen waardevolle inzichten geven in toetsgedrag en waarom leerlingen fouten maken. Maakt een leerling misschien een fout omdat hij gehaast is? Of omdat hij twijfelt en toch maar gokt? Als je weet hoe een leerling zich gedraagt tijdens een toets en waarom, dan kun je de resultaten beter interpreteren. Een leerling die snel door een toets gaat en daardoor fouten maakt, is bijvoorbeeld niet perse minder vaardig.

Replay gebruikt deze procesdata:

  • Navigatie:
    - de volgorde van beantwoorde vragen
  • Tijd: 
    - de totale tijd van de klas per vraag
    - de individuele tijd per vraag
  • Antwoorden:
    - de gegeven antwoorden per leerling
    - de gegeven antwoorden per vraag
    - de gewijzigde antwoorden 
    - de niet-beantwoorde vragen
  • Leerlingscore
Replay afbeelding 2
Met Replay willen we digitale toetsplatformen inspireren om procesdata mee te nemen in toetsrapportages.
Goed om te weten
Replay maakt gebruik van de IMS Question & Test Interoperability (QTI) standard. Dit betekent dat Replay ook toetsen uit andere toetssystemen kan afspelen.
Spitten door procesdata: een monnikenwerk

“Ineens komt dan de mens achter de data in beeld. En daar zoek ik naar.” 
Quote van Eva de Schipper over het onderzoek naar Procesdata áchter de schermen, het basisonderzoek bij dit prototype. Open het interview met Eva de Schipper (OK&I werkprogramma 2021)