Bij het criteria betrouwbaarheid kun je jezelf twee belangrijke vragen stellen:
Dit hangt vaak af van de kwaliteit van de vraagstelling en de kwaliteit van het antwoord- of beoordelingsmodel. Bij een gesloten vraagstelling is betrouwbaarheid vaak minder van toepassing dan bij een open vraagstelling. De reden hiervoor is dat men bij een gesloten vraagstelling van tevoren het gewenste antwoord kan vaststellen.(Stichting Cito Instituut voor toetsontwikkeling Arhnem, 2011)
Echter, bij een open vraag of opdracht zal een heldere vraag- of probleemstelling moeten worden geformuleerd. Deze moet precies aansluiten op de gewenste leerdoelen. Daarnaast is het belangrijk dat er bij een open vraagstelling veel aandacht aan het antwoord- of beoordelingsmodel wordt geschonken.(Stichting Cito Instituut voor toetsontwikkeling Arhnem, 2011)
Wanneer het antwoord- of beoordelingsmodel is opgesteld, kan gecontroleerd worden of de vraag of opdracht de student uitnodigt om in de juiste richting te denken. Ook zien we dan of zij worden getriggerd om het goede antwoord te geven of het gewenste gedrag te vertonen.(Stichting Cito Instituut voor toetsontwikkeling Arhnem, 2011)
De betrouwbaarheid van een toets is de mate waarin de geobserveerde scoreverschillen ware scoreverschillen reflecteren. De betrouwbaarheid wordt gedefinieerd als de verhouding van de variantie van de ware scores en de variantie van de geobserveerde scores. De betrouwbaarheid is een getal tussen de 0 en 1.(Stichting Cito Instituut voor toetsontwikkeling Arhnem, 2011)
De betrouwbaarheid is zowel afhankelijk van de toets zelf als van de groep personen waarbij de toets is afgenomen. In de teller van de betrouwbaarheid staat de variantie van de ware scores. Bij een homogene populatie is die kleiner dan bij een heterogene populatie. De betrouwbaarheid van een toets kan worden beschouwd als de correlatie tussen een test en een tweede test met precies dezelfde eigenschappen, een zogenaamde parallelle test. (Stichting Cito Instituut voor toetsontwikkeling Arhnem, 2011)
cito_toetsen_op_school.pdf
Stichting Cito Instituut voor toetsontwikkeling Arhnem.(2011). Retrieved from cito_toetsen_op_school.pdf
Onderwijsadviesbureau Dekkers. (2014, 31 Januari). De toetswinkel- Betrouwbaarheid en validiteit. Retrieved from https://www.youtube.com/watch?v=h9fKSyYOlqM