Statistische waarden

Dit artikel bevat een beschrijving van een aantal statistische waarden die op verschillende plekken in RemindoToets terugkomen. Deze waarden geven informatie over de kwaliteit van afgenomen items, de toets(matrijs) als geheel en over de scores van kandidaatgroepen.

Itemniveau

P′-waarde

De P′-waarde (spreek uit: P-accent-waarde) geeft weer hoe de gemiddeld behaalde score zich verhoudt tot de maximaal haalbare score, en is hierdoor een indicatie van de moeilijkheidsgraad van een item. Een lage P′-waarde geeft aan dat op dit item slecht is gescoord; mogelijk is het item te moeilijk of niet relevant voor de toets. Een hoge P′-waarde geeft aan dat op dit item goed is gescoord; mogelijk is het item te makkelijk. De P′-waarde ligt tussen 0 en 1. Het is mogelijk om in de afname-omgeving via Instellingen > Beheer algemene instellingen > Vraaganalyse notificatie-instellingen aan te geven bij welke waarden een waarschuwing afgegeven moet worden.

De P’-waarde van een vraag is te vinden in de beheeromgeving via Vragen > tabblad Statistieken . In de afname-omgeving is het te vinden onder Resultaten > Analyses > tabblad Details van het resultaat en tabblad Analyseer vragen.

R_it-/R_ir-waarde

De R_it-waarde (“R_it” voor Relatie Item Toets) geeft de correlatie (samenhang) weer tussen de scores op dit item en de scores op alle items (van de toets als geheel). Een lage R_it-waarde duidt erop, dat scores op dit item niet samenhangen met scores op de toets als geheel; mogelijk hoort dit item niet binnen deze toets. Hoe hoger echter de R_it-waarde, hoe beter het item past binnen de toets, en hoe kwalitatiever de toets als geheel. De R_it-waarde ligt tussen -1 en 1. De R_it-waarde heeft als nadeel dat het betreffende item zelf ook voorkomt in alle items, en daardoor correleert deze met zichzelf. Dit effect wordt groter naarmate de toets minder items bevat.

Om dit probleem uit de weg te gaan wordt ook wel gebruik gemaakt van de R_ir-waarde (“R_ir” voor Relatie Item Rest), waarbij de correlatie wordt berekend a.d.h.v. de scores op dit item met de scores op de overige items binnen de toets. Doordat hierbij de correlatie van het item met zichzelf wegvalt (deze is altijd 1), is de R_ir-waarde nooit hoger dan de R_it-waarde.

De R_it- en R_ir-waarden van een vraag zijn te vinden in de beheeromgeving: Vragen > tabblad Statistieken. In de afname-omgeving zijn ze te vinden onder Resultaten > Analyses > tabblad Details van het resultaat en tabblad Analyseer vragen.

A-waarde

De A-waarde (“A” voor afleider) is het percentage kandidaten dat deze afleider heeft gekozen. De A-waarde ligt tussen 0 en 1. De som van alle A-waarden is altijd 1. Indien dit item bestaat uit één interactie met één correcte afleider, dan is de A-waarde van deze correcte afleider gelijk aan de P-waarde van het item (niet de P′-waarde). Aangezien afleiders alleen gedefinieerd zijn voor interacties, en niet voor items, zijn A-waarden daarom ook alleen gedefinieerd voor interacties.

De A-waarde van een vraag is te vinden in de beheeromgeving: Vragen > tabblad Statistieken.

R_at-/R_ar-waarde

De R_at- en R_ar-waarden (“a” voor afleider) zijn verwant aan de R_it- en R_ir-waarden (“i” voor item), maar werken niet op itemniveau, maar op afleider-niveau. Aan deze waarden valt te zien in hoeverre de keuze voor een bepaalde afleider correleert met de kandidaatscore voor de toets als geheel. Als de Rat- of Rar-waarde voor een incorrecte afleider hoger is dan de waarde voor een correcte afleider, dan kan het zijn dat de afleider toch correct is, of dat het een strikvraag betreft.

De Rat- en Rar-waarden van een vraag zijn te vinden in de beheeromgeving: Vragen > tabblad Statistieken.

Gemiddelde (µ)

Dit is het gemiddelde van alle scores van kandidaten op een item.
Het gemiddelde van een vraag is te vinden in de afname-omgeving onder Resultaten > Analyses > tabblad Analyseer vragen.

Standaardafwijking (σ)

De standaardafwijking, getoond als STDEV (Engels: STandard DEViation), geeft weer hoe ver de behaalde scores van kandidaten op een vraag uiteen liggen. Hoe kleiner de standaardafwijking, hoe dichter de scores bij elkaar liggen. Bij een standaardafwijking van 0 heeft iedere kandidaat dezelfde score behaald. Een grote standaardafwijking duidt op een grote scheiding tussen goede en slechte scores, en dus een sterk onderscheidend vermogen. Verder geldt hoe hoger de maximaal haalbare score van een item, hoe hoger ook de standaardafwijking kan zijn. De standaardafwijking is minimaal 0.

De standaardafwijking van een vraag is te vinden in de afname-omgeving onder Resultaten > Analyses > tabblad Details van het resultaat en tabblad Analyseer vragen.

Toetsniveau

Cronbachs alfa / betrouwbaarheid

Cronbachs alfa is een maat voor de interne correlatie tussen scores op items, en kan gezien worden als een Rir-waarde op toetsniveau. De minimale waarde van Chronbachs alfa kan kleiner zijn dan 0 (in feite zelfs minus oneindig), de maximale waarde van Chronbachs alfa is 1, Cronbachs alfa geeft de betrouwbaarheid van een toets weer: hoe hoger de waarde (hoe dichter bij 1), hoe betrouwbaarder. Echter, een te hoge waarde (groter dan 0.90) kan een indicatie zijn dat hetzelfde construct te vaak wordt gemeten (redundantie). Een lage waarde (lager dan 0.50) wordt gezien als onacceptabel. Cronbachs alfa ligt tussen 0 en 1.

Cronbachs alfa kan ook in de beheeromgeving voor een toetsmatrijs berekend worden (via Toetsen > [gewenste toetsmatrijs] > tabblad Statistieken op basis van de data van eerder afgenomen items. Via deze functie is het ook mogelijk om een specifieke selectie te maken voor de te analyseren vragen . Daar kan gekozen worden om specifieke toetsmomenten met deze matrijs wel of niet mee te nemen voor analyse. Er kan op basis van de betrouwbaarheid vervolgens naar wens aanpassingen gedaan worden aan de matrijs.

Chronbachs alfa is te vinden in de beheeromgeving: Toetsen > tabblad Statistieken en in afname-omgeving onder Resultaten > Analyses.

Groepsanalyse

In Resultaten > Analyses > tabblad Groepsanalyse staan een aantal specifieke statistische waarden die alleen hier te vinden zijn, dit zijn:

95e percentielscore

De 95e percentielscore wordt gegeven voor de gehele toets en eventueel per onderdeel (wanneer terugkoppelingsonderdelen zijn ingesteld). Deze score geeft aan dat 95% van de scores lager is of gelijk aan deze score.

Gemiddelde raadscore

De gemiddelde raadscore is de gemiddelde raadkans (percentage) over de items omgerekend naar het aantal punten dat de student goed kan raden.

Score standaardafwijking

De score standaardafwijking geeft de spreiding van de verdeling aan – de mate waarin de scores onderling verschillen. De score standaardafwijking is te vinden door binnen de groepsanalyse kandidaatgroepen te vergelijken.

Cijfer standaardafwijking

De cijfer standaardafwijking geeft de spreiding van de verdeling aan – de mate waarin de cijfers onderling verschillen. Het cijfer standaardafwijking is te vinden door binnen de groepsanalyse kandidaatgroepen te vergelijken.