Analyses

Onder Resultaten > Analyses is het mogelijk om resultaten van een toetsmatrijs, toetsmoment of papieren toets te analyseren. Klik het juiste tabblad aan om informatie over een toetsmatrijs, toetsmoment of papieren toets te zien. Vervolgens moet uit de keuzelijst(en) een selectie worden gemaakt. Per tabblad zal het overzicht er anders uit zien,in dit artikel zullende gegevens per tabblad worden uitgelegd.

Tabblad toetsmatrijs/ toetsmoment/ papieren toetsen

Na de keuze voor één van de tabbladen wordt informatie zichtbaar over de betreffende toets. Bovenaan verschijnt mogelijk een veld waarin antwoordmodelaanpassingen worden getoond voor bepaalde kandidaten, toetsmatrijzen of toetsmomenten (alleen wanneer er aanpassingen zijn gedaan). Ee  voorbeeld hiervan wordt hieronder getoond.

Er zijn filters beschikbaar om specifiekere resultaten voor deze toetsmatrijs te tonen. De te gebruiken filters zijn: periode, gebruikersgroepen, kandidaat, status en evaluaties. Er kunnen meerdere filters tegelijkertijd gebruikt worden.

Verder naar beneden staat een overzicht van hoe er gescoord is door kandidaten op deze toetsmatrijs. Dit is te zien in de afbeelding hieronder. Aan de linkerzijde staat een grafiek. Op de horizontale as staat het percentage van de totaal te behalen punten (maximum score). De verticale as geeft het percentage weer van de kandidaten dat in dit scoregebied valt. 

De taartdiagrammen geven de verhouding aan tussen kandidaten die een voldoende of onvoldoende hebben gescoord. Er wordt altijd één cirkeldiagram getoond voor het resultaat op de toets (de meest rechtse). Wanneer er ook terugkoppelingsonderdelen zijn ingesteld (en getoond mogen worden) worden deze eerst getoond. In dit geval zijn er drie terugkoppelingsonderdelen. In dit voorbeeld heeft iets meer dan de helft van de kandidaten een voldoende behaald.

De betrouwbaarheid van de toets(matrijs) wordt berekend aan de hand van Chronbach's alfa:

De afbeelding hieronder geeft twee weergaven van de berekende betrouwbaarheid voor deze toetsmatrijs. Het linker onderdeel geeft de betrouwbaarheid wanneer er géén correcties zijn uitgevoerd op het antwoordmodel (ongecorrigeerd). De rechter weergave geeft de betrouwbaarheid na het toepassen van actieve correcties op de resultaten. De aanpassingen zorgen ervoor dat de betrouwbaarheid en de standaard meetfout van de toets veranderen. Tussen de twee opties in staat een icoon met een hart weergegeven. Hiermee kan gewisseld worden tussen de twee mogelijkheden. Klik op het icoon, waarna het zal verplaatsen naar de rechterzijde van de niet-geselecteerde optie.

Overzichten

Onderaan het overzicht staat een tabel met daarin verschillende gegevens per kandidaat. Bij deze tabel zullen opnieuw een aantal tabbladen staan. Welke tabbladen dit zijn is afhankelijk van de instellingen. Standaard zal het tabblad 'Overzicht' open staan. Verder zullen de tabbladen 'Details van de analyse', 'Groepsanalyse' en 'Analyseer vragen' beschikbaar zijn.

Overzicht

Op dit tabblad worden per kandidaat de resultaten getoond. Bij elke kandidaat zal aangegeven zijn wat de starttijd was van deze toets(matrijs/moment), met daarnaast hoe lang de kandidaat over de toets heeft gedaan. Als er terugkoppelingsonderdelen zijn toegevoegd aan de toets, zal er voor elk toegevoegd terugkoppelingsonderdeel een kolom met resultaat zijn. Door over de gekleurde balk te hoveren wordt zichtbaar hoe de kandidaten per onderdeel de vragen hebben beantwoord. De kolom met het harticoon erboven geeft de betrouwbaarheidsscore aan, maar alleen als deze berekend kan worden voor deze toets. Dit is niet altijd het geval, samengestelde cesuren zullen hier geen betrouwbaarheidsscore hebben staan. Ten slotte zijn er nog kolommen met de score voor de kandidaat, de status van de toets en helemaal rechts de details van het resultaat (van de betreffende kandidaat).

Details van de analyse

Dit tabblad bevat het overzicht van de resultaten van alle kandidaten op deze toetsmatrijs. Als er verschillende terugkoppelingsonderdelen zijn, dan zijn deze terug te vinden via een keuzelijst bij het filter 'Terugkoppeling'.

De gegevens die hier gepresenteerd zijn kunnen geëxporteerd worden als ruwe data. Selecteer onderaan de pagina de actie 'Exporteer ruwe gegevens naar Excel'.

Groepsanalyse

Met behulp van de groepsanalyse kunnen kandidaten die in gebruikersgroepen zijn onderverdeeld, op groepsniveau met elkaar vergeleken worden. Op die manier kan geanalyseerd worden hoe de groepen ten opzichte van elkaar gescoord hebben. Een kandidaat kan ook aan verschillende groepen gekoppeld zijn, waardoor er op verschillende manieren kan worden vergeleken. Denk hierbij bijvoorbeeld aan het vergelijken van groepen op basis van niveau, locatie of leerjaar. Om gebruikersgroepen met elkaar te kunnen vergelijken moeten ze gekoppeld zijn aan dezelfde categorie, voor meer informatie over het aanmaken van categorieën voor gebruikersgroepen, zie Afname-omgeving: Gebruikersgroepen.

In de groepsanalyse wordt een samenvatting van de resultaten van het toetsmoment weergegeven. In de samenvatting worden onder andere de gemiddelde score en het scorebereik getoond van alle kandidaten. Bevat een toets terugkoppelingsonderdelen, dan wordt dezelfde informatie ook per terugkoppelingsonderdeel getoond.

Om groepen met elkaar te kunnen vergelijken, moet via de keuzelijst bovenaan de pagina de categorie voor de gebruikersgroep gekozen worden. Een categorie zou bijvoorbeeld ‘Locatie’ kunnen zijn met drie gebruikersgroepen, nl. ‘Amsterdam’, ‘Rotterdam’ en ‘Den Haag’. Wanneer de categorie ‘Locatie’ wordt gekozen voor de vergelijking, worden de resultaten van de 3 groepen naast elkaar getoond. Door middel van groene en rode icoontjes, wordt duidelijk gemaakt hoe de waarde in het vak zich verhoudt tot de gemiddelde waarde van alle resultaten (groen is een hogere score, rood is een lagere score). Let op, de kleur geeft geen waardeoordeel of het beter of slechter is!

Zie de afbeelding hieronder voor een voorbeeld van een groepsanalyse per locatie.

Analyseer vragen

Het tabblad Analyseer vragen bevat verschillende gegevens en statische waarden die per toetsversie zijn berekend door Remindo. Kijk voor een toelichting van de statistische waarden bij het corresponderende artikel: Statistische waarden.

In de afbeelding rechts staan een aantal functies uit de kolom 'Aanpassingen'. Deze kolom wordt alleen zichtbaar wanneer er aanpassingen zijn gedaan aan het antwoordmodel voor deze vraag. Het vinkje of potlood staat voor welke antwoorden op deze vraag goedgekeurd zullen worden:

• Het vinkje geeft aan dat alle antwoorden worden goedgekeurd;
• Het potlood geeft aan dat alleen het aangepaste antwoord juist is.

Verder staan in de laatste kolom nog drie opties:

• hier kunnen de details van deze vraag worden bekeken;
• dit toont de interactie-analyse van de vraag - hier is meer informatie te vinden over de betreffende vraag, waaronder het aantal keer dat een antwoordoptie is gekozen en verschillende statistische waarden. Ook is het mogelijk om vanuit hier het antwoordmodel aan te passen. Hieronder is een voorbeeldweergave te zien.
• hiermee kan een opmerking over de vraag verstuurd worden naar de auteur uit de beheeromgeving.

Opmerkingen

Als er opmerkingen over vragen gemaakt zijn door kandidaten tijdens de toetsafname, dan wordt er een extra kolom toegevoegd aan dit overzicht. Het tabblad 'Opmerkingen' bevat alle opmerkingen die gemaakt zijn door kandidaten tijdens de toetsafname of het inzagemoment.

Een kandidaat kan tijdens een toets 1 opmerking per vraag plaatsen. Een begeleider kan deze opmerking 1 keer beantwoorden. Daarna kan er geen communicatie meer plaatsvinden via Remindo.

De opmerkingen kunnen worden gefilterd op vraag, gebruikersgroep, specifiek inzagemoment en status. Een opmerking kan verschillende statussen hebben, deze worden hieronder toegelicht:

• Open Deze opmerking staat nog open en is nog niet in behandeling genomen.
• Gelezen De kandidaat heeft het antwoord op de opmerking gelezen.
• Beantwoord De begeleider heeft de opmerking beantwoord, maar de kandidaat heeft deze nog niet gemarkeerd als gelezen.
• Afgesloten De opmerking is gesloten, zonder een reactie te geven.

In het overzicht staan aan de rechterkant knoppen om te reageren op een opmerking, deze te bewerken of af te sluiten. Er kan ook rechtstreeks naar de details van het resultaat worden gegaan.

Acties per overzicht

Onderaan de pagina zijn verschillende acties beschikbaar voor export van bestanden. 

Acties bij tabblad 'Overzicht'

De volgende acties zijn beschikbaar:

• Exporteer naar PDF: dit geeft de mogelijkheid om specifieke onderdelen van het resultaat weg te laten. Het PDF-bestand kan zo dus meer op maat gemaakt worden.
• Exporteer naar Excel: Met deze optie kan er niets aangepast worden en zal na een korte wachttijd vanzelf een download in de browser verschijnen.
• Exporteer naar Osiris (werkblad of tekst): Deze export kan in combinatie met Osiris gebruikt worden.
• Download uploads als ZIP-bestand: met deze functie worden bestanden die door kandidaten geüpload zijn opgenomen in een gestructureerd ZIP-bestand.

Acties bij tabblad 'Details van het resultaat'

Bij tabblad 'Details van het resultaat' zijn andere acties te vinden. Deze zijn als volgt:

• Exporteer vraagscores naar Excel: hiermee worden alleen de vraagscores geëxporteerd.
• Exporteer ruwe gegevens naar Excel: met deze actie worden 26 soorten gegevens in het Excel bestand geplaatst. Gebruik dit om zo veel mogelijk gegevens van een resultaat in één document te downloaden.
• Exporteer naar JSON-bestand: er wordt een .JSON-bestand aangemaakt waar de gegevens in worden opgeslagen. Dit bestandsformaat kan in andere applicaties worden ingezet.

Acties bij tabblad 'Opmerkingen'

Bij tabblad 'Opmerkingen' zijn ook acties beschikbaar. Deze zijn als volgt:

• Beantwoord de opmerkingen: hiermee worden alle geselecteerde opmerkingen in één keer beantwoord. Het is niet mogelijk om een antwoord te geven op een opmerking die al eerder beantwoord is.
• Sluit opmerking(en): met deze actie worden de geselecteerde opmerkingen gesloten zonder een opmerking te plaatsen.
• Heropen opmerking(en): via deze actie kan een gesloten opmerking weer worden heropend om alsnog te beantwoorden.
• Exporteer naar Excel: hiermee worden alle gegeven m.b.t. de opmerkingen naar een Excel bestand geëxporteerd.

Let op!

Wanneer een toets is afgebroken zonder een cijfer te berekenen dan zal dit resultaat ook niet meegenomen worden in de verschillende analyses. Dit is te herkennen aan de opmerking op het tabblad 'Analyseer vragen' dat niet alle antwoorden worden gebruikt in de analyse.