Unfortunately this workshop will be cancelled due to unexpected circumstances. We are looking for a new date for this workshop in the nearby future.

Exam analysis, marking and grading with TestVision

TestVision is the VU workhorse for designing and delivering digital exams. However, an important part of the assessment cycle is analysing, interpreting and evaluating the quality and results of these exams. And to turn exam-scores into grades using a cut-off score.

TestVision has a number of functions to perform this analysis, for closed questions (multiple choice) and open ended questions. It is important that every examiner knows this process in order to ensure a valid and transparent process for students. Important key indicators are exam validity, reliability (alfa), difficulty, item difficulty (p-value), item discrimination (rir-values), distractor functioning (a-values), scores, score-to-grade, cut-off score setting methods.

In this session, Anja de Koning MSc., assessment expert of the Faculty of Behavioral and Movement Sciences, takes the participants through the steps to perform this analysis and the TestVision functions involved. After the session you have acquired an overview of the steps involved in doing this analysis in TestVision and information about typical desired values for the specific indicators and methods to deal with poor functioning items.

Nederlands:

Helaas gaat de workshop niet meer door wegens onvoorziene omstandigheden. Er wordt gezocht naar een moment om deze workshop spoedig in te halen.

Toetsanalyse, nakijken en cijfers geven met TestVision

TestVision is het werkpaard van de VU voor het ontwerpen en afnemen van digitale toetsen. Een belangrijk onderdeel van de beoordelingscyclus is echter het analyseren, interpreteren en evalueren van de kwaliteit en resultaten van deze toetsen. En het omzetten van toetsscores in cijfers met behulp van een cesuur (cut-off score).

TestVision heeft een aantal functies om deze analyse uit te voeren, zowel voor gesloten vragen (multiple choice) als open vragen. Het is belangrijk dat elke examinator dit proces kent om een valide en transparant proces voor de studenten te waarborgen. Belangrijke kengetallen zijn toetsvaliditeit, toetsbetrouwbaarheid (alfa), toets moeilijkheid, vraag moeilijkheid (p-waarde), vraag discriminatie (rir-waarden), afleiderkwaliteit (a-waarden), scores, scores-naar-cijfers, cesuurbepalingsmethoden.

In deze sessie neemt Anja de Koning MSc., toetsexpert van de Faculteit Gedrags- en Bewegingswetenschappen, de deelnemers mee door de stappen om deze analyse uit te voeren en de TestVision functies die daarbij komen kijken. Na de sessie heeft u een overzicht van de stappen die nodig zijn om deze analyse in TestVision uit te voeren en informatie over typische gewenste waarden voor de specifieke indicatoren en methoden om om te gaan met slecht functionerende toetsvragen.