Toetsing

Voor toetsvormen die meer beoordelend en summatief van aard zijn, biedt een toetscyclus inzicht in inzet van ICT bij ondersteuning van (deel-)processen. Daarbij gaat het niet alleen over het digitaal afnemen of inleveren van toetsen, maar ook over het digitaal ondersteunen van de gehele toetscyclus (zie afbeelding), zoals het beoordelen en analyseren.

Op de HAN worden centrale applicaties gebruikt die al deze processen ondersteunen, maar ook applicaties die een deel van het proces ondersteunen. De toetscyclus wordt ook gebruikt als kapstok voor centrale afspraken over toetsprocessen.

De opkomst van AI, en specifiek generatieve AI, verandert de manier waarop studenten leren en getoetst worden. Opleidingen dienen daarom kritisch naar hun toetsprogramma’s te kijken en waar nodig aanpassingen te maken. De toolkit 'AI-Bestendig Toetsen', ontwikkeld door het HAN Leernetwerk Toetsing, biedt opleidingen een praktische handreiking om hun toetsen tegen het licht te houden en de AI-bestendigheid ervan te analyseren.

Bekijk de toolkit: 'AI-bestendig Toetsen'

Gebruik toolkit
De toolkit bevat een overzichtelijke flowchart en aanvullende bijlagen, waarmee opleidingen inzicht krijgen in mogelijke risico’s van AI-gebruik bij toetsen en hoe hiermee om te gaan. Gebruik de toolkit om risico's te signaleren, te bepalen waar AI-bestendige aanpassingen mogelijk zijn, en om een stevig AI-bestendig toetsprogramma op te bouwen.

Academies hebben vaak ook academie-specifieke afspraken en soms ook eigen beleid over de inzet van ICT bij toetsprocessen. Deze geven inzicht in gemaakte keuzes, voorzieningen en ondersteuning, zodat je op toetsgebied niet zelf het wiel hoeft uit te vinden. Neem hiervoor contact op met (inloggen met je HAN-account) de Informatiecoördinator (IC-er) van jouw academie.

De HAN gebruikt de toetsapplicatie Ans voor centrale toetsprocessen van summatieve kennistoetsing. Daarnaast wordt Teleform-Contest gebruikt voor het nakijken van summatieve multiple choice toetsen. Meer informatie vind je op de pagina van ‘Project Digitaal toetsen’ (inloggen met je HAN-account).

De toetsapplicaties Ans en Teleform-Contest worden centraal ondersteund binnen de HAN en ingezet voor de digitale ondersteuning van (een deel van) de toetscyclus-stappen bij summatieve kennistoetsing. 

• Meer informatie over Ans en Teleform-Contest vind je in de Toolbox.
• Direct naar de E-learnsite van Ans en Schoolyear (inloggen met je HAN-account).

Hieronder vind je de richtlijnen voor veilig digitaal toetsen vanuit de examencommissies:

• Hanteer het keuzemodel veilige toetsafname van SURF.
• Leg zoveel mogelijk itembanken aan die voldoende groot zijn om verschillende toetsversies tegelijkertijd te kunnen afnemen.
• Zet voldoende surveillanten in om veilige toetsafname te controleren. Bij Bring Your Own Device (BYOD) met Schoolyear is dat één surveillant op een lokaal met 25 studenten, uitgaande van de schriftelijke toets opstelling.
• Stel gedragsregels op voor studenten (geen horloge en sieraden dragen, identificatieplicht, geen mobieltje toestaan, kladpapier inleveren aan het einde van de toets, etc.).
• Zorg dat de toetsprocessen ingericht zijn op beveiligd digitaal afnemen via BYOD met Schoolyear. Schoolyear zorgt voor een lockdownmodus waardoor alleen de toets full-screen op het scherm wordt geladen. Er komen dan tijdelijk geen meldingen meer binnen en het is niet mogelijk om externe bestanden en applicaties tijdens de toetsafname te openen.
  Let op! De uitrol van Schoolyear binnen de academies wordt projectmatig aangepakt. Mocht je meer informatie willen hebben, neem dan contact op met digitaletoetsing@han.nl voor meer informatie.
• Plan afnames met het oog op maximaal haalbare toetsafnames op beschikbare HAN-locaties. Stel je wil 600 studenten toetsen en het maximaal aantal beschikbare lokalen is 5. Plan dan afname cohorts in van 125 studenten per keer, uitgaande van 25 studenten in de klas. Bij deze casus moeten er dan vijf verschillende toetsversies beschikbaar zijn.

Met fraude tijdens toetsen worden vaak twee verschillende zaken bedoeld. Enerzijds kan er sprake zijn van identiteitsfraude. Hierbij neemt de student die de toets zou moeten maken niet zelf deel, maar iemand anders. Anderzijds het raadplegen van niet-toegestane bronnen (plagiaat) ofwel ‘afkijken’ via communicatie tussen studenten (bron Radboud Universiteit).

Om beide vormen van fraude, identiteitsfraude en ‘afkijken’, tegen te gaan tijdens het afnemen van digitale kennistoetsen, heeft de HAN de onderstaande beveiligingsmaatregelen ingericht:

• Tijdens de digitale toetsafname controleert de surveillant de identiteit van de student aan de hand van de identiteitskaart (o.a. HAN-pas) en controleert de naam van de student op het scherm tijdens de toetsafname.
• In de PC-toetslokalen van de HAN logt de student in op een afgeschermde toetsomgeving met een Windows afnameprofiel. Tijdens de toetsafname heeft de student alleen toegang tot de toetsapplicatie en toegestane hulpbronnen.
• Voor de toetsafname met BYOD (Bring Your Own Device) wordt de beveiligingssoftware van Schoolyear ingezet. De uitrol van Schoolyear binnen de academies wordt projectmatig aangepakt. Op dit moment doen we ervaring op met Schoolyear binnen een aantal academies, zodat we de processen rondom de toetsafname zo optimaal mogelijk kunnen inrichten.
  Klik hier voor meer informatie over Schoolyear.
• Om identiteitsfraude te voorkomen logt de student in met het HAN-account op de digitale toetsapplicatie. Het beleid binnen de HAN is erop gericht om de digitale toetsapplicaties aan te sluiten op SURFconext of Microsoft Azure AD voor zover dit technisch te realiseren is.

De beveiliging van de toetsomgeving en fraudepreventie zijn aspecten die belangrijk zijn bij het afnemen van digitale kennistoetsen. De fraudepreventie is erop gericht om het ‘afkijken’ tijdens het tentamen, identiteitsfraude en het raadplegen van niet-toegestane bronnen te voorkomen. Hieronder staan maatregelen die bevorderen dat het digitale tentamen ‘veilig’ wordt afgenomen. (bron: Universiteit Utrecht)

Beveiliging op toetsniveau

• Laat bij elke student de vragen en/of antwoordmogelijkheden verschijnen in een willekeurige volgorde.
• Bied elke student een andere toets aan. De toets wordt tijdens de toetsafname samengesteld door het ‘ad random’ selecteren van vragen uit een itembank. Een voorwaarde is dat de itembank voldoende en kwalitatief goede vragen bevat.
• Stel een tijdslimiet in voor de toets, zodat de studenten de tijd alleen kunnen gebruiken voor het maken van de toets.  
• Stel een pincode in voor de toets die door de surveillant tijdens de toetsafname wordt verstrekt.

Beveiliging tijdens de toetsafname

• Zet surveillanten in die goed getraind zijn in het houden van toezicht tijdens de toetsafname van digitale tentamens, zoals de controle van de identiteit van een student tijdens de toetsafname.
• De surveillant kijkt mee met het afsluiten van de toets tijdens de toetsafname om te voorkomen dat de student de toets buiten de toetsruimte kan afmaken.
• Laat de student in de toetsruimte inloggen op een afgeschermde toetsomgeving op een device van de instelling of de eigen laptop. Tijdens de toetsafname heeft de student alleen toegang tot de toetsapplicatie en toegestane hulpbronnen.
• Laat de (eigen) computer of laptop opstarten met beveiligingssoftware (b.v. secure browser/Schoolyear), zodat toegang tot het internet of andere programma’s niet mogelijk is.
• Log alle acties van de student tijdens de toetsafname, zodat deze achteraf te raadplegen zijn.

Bij een formatieve kennistoets beantwoordt een student gesloten of open kennis-, inzicht- of toepassingsvragen. De student krijgt daarna automatische of handmatig door een docent gegeven feedback in de vorm van een totaalscore of deelscores per onderwerp en/of kwalitatieve tekstuele feedback (per toets, of per deelonderwerp, per vraag of zelfs per gegeven (gekozen) antwoord per vraag).

Met deze feedback bereidt een student zich voor op een summatieve toets, maar de feedback kan de student ook inzicht geven in waar deze staat en wat de student nog nodig heeft om een volgende stap/doel te behalen. Docenten kunnen met analyses inzicht krijgen in waar studenten staan en kunnen daarmee gericht feedback en feedforward geven aan individuele en groepen studenten en kunnen hun onderwijs daarop aanpassen.

Binnen de HAN worden formatieve (kennis)toetsen steeds meer gebruikt, maar er is nog weinig HAN-beleid en kaders voor formatieve kennistoetsen en de digitale middelen die je daarvoor kunt inzetten. De toetscyclus zoals besproken in de introductie en een formatieve toetscyclus (HU) kan je helpen bij de inzet van formatieve kennistoetsen. 

Zoals aangegeven is er nog weinig beleid voor de inzet van formatieve kennistoetsapplicaties. Op dit moment biedt de HAN een aantal applicaties hiervoor, waarvan de keuze afhankelijk is van o.a. je doelen: snel een quiz en oefentoets klaarzetten óf met veel mogelijkheden een oefentoets ter voorbereiding van een summatieve toets klaarzetten en toetscyclus ondersteunen.

Neem daarbij altijd, voordat je voor de eerste keer gebruik maakt van een applicatie voor toetsing, eerst contact op met de Informatiecoördinator (IC-er) van je academie, die je kan inlichten over afspraken binnen je academie over de inzet van applicaties. 

• Direct naar Handin
• Instructievideo voor beoordelaars
• Klikkaarten zijn toegankelijk via de HANdin applicatie.
• Meer informatie in de Toolbox

Het programma Ouriginal is geïntegreerd in Handin en controleert of er mogelijk teksten van anderen zijn opgenomen in het werk. ​Het systeem zoekt naar eventuele overeenkomsten tussen het ingeleverde werk en de bronnen. Aan de hand van de Ouriginal-rapportage beoordeel je of er sprake is van plagiaat en onderneem je waar nodig actie.

Meer informatie over Ouriginal in de Toolbox.

Het HAN-DPF en de Inleverapp zijn niet meer in gebruik bij de HAN (respectievelijk sinds december 2021 en februari 2021). Ingeleverde producten en beoordelingen zijn gearchiveerd op de archiefserver en worden bewaard volgens de wettelijke termijn van maximaal 7 jaar. Voor elke academie heeft aan aantal medewerkers toegang tot deze archiefserver. Eerder ingeleverde producten en beoordeling kunnen opgevraagd worden via de decentraal beheerder van je opleiding of via Ask@han.nl.