Source: Basiswettenbestand
URL: BWBR0037590/2024-03-09_0/xml/BWBR0037590_2024-03-09_0.xml

Document:
Regeling van het College voor Toetsen en Examens van 30 november 2015, nummer CvTE-15.02159, houdende vaststelling van regels voor de omzetting van scores in cijfers bij centrale examens en de rekentoets in het voortgezet onderwijs (Regeling omzetting scores in cijfers centrale examens en rekentoets VO 2016)2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
  Regeling omzetting scores in cijfers VO20211816809-04-202115-03-2021CvTE-21.0044620211816809-04-202115-03-2021CvTE-21.0044610-04-2021
  
    
  Het College voor Toetsen en Examens,
  
    Gelet op artikel 2, tweede lid, aanhef en onderdeel e, en lid 2a van de Wet College voor toetsen en examens;
    Gezien de goedkeuring van de Staatsecretaris van Onderwijs, Cultuur en Wetenschap, gegeven op 19 januari 2016, nummer 868228;
  
  
    Besluit:
  
2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
    
      
  
    Artikel
    1
    centrale examens VO
  
  De omzetting van scores in cijfers bij centrale examens VO, bedoeld in artikel 2, tweede lid, onderdeel e, van de Wet College voor toetsen en examens geschiedt op de in de bijlage 1 bij deze regeling vastgestelde wijze.
2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
      
  
    Artikel
    2
    rekentoets VO
  
Vervallen20211816809-04-202115-03-2021CvTE-21.0044620211816809-04-202115-03-2021CvTE-21.0044610-04-2021
      
  
    Artikel
    3
    tijdelijke speelruimte centraal schriftelijk en praktisch examen
  
Vervallen2019932521-02-201926-11-2018CvTE-18.013212019932521-02-201926-11-2018CvTE-18.0132101-01-2020
      
  
    Artikel
    4
    inwerkingtreding
  
  Deze regeling treedt in werking met ingang van de eerste dag na de datum van uitgifte van de Staatscourant waarin zij wordt geplaatst.
2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
      
  
    Artikel
    5
    intrekking
  
  De Regeling omzetting scores in cijfers centrale examens en rekentoets VO 2015 van 9 februari 2015, wordt ingetrokken.
2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
      
  
    Artikel
    6
  
  Deze regeling wordt aangehaald als: Regeling omzetting scores in cijfers VO.
20211816809-04-202115-03-2021CvTE-21.0044620211816809-04-202115-03-2021CvTE-21.0044610-04-2021
    
    
  
    Deze regeling zal met de toelichting in de Staatscourant worden geplaatst.
  
  
    Het College voor Toetsen en Examens,
    de voorzitter,
    
      P.J.J.
      Hendrikse
    
  
2016481704-02-201630-11-2015CvTE-15.021592016481704-02-201630-11-2015CvTE-15.0215905-02-2016
    
  
    Bijlage
    1
    Wijze van omzetting van scores in cijfers bij centrale examens VO als bedoeld in artikel 1
  
  De instructies die het CvTE toepast om tot de N-termen te komen.
  
    
      1
      Uitgangspunt
    
    De normering van de centrale examens dient er zorg voor te dragen dat in opeenvolgende jaren aan kandidaten bij eenzelfde centraal examen (vak en schooltype/leerweg) dezelfde eisen worden gesteld. Omdat het technisch onmogelijk is onze examens van jaar op jaar precies even moeilijk te maken, zorgt de keuze van de normeringsterm (N-term) daarvoor. Het proces van normering is erop gericht, gegeven dit uitgangspunt, de juiste N-term te bepalen.
    In supplement I staan de formules die bij de omzetting van score naar cijfer worden gehanteerd.
    Voor ieder centraal examen stelt het College voor toetsen en examens (CvTE), zodra dat mogelijk is, referentiegegevens vast; een referentie-examen met een referentie-N-term en een referentiepopulatie met een referentie-gemiddeld cijfer en referentie-percentage onvoldoende.
    
      
        –
        Het referentie-examen met de referentie-N-term vormt, in combinatie met de inhoud van de syllabus, de prestatie-eis op het centraal examen.1De prestatie-eis is de prestatie die een leerling moet leveren om een voldoende op een centraal examen te halen en daarmee te laten zien dat de leerstof beschreven in de syllabus in voldoende mate wordt beheerst.Bij een nieuw examen zou het, bij gelijke vaardigheid, even moeilijk moeten zijn om hetzelfde cijfer te halen als op het referentie-examen. Het CvTE monitort of handhaven van de prestatie-eis op een centraal examen reëel en mogelijk is en stelt deze zo nodig bij.2Als blijkt dat het handhaven van de prestatie-eis niet meer mogelijk of reëel is, benadert het CvTE de Minister met een analyse waarin wordt onderbouwd dat de eisen niet meer te handhaven zijn en of wellicht maatregelen kunnen worden genomen (bijvoorbeeld in het onderwijs) waardoor de vaardigheid van de kandidaten weer in lijn komt met de eisen.
      
      
        –
        De referentiepopulatie is de groep examenkandidaten uit één of meerdere examenjaren. Het referentiegemiddeld cijfer geeft aan welk gemiddeld cijfer de referentiepopulatie gehaald zou hebben op het referentie-examen bij de referentie-N-term. De prestaties van nieuwe kandidaten kunnen vergeleken worden met die van de referentiepopulatie.
      
    
    Bij een stabiel vaardigheidsniveau wordt de N-term bij een nieuw examen zo gekozen dat het gemiddeld cijfer zo dicht mogelijk ligt bij het referentie-gemiddeld cijfer. In een periode waarin het vaardigheidsniveau stabiel is, kunnen de referentiegegevens gebaseerd worden op meerdere jaren en in een periode waarin het vaardigheidsniveau niet stabiel is, zullen de referentiegegevens gebaseerd zijn op het meest recente geschikte centraal examen.
  
  
    
      2
      Bepalen technische N-term
    
    Voor ieder centraal examen worden afnamegegevens verzameld; scores per item per kandidaat. Daarnaast wordt informatie verzameld over de moeilijkheidsgraad van dat examen in vergelijking met het referentie-examen. Daarvoor kan gebruik gemaakt worden van:
    
      
        −
        Pretest, posttest of anchor in package3Bij een pre- of posttest is de vergelijking gebaseerd op resultaten van leerlingen die onderdelen uit een examen en ankeropgaven hebben gemaakt. Bij anchor in package maken opgaven uit een eerder examenjaar deel uit van het huidige examen. De term package komt van de digitale examens waar de verschillende varianten van het examen tezamen package genoemd worden.
      
      
        −
        Vergelijkende standaardbepalingen4Bij een vergelijkende standaardbepaling is het oordeel over de moeilijkheidsgraad gebaseerd op een door een groep experts uitgevoerde vergelijking van de moeilijkheidsgraad van de twee examens.
        
          
            ○
            Uitgevoerd door de vaststellingscommissie van het CvTE
          
          
            ○
            uitgevoerd door een groep experts onder leiding van Stichting Cito
          
          
            ○
            uitgevoerd door correctoren van de staatsexamens
          
        
      
      
        −
        Methoden om vaardigheidswijziging in een cluster van vakken te schatten5Op basis van de waargenomen vaardigheidsontwikkeling op examens met een pretest, posttest, anchor in package of standaardbepaling, wordt de vaardigheidsontwikkeling geschat voor vergelijkbare vakken zonder dergelijke equivaleringsmethoden.
      
      
        −
        Docentenoordeel6Examendocenten wordt gevraagd de moeilijkheidsgraad van het door hen nagekeken examen te vergelijken met een examen uit een eerder examenjaar.
      
      
        −
        Historische N-termen7De N-termen die de afgelopen jaren zijn vastgesteld op het betreffende centrale examen.
      
      
        −
        vergelijking tijdvak 2 met tijdvak 1 op basis van de resultaatverbetering van kandidaten die in het eerste tijdvak een onvoldoende hadden
      
    
    De N-term wordt bepaald aan de hand van een gewogen oordeel over alle beschikbare bronnen voor het betreffende centraal examen. Op deze manier wordt gezorgd dat een verandering in vaardigheidsniveau gesignaleerd wordt en de prestatie-eis gelijk blijft ook als de vaardigheid van de examenpopulatie verschilt van de referentiepopulatie8Dit is een groep kandidaten uit een of meer eerdere examenjaren, waarvan gegevens over het vaardigheidsniveau bekend zijn.. Het gemiddeld cijfer wordt hoger bij een toegenomen vaardigheidsniveau en lager bij een gedaald vaardigheidsniveau.
    
      
        2.1
        Voorlopige N-term in tijdvak 2
      
      Voor het examen in het tweede tijdvak geldt in beginsel de N-term van het eerste tijdvak. Aan de hand van verzamelde informatie over de moeilijkheidsgraad van het examen in het tweede tijdvak in vergelijking met het examen in het eerste tijdvak, wordt nagegaan of deze N-term zou leiden tot hogere eisen aan de kandidaat dan in het eerste tijdvak. Als dat het geval is, wordt de N-term zo vastgesteld dat de eisen gelijk zijn.
    
    
      
        2.2
        Centraal examen met een nieuw examenprogramma
      
      Bij de normering van een examen met een nieuw examenprogramma kan vaak geen vergelijking gemaakt worden met een referentie-examen. In dat geval kan gebruik gemaakt worden van niet-vergelijkende standaardbepalingsmethoden.
      In geval van een pilot kan een examen op basis van het nieuwe programma (het pilotexamen) gelijktijdig worden afgenomen met een examen op basis van het oude programma (het reguliere examen). Als de oude en nieuwe stof elkaar deels overlappen en de overlap eenzelfde positie in het programma inneemt, wordt op grond van de resultaten van de kandidaten op de vragen over de overlappende stof de vaardigheid van de kandidaten bepaald. Deze informatie kan gebruikt worden om de moeilijkheidsgraad van de vragen over de niet-overlappende stof en vervolgens het gehele examen te bepalen.
    
  
  
    
      3
      Compensatie voor fouten of onvolkomenheden via de N-term
    
    Als een examen een onvolkomenheid bevat die kandidaten aanwijsbaar kan benadelen, krijgen correctoren nadere instructies door een aanvulling op het correctievoorschrift. De aanvulling kan inhouden dat alle punten voor (een deel van) de vraag aan alle kandidaten moeten worden toegekend ongeacht of er wel of geen antwoord gegeven is, en ongeacht het gegeven antwoord. In dat geval is sprake van neutralisatie van (een deel van) de vraag. De vraag draagt de facto niet meer bij aan het behaalde resultaat op het centraal examen.
    Voor de nadelige gevolgen voor een kandidaat van een door het CvTE vastgestelde fout of onvolkomenheid in een examen of correctievoorschrift, compenseert het CvTE via de N-term indien:
    
      
        a.
        de fout of onvolkomenheid niet eerder is hersteld via een erratum op de opgaven of via een aanvulling op het correctievoorschrift, bedoeld in artikel 10 van de Regeling beoordelingsnormen en bijbehorende scores centraal examen VO;
      
      
        b.
        herstel via een aanvulling op het correctievoorschrift gelet op het tijdstip waarop de fout wordt vastgesteld naar het oordeel van het CvTE leidt tot een te groot risico op onjuistheden bij het vaststellen van scores op examens; en
      
      
        c.
        de N-term nog niet is vastgesteld.
      
    
    Deze correctieprocedure via de N-term geldt voor alle tijdvakken en vindt in voorkomende gevallen plaats op grond van de in supplement II bij deze bijlage opgenomen formules voor het compenseren voor een fout of onvolkomenheid. Hierdoor wordt voorkomen dat de score van een kandidaat in een te laag cijfer wordt omgezet.
  
  
    
      Supplement I. De formules voor de omzetting van score naar cijfer
    
    
      
        1
        Uitgangspunten
      
      Het systeem voor de omzetting van score naar cijfer is gebaseerd op de volgende vier uitgangspunten:
      
        
          1.
          Elk gescoord punt draagt altijd bij tot een hoger examencijfer (afronding daargelaten);
        
        
          2.
          Een score van 0% correspondeert altijd met examencijfer 1,0;
        
        
          3.
          Een score van 100% correspondeert altijd met examencijfer 10,0;
        
        
          4.
          Over een zo breed mogelijk centraal interval van de scoreschaal is er (afronding daargelaten) sprake van een evenredige stijging van score- en cijferpunten die onafhankelijk is van de normering.
        
      
      Hierbij wordt onder de score verstaan: de zuivere score, dus uitsluitend de punten die aan de kandidaat zijn toegekend voor goede antwoordelementen.
    
    
      
        2
        Het normeringsvoorschrift
      
      Het normeringsvoorschrift bestaat uit twee onderdelen:
      
        
          −
          de hoofdrelatie: de formule die, voor de overgrote meerderheid van de kandidaten, het berekeningsvoorschrift geeft voor het omzetten van score naar cijfer;
        
        
          −
          vier grensrelaties: vier formules die (bij andere N-termen dan 1,0) voorkomen dat kandidaten met zeer lage of zeer hoge scores een cijfer zouden krijgen dat in strijd is met bovengenoemde vier uitgangspunten.
        
      
    
    
      
        3
        De hoofdrelatie
      
      De hoofdrelatie geeft aldus het examencijfer als functie van de score:
      C = 9,0 * (S/L) + N (1)
      waarin:
      C = het cijfer voor het centraal examen.
      S = de score, dat wil zeggen de zuivere aan de kandidaat toegekende score.
      L = de lengte van de scoreschaal, zoals vastgelegd in het correctievoorschrift;
      N = de normeringsterm, een getal met één decimaal liggend tussen de waarden: N = 0,0 en N = 2,09Incidenteel kan een N-term hoger dan 2,0 worden vastgesteld als dit gegeven de moeilijkheidsgraad van het examen nodig is om recht te doen aan de prestaties van de kandidaten., vast te stellen door het CvTE middels een normeringsbeslissing.
      Zijn zowel L als N bekend, dan leidt invullen van de score S direct tot het examencijfer C.
      De hoofdrelatie is gevisualiseerd in figuur 1:
      
        
        
          Figuur 1
        
      
    
    
      
        4
        De grensrelaties
      
      Als de normeringsterm groter of kleiner is dan 1,0 wordt niet automatisch voldaan aan de eerder genoemde vier uitgangspunten. Bij N-termen groter dan 1,0 zou een score van 0 een cijfer hoger dan 1,0 opleveren en de maximale score hoger dan 10,0. Het omgekeerde gebeurt bij N-termen kleiner dan 1,0. Hiermee is niet voldaan aan de uitgangspunten 2 en 3.
      Dit is in beeld gebracht in figuur 2:
      
        
        
          Figuur 2
        
      
      Dit wordt opgelost door middel van een systeem van zogeheten grensrelaties. Het principe van grensrelaties is gevisualiseerd in figuur 3.
      
        
        
          Figuur 3
        
      
      Samen vormen de vier lijnstukken 2a, 2b, 3a en 3b een gebied waarbinnen alle toegestane score-cijfercombinaties moeten liggen. Dreigt bij toepassing van de hoofdrelatie – formule (1) – een score-cijfercombinatie buiten deze grenzen te vallen, dan moet voor de desbetreffende score dat cijfer vervangen worden door het cijfer berekend met de corresponderende grensrelatie.
      De grensrelaties worden gevormd door de volgende vier formules:
      C = 1,0 + S* (9/L)*2 (2a)
      C = 10,0 – (L-S)* (9/L) * 0,5 (2b)
      C = 1,0 + S* (9/L)* 0,5 (3a)
      C = 10,0 – (L-S)*(9/L)*2 (3b)
      Bij N &gt; 1,0 geldt voor de laagste scores de formule (2a) en voor de hoogste scores de formule (2b).
      In figuur 4 is dit gevisualiseerd.
      
        
        
          Figuur 4
        
      
      Bij N &lt; 1,0 geldt voor de laagste scores de formule (3a) en voor de hoogste scores de formule (3b).
      In figuur 5 is dit gevisualiseerd.
      
        
        
          Figuur 5
        
      
    
    
      
        5
        Samenvattend
      
      Samenvattend ziet het er als volgt uit:
      Bij een waarde voor de normeringsterm van N = 1,0 treedt het systeem van grensrelaties niet in werking en resulteert een score-cijfertransformatie die grafisch wordt gerepresenteerd door de rechte lijn van Fig.1, de lijn die in Fig. 6 is gelabeld met: ‘N=1,0’.
      Bij alle andere waarden van N zijn de grensrelaties wel van belang. In figuur 6 zijn als voorbeelden de twee gevallen in beeld gebracht die respectievelijk corresponderen met N = 2,0 en N = 0,0. Deze leveren als score-cijfertransformaties de twee dubbel-geknikte lijnen op (gelabeld met ‘N=2,0’ en ‘N=0,0’).
      
        
        
          Figuur 6
        
      
    
  
  
    
      Supplement II. De formules voor het compenseren voor een fout of onvolkomenheid
    
    De N-term die zou zijn vastgesteld als de desbetreffende fout of onvolkomenheid in een examen of correctievoorschrift niet door het CvTE was vastgesteld, wordt verhoogd met 9 * Pvrg * Mvrg / L, waarbij deze uitkomst wordt afgerond op één decimaal.
    In deze formule staat Pvrg voor de P-waarde van de onvolkomen vraag en Mvrg voor de maximaal haalbare score op deze vraag. Een P-waarde van 0,63 betekent dat de kandidaten gemiddeld 63% van Mvrg behaald hebben. L staat voor de lengte van de scoreschaal ofwel de maximaal haalbare score op het gehele examen.
    Het uitgangspunt bij deze werkwijze is dat de kandidaat die geen punten heeft kunnen scoren op de onvolkomen vraag, voldoende wordt gecompenseerd om geen nadeel te ondervinden van de fout.
    Aan het derde tijdvak nemen zo weinig kandidaten deel dat de P-waarden geen relevante informatiebron vormen. De N-term die zonder de fout zou zijn vastgesteld wordt verhoogd met 9 * Mvrg / L. Deze compensatie is wellicht te hoog, maar zo wordt voorkomen dat kandidaten benadeeld worden door de fout.
  
2024655208-03-202409-02-2024CvTE-40.004382024655208-03-202409-02-2024CvTE-40.0043809-03-2024
    
  
    Bijlage
    2
    behorende bij artikel 2 van de Regeling omzetting scores in cijfers centrale examens en rekentoets VO 2016, van 30 november 2015, nummer CvTE-15.02159
  
Vervallen20211816809-04-202115-03-2021CvTE-21.0044620211816809-04-202115-03-2021CvTE-21.0044610-04-2021
    
  
    Bijlage
    3
    behorende bij artikel 3 van de Regeling omzetting scores in cijfers centrale examens en rekentoets VO 2016, van 30 november 2015, nummer CvTE-15.02159
  
Vervallen20181603721-03-201821-12-2017CvTE-17.0167420181603721-03-201821-12-2017CvTE-17.0167401-04-2018
  
2019932521-02-201926-11-2018CvTE-18.013212019932521-02-201926-11-2018CvTE-18.0132122-02-2019