De kwaliteit van onze vragen, gemeten
Een oefenplatform is zoveel waard als zijn vragen. In plaats van dat alleen te beweren, publiceert deze pagina wat we in onze vragenbank meten: de fout die we hebben gevonden, hoe we die hebben verbeterd, de permanente controle die voorkomt dat ze terugkeert, en wat nog niet op peil is.
Foto: Christin Hume, Unsplash
Elk cijfer op deze pagina komt uit een gedateerde interne meting; de datum van de laatste controle staat onderaan.
Waarom we onze metingen publiceren
Wie een cijfer publiceert, moet het ook juist houden. Precies daarom doen we het. Wie zich voorbereidt op een selectief vergelijkend onderzoek, heeft er recht op te weten waarmee hij oefent, en een gepubliceerde indicator met datum zegt meer dan welk bijvoeglijk naamwoord ook.
Voor zover wij weten, publiceert geen enkel concurrerend platform een gemeten kwaliteitsindicator voor zijn vragenbank. Wij tonen liever de onze, met de zwakke punten erbij.
De lengtebias van de antwoordopties, gemeten en verbeterd
Een klassieke fout bij meerkeuzevragen, beschreven in het onderzoek naar het opstellen van toetsvragen: als het juiste antwoord uitgebreider is dan de foute, levert het stelselmatig aankruisen van de langste optie punten op zonder enige kennis. We hebben gemeten wat die strategie opleverde op onze Engelse vragen, test per test, en daarna de afleiders van 690 bronvragen herschreven en alles regel per regel nagelezen.
| Test | Voor | Na | Gokkans |
|---|---|---|---|
| Digitale vaardigheden | 86,5 % | 26,9 % | 25 % |
| Verbaal redeneren | 68,5 % | 29,3 % | 25 % |
| EU-kennis | 64,7 % | 30,2 % | 25 % |
Numeriek redeneren, waarvan de antwoordopties getallen zijn, had deze bias niet. Restwaarde gemeten op 2 augustus 2026 in de 8 hoofdtalen: van 22,0 % tot 31,9 % naargelang de combinatie van taal en test, over 44 gemeten combinaties.
Een permanente waarborg, geen eenmalige verbetering
Een verbetering zonder controle gaat verloren bij de volgende lading nieuwe inhoud. Daarom meet een automatische controle in de continue integratie de lengtebias elke week, voor elke combinatie van taal en test in de 8 hoofdtalen. Haalt de strategie van het langste antwoord meer dan 35 % (bij puur gokken is dat 25 %), dan wordt de controle rood en blokkeert ze: de drempel is zo gekalibreerd dat een echte fout van statistische ruis te onderscheiden is.
Dezelfde continue controle bewaakt nog andere vaste regels voor de inhoud: de acht interfacetalen bevatten dezelfde teksten, de testparameters stemmen overeen met de officiële database, en geen enkele FAQ-vraag staat op twee pagina's.
Wat nog niet op niveau is
Wie metingen publiceert, moet ook publiceren wat ze aan het licht brengen. Stand van zaken op 4 augustus 2026:
- De 10 secundaire talen van de vragenbank hebben nog de oorspronkelijke korte afleiders: de biascorrectie geldt voorlopig alleen voor de 8 hoofdtalen.
- Enkele gepubliceerde Franse vragen bevatten nog een toelichting in het Engels; de opschoning is gepland.
- Het verbeteren van de inhoud is doorlopend werk: meldingen van gebruikers (de knop “melden” onder elke vraag) komen in een wachtrij voor herziening terecht.
Onze schrijfregels
Eenmalige verbeteringen volstaan niet zonder schrijfregels. Deze gelden voor elke nieuwe vraag:
- Antwoordopties van ongeveer gelijke lengte binnen een vraag: de klassieke regel voor het opstellen van toetsvragen (taxonomie van Haladyna en Downing, 1989).
- Elke officiële bewering wordt vóór publicatie aan de primaire bron getoetst; een citaat dat niet te controleren is, wordt geschrapt, niet gepubliceerd.
- Afleiders waar u iets van leert: foute antwoorden beschrijven verwante situaties die men makkelijk verwart, geen absurditeiten.
- De testparameters op de site komen uit de database van de officiële aankondigingen, nooit uit overgenomen waarden.