Computer adaptieve Tests

aangezien kat-examens op een geheel andere manier worden afgenomen dan potlood-papieren examens, zullen ze zich moeilijker “voelen”. Kandidaten moeten zich geen zorgen maken over het bekwaamheidsniveau van een item op het examen omdat hun bekwaamheid op een andere manier wordt ‘gemeten’. Dit werkt door alle items op een standaard schaal te plaatsen om te bepalen waar de kandidaat binnen de schaal valt. Als gevolg daarvan moeten kandidaten alle items zo goed mogelijk beantwoorden. Laten we een voorbeeld gebruiken om dit uit te leggen:

stel dat een atleet van de middelbare school probeert deel uit te maken van het hoogspringen team van het atletiekteam. De coach, na vele jaren ervaring als middelbare school coach, weet dat om punten te scoren op een middelbare school track meet, zijn individuele springers moeten springen over een bar geplaatst op vier meter boven de grond. Dit is de” competentie ” standaard. Als hij springers betreedt die een meter kunnen springen, weet hij dat deze springers zelden-of ooit-punten zullen scoren voor zijn team tijdens een baanwedstrijd. Degenen die springen vier voet op de eerste dag van de try-outs, na training en coaching, kan niet alleen springen vier voet (het minimum), maar; later kan, door extra onderwijs, leren om vijf of meer voeten te springen. De coach weet dat het zijn tijd en moeite waard zal zijn om deze try-out jumpers naar grotere hoogten te coachen. Daarom, hij vertelt degenen die springen meer dan vier voet bij de try-outs dat ze lid zijn van het hoogspringen team (omdat ze hebben voldaan aan de instap-niveau of competentiestandaard).

omdat de coach de competentiestandaard kent, kan hij een try-out houden om te zien wie aan de instapcompetentie voldoet. De coach zal waarschijnlijk de lat op of in de buurt van 3 voet 6 inch voor de eerste sprong poging. Degenen die het maken over deze bar zal dan de vooruitgang naar misschien 3 voet 9 inch om hun vermogen te testen op die hoogte. Nadat een groep 3 voet 9 inches is gepasseerd zal de coach opnieuw de lat verhogen tot 4 voet en hebben de succesvolle jumpers proberen om het te wissen., Een slimme coach zal waarschijnlijk niet vertellen het team de benodigde hoogte, zodat hij het maximale vermogen van elke try-out jumper kan leren. Op de 4 voet niveau, de coach kan vinden dat zeven van de tien atleten duidelijk de bar. Hij zal dan de lat te verhogen tot 4 voet 3 inch en later tot 4 voet 6 inch. Hij zal de hoogte van de balk verhogen totdat hij het maximale individuele vermogen van elke try-out jumper bepaalt. Als hij vier slots in zijn team heeft, selecteert hij de top vier of vijf jumpers en begint het coachingsproces om hen te helpen nog grotere hoogten te bereiken. Op deze manier heeft de coach geleerd over het vermogen van de try-out jumpers op basis van een standaard schaal (voeten en inches). De coach stelt dan een standaard (4 voet) voor lidmaatschap van het team, op basis van zijn kennis van wat nodig is om punten te scoren op de baan voldoet (de competentiestandaard).

Hoe werkt een CAT-examen

bovenstaande hoogspringillustratie kan de manier beschrijven waarop een CAT-examen werkt. Elk item binnen een live item pool is gekalibreerd om de moeilijkheidsgraad te bepalen. Als elke kandidaat neemt een examen, de computer adaptieve test moet het bekwaamheidsniveau van de kandidaat te leren.

de test begint meestal met een item dat iets onder de passerende standaard ligt. Het item mag afkomstig zijn van elk vakgebied in het testplan:

• luchtweg, ademhaling & ventilatie
• Cardiologie & reanimatie
• Trauma
• Medisch/Verloskunde/Gynaecologie
• EMS-operaties

nadat de kandidaat een korte reeks punten correct krijgt, zal de computer kies items met een hogere bekwaamheid, misschien in de buurt van instapcompetentie. Deze items zullen ook worden genomen uit een verscheidenheid van inhoud gebieden van het testplan. Als de kandidaat de meeste vragen in deze reeks items correct beantwoordt, zal de computer nieuwe items kiezen die zich op een hoger bekwaamheidsniveau bevinden. Nogmaals, als de kandidaat veel van deze items correct beantwoordt, zal de computer de kandidaat opnieuw items van een nog hoger bekwaamheidsniveau presenteren. Uiteindelijk zal elke kandidaat zijn of haar maximale vaardigheidsniveau bereiken (en vragen verkeerd beantwoorden). De computer bepaalt dan of het individu boven de standaard (instapcompetentie) in deze inhoudsgebieden ligt, en het examen eindigt.

Een betrouwbaarheid van 95% is nodig om een CAT-examen te halen of niet te halen

De hoge achiever die in staat is om de meeste vragen correct te beantwoorden, zal merken dat de computer het examen beëindigt. Een kandidaat kan zich zorgen maken dat er iets mis is omdat het examen zo kort was, terwijl de computer in werkelijkheid kon vaststellen dat de kandidaat veel hoger sprong dan het standaardniveau—of ruim boven het bekwaamheidsniveau in een CAT-examen lag.

de computer stopt het examen wanneer 95% ervan overtuigd is dat de individuele kandidaat het bekwaamheidsniveau heeft bereikt, 95% ervan overtuigd is dat het individu het bekwaamheidsniveau niet kan bereiken, of de maximaal toegestane tijd heeft bereikt. De lengte van een kat examen is dus variabel. Soms kan een kandidaat een bekwaamheidsniveau aantonen in slechts 60 testitems. Soms, na 60 vragen, de kandidaat heeft aangetoond dicht bij instapcompetentie, maar de computer heeft niet vastgesteld binnen de 95% betrouwbaarheidsvereiste dat de kandidaat boven of onder de instapcompetentiestandaard. In gevallen waarin de computer niet 95% zeker is, blijft de test extra items leveren. Elk aanvullend testonderdeel geeft meer informatie om te bepalen of een kandidaat voldoet aan het instapniveau. Ongeacht de lengte van de test, zullen items nog steeds variëren over de inhoud domein (luchtweg/oxygenatie/ventilatie, Cardiologie, Medisch, Trauma, en operaties).

wanneer (en indien) de kandidaat de maximale lengte van een examen bereikt, zal de bekwaamheidsschatting van die kandidaat het meest nauwkeurig zijn. Met behulp van de hoogspringer voorbeeld, de computer in staat zal zijn om te bepalen wie springen 3 voet 11 inch van degenen die springen 4 voet 1 inch. Degenen die 4 voet meer keer dan ze missen 4 voet zal passeren. Degenen die springen 3 voet 11 inch, maar niet duidelijk 4 voet genoeg keer zal falen en zijn verplicht om de test te herhalen. Sommige kandidaten zullen niet eens in staat zijn om in de buurt van vier voet te springen. Deze kandidaten bevinden zich onder of ver onder het instapniveau. Ook dit kan vrij snel worden vastgesteld, en deze kandidaten kunnen hun examen snel worden beëindigd. Wanneer het examen in de buurt van 70 vragen (voor EMT ‘s, of 90 voor EMR’ s) ligt en een kandidaat faalt, heeft hij of zij met 95% vertrouwen aangetoond dat hij of zij het instapniveau niet kan bereiken.

bij een CAT-examen is het belangrijk dat de kandidaat elke vraag zo goed mogelijk moet beantwoorden. Het CAT-examen biedt de kandidaat meer dan voldoende gelegenheid om hun bekwaamheid aan te tonen en is in staat om precisie, efficiëntie en vertrouwen te bieden dat een succesvolle kandidaat voldoet aan de definitie van instapcompetentie en een nationaal gecertificeerde EMS-aanbieder kan zijn.