Harmonizácia výsledkov NPS

Bol/a som na teste OSP/VŠP a moja varianta sa mi zdala ťažšia než varianta môjho suseda/mojej susedky. Nepríde mi to spravodlivé.

Testy v rámci NPS (Národné porovnávacie skúšky) sú zostavované tak, aby si boli náročnosťou čo najbližšie. Nie je však realisticky možné zaistiť, aby boli dva rôzne testy úplne rovnako náročné. Preto sú výsledky z NPS odovzdávané vo forme percentilu, a nie skóre. Uchádzači sú medzi varianty A a B rozdeľovaní náhodne, a prepočet na percentil tak umožňuje porovnať ich znalosti a zručnosti, aj keď sa varianty z hľadiska náročnosti mierne líšia.

Uvažujme hypotetickú situáciu: majme dve varianty testu, A a B. V každej z nich možno získať maximálne 50 bodov. Varianta A je o niečo ťažšia než varianta B. Uchádzač, ktorý by vo variante A získal 25 bodov, by mohol vo variante B získať s rovnakými znalosťami a zručnosťami napríklad 27 bodov, pretože varianta B je jednoduchšia. Ak by sa riešitelia variant A a B navzájom porovnávali pomocou získaného počtu bodov, nebolo by to spravodlivé. Body však môžeme previesť na percentil. Pri variante A by uchádzač získal napríklad percentil 50 – jeho znalosti a zručnosti by boli rovnaké alebo lepšie ako u polovice zvyšných riešiteľov. Pri variante B by tento uchádzač získal tiež percentil 50 – aj tu by jeho znalosti a zručnosti boli rovnaké alebo lepšie ako u polovice zvyšných riešiteľov. Výsledok v podobe percentilu už umožňuje spravodlivé porovnanie.

Ku ktorému termínu NPS mám ísť, aby som mal/a najväčšiu šancu na dobrý výsledok?

Nezáleží na tom, ku ktorému termínu pôjdete, pretože výsledky sú prepočítavané tak, aby boli porovnateľné naprieč všetkými termínmi daného roka. Nezáleží teda na tom, či budete skladať test v decembri alebo napríklad v marci.

Čo znamená, že sú výsledky „prepočítavané tak, aby boli porovnateľné naprieč termínmi“?

Aby boli výsledky porovnateľné, je potrebné pri ich výpočte ošetriť dve veci: rozdielne testy a rozdielne skupiny riešiteľov.

Čo sa týka rozdielnych testov: Žiadne dva testy nemôžu byť presne rovnako náročné. Napríklad test v decembri môže byť mierne jednoduchší alebo mierne náročnejší než test v marci, hoci tieto rozdiely bývajú malé. Preto sú výsledky odovzdávané vo forme percentilu, nie vo forme skóre (počtu bodov). Potom totiž nezáleží na tom, koľko máte presne bodov (tzn. aký náročný test ste riešili), ale koľko percent riešiteľov svojimi bodmi predbehnete.

Čo sa týka rozdielnych skupín riešiteľov: Pri rôznych termínoch môžu byť odlišné skupiny uchádzačov z hľadiska znalostí a zručností. V takom prípade možno percentily harmonizovať – prepočítať na jednotnú škálu, ktorá je platná pre celý školský rok, nie iba pre daný termín NPS. Harmonizovaný percentil umožňuje porovnať uchádzačov rôznych termínov NPS navzájom. Nezáleží potom, ku ktorému termínu NPS sa vydáte a či práve k tomu danému termínu dorazia uchádzači s vyššími alebo s nižšími znalosťami a zručnosťami.

Ako je možné porovnať uchádzačov rôznych termínov navzájom?

Harmonizácia, teda prepočet výsledkov na jednotnú škálu, prebieha s využitím tzv. panelového testu. Pred začatím školského roka prebehne testovanie, počas ktorého niekoľko stoviek uchádzačov vyrieši panelový test. Bloky úloh z panelového testu sa potom vkladajú do testov v jednotlivých termínoch NPS. Úlohám, ktoré sa nachádzajú ako v panelovom teste, tak v NPS, sa hovorí kotviace úlohy.

Môžeme sa potom pozrieť, ako riešili tie isté kotviace úlohy ľudia pri prvom termíne NPS a ľudia pri panelovom testovaní. Vďaka tomu možno porovnať znalosti a zručnosti riešiteľov NPS a riešiteľov panelového testu. To isté možno potom urobiť pre druhý a ďalší termín NPS.

Tento postup umožňuje porovnať znalosti a zručnosti riešiteľov každého termínu NPS s riešiteľmi panelového testu. Tým možno v dôsledku porovnať znalosti a zručnosti riešiteľov jednotlivých termínov NPS navzájom a prepočítať výsledky na jednotnú škálu.

Aké konkrétne metódy sa k harmonizácii využívajú?

Prvým krokom je vždy tzv. analýza odlišného fungovania úloh. Táto analýza slúži na to, aby sme overili, že sa kotviace úlohy (tzn. úlohy spoločné panelovému testu a NPS testu) "správajú" v oboch testoch rovnako. Môže sa totiž napríklad stať, že keď niektorá kotviaca úloha nasleduje v jednom teste po náročnej úlohe, tak vychádza v tomto teste ako ťažšia, pretože ju riešitelia častejšie preskakujú. Na harmonizáciu sa použijú iba tie kotviace úlohy, ktoré sa správajú v oboch prepájaných testoch rovnako. Samotná harmonizácia sa potom vykonáva pomocou zreťazenej ekvipercentilovej metódy.