Întoarcerea examenului: în spatele algoritmului care a declanșat haosul notelor de nivel A
„Semințele dezastrului politicii” au fost semănate în scrisoarea trimisă de Gavin Williamson în timp ce blocarea a fost anunțată în martie
„Semințele dezastrului politicii” au fost semănate în scrisoarea trimisă de Gavin Williamson în timp ce blocarea a fost anunțată în martie
Chris J Ratcliffe/Getty Images
Pe măsură ce furia a izbucnit în urma eliberării notelor A-level săptămâna trecută, premierul Boris Johnson a insistat că rezultatele au fost robuste, bune și de încredere pentru angajatori.
Dar doar câteva zile mai târziu, după retragerea bruscă de către Ofqual a criteriilor de atragere a notelor, guvernul a fost forțat să facă o întoarcere jenantă, rezultatele urmând să se bazeze acum pe predicțiile profesorilor și nu pe cele ale unui algoritm controversat.
Sistemul automatizat a fost folosit în încercarea de a evita ceea ce secretarul pentru Educație Gavin Williamson a descris ca fiind o inflație rampantă a notelor pe fondul pandemiei de coronavirus și al examenelor anulate. Dar cine a venit cu algoritmul, care ar putea ajunge să-l coste pe Williamson slujba de cabinet?
Circumstanțe fără precedent
Semințele dezastrului politicii au fost semănate în ziua în care a intrat în vigoare blocarea, când Williamson a avertizat într-o scrisoare către Ofqual că evitarea inflației gradelor este o prioritate. Timpurile rapoarte.
Ofqual ar trebui să se asigure, în măsura în care este posibil, că standardele de calificare sunt menținute și distribuția notelor urmează un profil similar cu cel din anii precedenți, a declarat Williamson autorității de reglementare a examenelor.
Cu alte cuvinte, spune ziarul, în ciuda faptului că elevii nu dau examene, guvernul a vrut să trateze clasa anului 2020 ca cea din anii precedenți. Nivelurile A au fost tratate ca „standardul de aur” al sistemului de învățământ și nu trebuiau devalorizate.
Dar, în sarcina autorității de reglementare a examenelor să încheie o poliță de asigurare sub forma algoritmului său nefast, această dorință de a limita inflația de calificare a mers prea departe, adaugă BBC .
Ce a mers prost?
La solicitarea secretarului de educație, statisticienii autorității de reglementare au pornitconceperea unui sistem de distribuire a notelorasta nu a permis ca rezultatele examenelor să crească față de anii precedenți, explică Jo-Anne Baird, profesor de evaluare educațională la Universitatea Oxford și membru al comitetului consultativ al Ofqual.
Problema a fost că, în cazul clasei de Covid, preocuparea pentru menținerea standardelor a venit la un preț prea mare, potrivit BBC.
Un total de 39% dintre rezultatele A-level publicate joia trecută au fost retrogradate , iar elevii din zonele defavorizate au fost cel mai grav afectați în mod disproporționat, spune NS Tech , o divizie a New Statesman.
Algoritmul a prezis notele după ce a fost alimentat cu diverși biți de date.
Prima a fost nota prezisă a profesorului pentru fiecare elev în funcție de performanța lor în clasă și de examenele simulate, explică site-ul de știri. Dar acest lucru a fost considerat insuficient în sine, așa că profesorii au fost rugați să clasifice fiecare elev de la cel mai mare la cel mai mic în ceea ce privește nota așteptată.
Școlile s-au aruncat în sarcina de evaluare, adaugă The Times, șefii de departamente conducând întâlniri în care profesorii au susținut argumentele pentru elevii lor.
Dar, spune ziarul, a existat o captură în sistemul Ofqual. A raport publicat de autoritatea de reglementare săptămâna trecută, a dezvăluit că notele atribuite de profesor au primit prioritate doar la clasele cu mai puțin de 15 elevi - un sistem care a favorizat școlile private cu clase mai mici.
În schimb, pentru elevii din școlile mai mari, notele au fost mult mai influențate de performanța istorică a școlii și de clasamentul profesorului lor decât notele prezise, adaugă NS Tech.
Această discrepanță explică numărul disproporționat de studenți din școli care de obicei nu trimit elevi la universitățile de top din Marea Britanie, care și-au văzut notele anticipate retrogradate în mod agresiv.
A fost posibil un sistem mai echitabil?
Conform Timpurile Editorul științific Tom Whipple, a face un algoritm corect este ca și cum ai încerca să desfierbe un ou - adică imposibil.
Problema, scrie Whipple, este că atunci când oamenii extrapolează din datele populației pentru a face predicții despre indivizi... poți ajunge să faci tot felul de greșeli contraintuitive, surprinzătoare și uneori absurde.
Acesta este ceea ce a mers prost cu un algoritm bazat atât de mult pe rezultatele istorice ale unei școli, susține el. În mod clar, acest lucru va fi incorect pentru copiii excepționali din școlile excepționale, în timp ce, dimpotrivă, va fi excesiv de amabil cu cei neexcepționali din școlile excepționale.
Sam Freedman, CEO al organizației neguvernamentale Education Partnerships Group, este de acord cu acest verdict. Algoritmul avea să-i lovească în mod inevitabil pe studenții care se aflau în fruntea distribuției în școli care nu au avut mulți performanțe în trecut, el tweet-uri .
Dar, adaugă Freedman, decizia guvernului de a folosi doar notele prezise ale profesorilor este, de asemenea, nedreaptă pentru elevii din școli care au calificat cu prudență, nedreaptă pentru cohortele trecute/viitoare și creează o loterie pentru locurile universitare.
Iar întoarcerea poate veni prea târziu pentru unii studenți, multe universități spunând că cursurile pentru anul universitar următor sunt deja pline.
În ceea ce privește algoritmul, statisticile sunt prin definiție o modalitate de a reprezenta multe numere în mai puține numere, spune Whipple.
Acest lucru este extrem de util, dar trebuie să știm ce înseamnă: uitarea de individ.
