Ce să ignorați pentru a înțelege scorurile testului copilului dumneavoastră

Acum că s-a terminat prima lună de școală, părinții se pot pregăti pentru următoarea etapă a anului școlar - în curând vor primi rapoarte despre testele de stat pe care le-au făcut copiii lor anul trecut.

Estimările mele arată că aproximativ 26 de milioane de elevi din școlile publice au susținut teste la nivel național la citire și matematică anul trecut. Mulți dintre ei au susținut, de asemenea, teste la nivel național în domeniul științei. Aceste teste oferă părinților informații importante despre cât de bine se descurcă copiii lor la școală.

Cu toate acestea, cercetările mele arată, de asemenea, că atunci când părinții primesc raportul de scor al testului copilului lor, ar putea fi greu să separe informațiile importante de tâmpenii statistici.

Mai mult, este posibil ca rezultatele să nu le ofere măcar informații exacte despre creșterea academică a copilului lor.

Copilul dumneavoastră este „priceput”?

Legea nr. Copil lăsat în urmă, adoptată în 2002, impunea tuturor statelor să stabilească „standarde de nivel de realizare” în lectură și matematică pentru clasele trei până la opt și pentru o clasă în liceu, de obicei clasa a X-a sau a XI-a. Statele au fost, de asemenea, obligate să dezvolte teste pentru a măsura nivelul elevilor de "experiență" la fiecare test.


innerself abonare grafică


Noua lege federală adoptată în decembrie 2015, Actul pentru fiecare student reușește (ESSA), va continua această practică.

Drept urmare, rapoartele de testare pe care le primesc părinții clasifică copiii în niveluri de realizare precum „de bază” sau „competenți”. Fiecare stat decide cum se numesc aceste clasificări, dar cel puțin o categorie trebuie să semnifice „competență”.

Aceste categorii de niveluri de realizare sunt descrise în rapoartele punctajului testului, astfel încât aceste informații sunt ușor de înțeles de către părinți. De exemplu, mi se pare de ajutor în fiecare an să văd dacă fiii mei ajung la cunoștințe în fiecare domeniu.

Dar scorurile testelor copiilor într-un an dat și nivelul lor de realizare nu sunt singurele informații raportate în unele state. Un nou indice statistic, numit „percentilă de creștere a elevilor”, își găsește drumul în rapoarte trimis acasă părinților din 11 state. Douăzeci și șapte de state folosesc acest indice și pentru evaluarea cadrelor didactice.

Deși o măsură a „creșterii” sau progresului studenților sună ca o idee bună, percentilele de creștere ale studenților încă nu au fost susținute de cercetare. De fapt mai multe studii sugerează ei nu furnizați descrieri corecte a progresului elevilor și a eficacității profesorului.

Ce înseamnă?

Ce sunt exact „percentilele de creștere a studenților”?

Sunt indici propuși în 2008 de către Damian W. Betebenner, un statistician care a sugerat folosirea lor ca măsură descriptivă a „creșterea academică” a studenților de la un an școlar la următorul. Ideea a fost să descrie progresul elevilor în comparație cu colegii lor.

La fel ca și diagramele de creștere pe care pediatrii le folosesc pentru a descrie înălțimea și greutatea copiilor, percentilele de creștere ale elevilor variază de la un minim la unul la un nivel ridicat de 99. Cu toate acestea, calculul lor implică mult mai multe erori decât măsurarea fizică, cum ar fi înălțimea și greutatea. Cercetările noastre de la Universitatea din Massachusetts Amherst indică eroare substanțială în calculul lor.

Percentilele de creștere ale elevilor sunt derivate din scorurile testelor, care nu sunt descrieri perfect exacte ale competenței academice a studenților: scorurile testelor sunt influențate de mulți factori, cum ar fi întrebările adresate într-o anumită zi, temperamentul studenților, nivelul lor de implicare atunci când iau test sau doar metodele folosite pentru a-și înscrie răspunsurile.

Procentila de creștere a fiecărui student este calculată utilizând cel puțin două scoruri diferite ale testelor, de obicei la un an sau mai mult. Cele mai recente scoruri de testare ale unui student sunt apoi comparate cu cele mai recente scoruri de testare ale elevilor care au avut scoruri similare în anii precedenți. Aceasta este pentru a vedea care dintre acei studenți au avut scoruri mai mari sau mai mici anul acesta.

Cu toate acestea, problema este că fiecare dintre calcule prezintă o anumită eroare de măsurare. Alte calcule sunt doar compuse acestei erori. Atât de mult încât rezultatele ajung cu o eroare de două ori mai mare. Fără sofisticare statistică poate șterge această eroare.

Întrebarea este, de ce atât de multe state folosesc o măsură atât de nesigură?

Folosindu-l pentru responsabilitate

Utilizarea percentilelor de creștere a elevilor se datorează în parte dorinței de a vedea cât de mult învață elevii într-un anumit an și de a lega acest progres de sistemele de responsabilitate, cum ar fi evaluarea profesorilor.

În 2010, Concurs de finanțare Race-to-the-Top a invitat statele să vină cu modalități inovatoare de utilizare a scorurilor testelor pentru a evalua profesorii, ceea ce a pregătit calea pentru ca această nouă măsură a „creșterii” să fie aplicată rapid în multe state.

Cu toate acestea, utilizarea percentilelor de creștere a studenților a început înainte ca cercetările să fie efectuate cu privire la acuratețea lor. Abia acum există un corp de cercetare suficient pentru a le evalua și toate studiile indică aceeași concluzie - conțin o mulțime de erori.

În plus față de cercetările noastre de la Universitatea din Massachusetts Amherst, cercetări privind acuratețea percentilelor de creștere a studenților au fost efectuate de organizații non-profit din domeniul educației, cum ar fi WestEd, Serviciul de testare educațională și alte instituțiile de cercetare. Cercetători JR Lockwood și Katherine E. Castellano recent încheiat că „O bază substanțială de cercetare constată deja că estimările percentilei de creștere a elevilor pentru studenți individuali au erori mari”.

Cu toate acestea, multe state par să nu fie conștiente de aceste descoperiri ale cercetării. Massachusetts merge chiar până acolo clasificați copiii cu percentile de creștere mai puțin de 40 ca „creștere mai mică” și copii cu percentile de creștere mai mari de 60 ca „creștere mai mare”.

Măsurarea performanței profesorului

După cum am menționat mai devreme, 27 de state folosesc percentilele de creștere a elevilor pentru a clasifica profesorii ca „eficienți” sau „ineficienți”. Cercetările privind utilizarea percentilelor de creștere în acest scop indică faptul că ar putea subestimați performanța dintre cei mai eficienți profesori și supraestimează performanța dintre cei mai puțin eficienți profesori - exact opusul a ceea ce încearcă să facă aceste state cu sistemele lor de evaluare a profesorilor.

Un raport recent al WestEd a evaluat utilizarea percentilelor de creștere a elevilor pentru evaluarea profesorilor și încheiat „nu au atins un nivel de stabilitate” care ar fi necesar pentru astfel de decizii cu miză mare.

Să ne întoarcem la măsurile tradiționale

Cred că percentilele de creștere a elevilor ne-au făcut un pas înapoi în utilizarea testelor educaționale pentru a îmbunătăți învățarea elevilor.

Măsurile tradiționale ale performanței copiilor la testele educaționale, cum ar fi dacă sunt „competenți” într-un anumit an și scorurile lor efective, dau o idee bună despre cât de bine s-au comportat la matematică sau la citire într-un an anume.

Aceste rânduri tradiționale percentile sunt încă raportate la multe teste educaționale, la fel ca atunci când părinții eram la școală. Rangurile tradiționale percentile ne-au comparat cu un grup național sau de stat într-un anumit an, mai degrabă decât să ne compare cu modul în care ceilalți copii din națiune sau stat „au crescut” în diferite teste pe care le-au susținut în ani diferiți, așa cum încearcă să facă percentilele de creștere a studenților.

Având în vedere ceea ce știm acum despre percentilele de creștere a elevilor, sfatul meu către părinți este nu numai să-i ignore în rapoartele scorului testelor copiilor lor, ci și să contacteze departamentul de stat al educației și să întrebe de ce raportează o statistică atât de nesigură.

Dezvoltarea măsurilor cu privire la cât de mult au învățat elevii de-a lungul unui an este un obiectiv bun. Din păcate, percentilele de creștere a studenților nu fac o treabă bună de a măsura acest lucru.

Despre autor

Stephen Sireci, profesor de politică educațională, Universitatea din Massachusetts Amherst

Acest articol a fost publicat inițial Conversaţie. Citeste Articol original.

Cărți asemănătoare:

at InnerSelf Market și Amazon