GRE: Fysiker säger Grad School Entrance Exam är en dålig förutsägare för framgång

För de flesta forskarstuderande börjar vägen till en avancerad nivå i ett litet ljust rum framför en dataskärm, och tar ytterligare en runda standardiserade tester. När de frantiskt skriver en uppsats som är avsedd att graderas av en dator, kanske de undrar: "Hur går det här för att hjälpa mig att gå igenom skolan?" En studie publicerad onsdag i Science Advances är här för att validera sin inre ångest. GRE är inte bara ett dåligt sätt att bestämma skolskolans framgång; det kan också göra mer skada än bra.

Leds av Casey Miller, Ph.D., en experimentell fysiker vid Rochester Institute of Technology, fokuserar denna studie specifikt på fysikutbildningsprogram, men Miller tror att hans resultat sannolikt skulle gälla för en mängd olika områden. När han analyserade anonyma GRE-poäng från 27 universitetskandidatprogram runt om i landet fann han att de misslyckades med att förutsäga om de faktiskt hamnade i examen i slutet av dagen.

Detta är redan ganska känt bland fysiker, säger han, men hans studie lägger till hårda data för att visa att både det allmänna GRE-testet och det fysikspecifika testet inte ett säkert sätt att berätta för vem som skulle göra en bra fysiker.

"Fysiker är en fläckig gäng. De ändrar inte typiskt hur de gör saker utan data, säger han Omvänd. "Så det faktum att vi kan lägga data till detta specifikt i fysiksamhället kommer att hjälpa fakulteten att se användbarheten av dessa verktyg. Så de ser förhoppningsvis att testen inte förutsätter Ph.D. färdigställande eller betyg mycket bra."

Första gången jag tog GRE Adv Physics testet gjorde jag 7: e percentilen. 2: a gången fick jag 11: e. Jag har sedan gjort doktorsexamen i röntgenfysik, arbetat på NIST och NASA och är stolt över att ha löst stora tekniska utmaningar vid design och testning av James Webb Space Telescope.

- Scott Rohrbach (@scottrohrbach) 30 april 2018

Saker som GRE inte kan förutsäga

I studien analyserade Miller poäng från tre olika GRE-testavsnitt: GRE-V (verbal), GRE-Q (matematik) och GRE-P (det fysikspecifika ämnesprovet). Han jämförde dessa poäng till slutförandet och betygen för studenter i fysik Ph.D. program i fyra överlappande grupper: studenter från USA, studenter från utlandet, kvinnliga studenter från USA och manliga studenter från USA. Över alla fyra grupperna, GRE-P * misslyckades med att förutsäga om eleverna skulle avsluta sitt program, liksom GRE-V-avdelningen.

Det fanns en liten glimt av hoppet på GREs matteavdelning, som visade viss korrelation med färdighetsgraden när resultaten från amerikanska kvinnliga studenter och amerikanska manliga studenter kombinerades. Det var emellertid inte en bra förutsägelse när den tillämpas på studenter som helhet och endast studenter från utanför USA.

Trots det ser inte sakerna särskilt bra ut för GRE i detta dokument - speciellt den fysikspecifika GRE. Studenter som gjorde mål Nedan den 50: e percentilen hade liknande grad-slutförandeskap till dem som scorer i toppprocentilerna, påpekar Miller. Det, tillägger han, är en viktig observation eftersom ett antal fysik Ph.D-program har hårda cutoffs. Ungefär 25 procent av fysikprogrammen annonserar att en GRE-poäng ska ligga över 55: e percentilen för att en sökande får skott vid upptagande.

Saker GRE Kan Förutspå

Kort sagt, GRE-poäng misslyckas med att förutsäga hur bra en fysiker som en person kan visa sig vara. Istället speglar de demografiska mönster (http://www.nature.com/naturejobs/science/articles/10.1038/nj7504-303a) som är lika värdelösa för att förutsäga en persons framgång i grundskolan. Det finns ingen statistiskt signifikant samband mellan kön och en persons sannolikhet att avsluta en doktorsavhandling. i fysik, säger Miller, men där är ett betydande könsskillnad på GRE-P-poängen: Medianvärdet för en kvinna i USA är 580 och medianvärdet för en man i USA är 680. Implikationen är att båda grupperna skulle ha en liknande chans att utmärka sig på Coursework krävs för att bli fysiker, men går genom sina testresultat, står en bättre skott vid antagning än den andra.

Viktigt är att ingen av dessa poäng kanske skulle vara tillräckligt bra för att få endera sökanden till uppskattningsvis 25 procent av programmen - även om Miller kunde visa betydande luckor genom kön, ras och etnicitet hos vem som når den poängen och inte. Och det tar inte ens hänsyn till inkomst mönster förknippade med GRE-testresultat.

Den stora takeawayen, säger MIller, är att GRE inte säger tillskottskommittéer någonting om vad som gör en bra fysiker - och kan vara delvis ansvarig för fysikens abysmal mångfaldsstatistik. Endast 5 procent av fysik Ph.D. grader som tilldelas årligen går till underrepresenterade minoritetsgrupper, och endast 20 procent går till kvinnor. Miller s resultat tyder på att det finns många människor i båda dessa grupper vars testresultat sätter dem solidt i den avvisade högen innan de ens har chansen att prova sin styrka.

"Vi är ganska bra att välja vem som har det bra i kursen, men de färdigheter som krävs för att lyckas i kurser är inte samma kompetens som är viktiga för att vara en framgångsrik forskningsfysiker, säger Miller. "Förflyttning framåt, vi försöker fokusera på de saker vi vet gör en bra forskare, vilket det nuvarande systemet inte fungerar väldigt bra."