Credito:Unsplash/CC0 dominio pubblico
I ragazzi ottengono risultati migliori delle ragazze nei test composti da domande a scelta multipla.
Le domande a scelta multipla sono considerate oggettive e facili da marcare. Ma la mia ricerca mostra che danno un vantaggio ai maschi.
Ho confrontato circa 500, 000 risultati dei test di ragazzi e ragazze che hanno sostenuto lo stesso test internazionale, ma le cui prove d'esame differivano per dettaglio (sebbene non per difficoltà). La differenza includeva una proporzione varia di domande a scelta multipla rispetto a domande aperte.
Ho scoperto che il divario di genere nei punteggi di matematica si allargava con la quota di domande a scelta multipla nell'esame, a vantaggio dei maschi.
Ciò mostra che le prestazioni generalmente migliori dei maschi negli esami di matematica hanno a che fare più con il formato del test che con le loro conoscenze di matematica.
Come ho condotto la mia ricerca
Gli esami standardizzati sono ampiamente utilizzati per testare gli studenti e selezionare i candidati al lavoro. Gli australiani fanno diversi test standardizzati durante la loro istruzione, come il NAPLAN, Certificato di scuola superiore (HSC) e Programma dell'OCSE per la valutazione internazionale degli studenti (PISA).
Tali esami, soprattutto quando si tratta di matematica, includono regolarmente domande a scelta multipla.
Per esempio, oltre il 70% della sezione matematica 2016 di NAPLAN era composta da domande a risposta multipla. Ogni anno, i test HSC di matematica includono una sezione con domande a scelta multipla.
Questi spingono gli studenti a identificare la risposta corretta da una serie di possibili risposte.
Ho analizzato i dati di PISA 2012 e 2015. PISA è il più grande test internazionale standardizzato in matematica, lettura e scienza. Ogni tre anni, più di 500, 000 studenti di 15 anni, da più di 60 paesi, compresa l'Australia, Fai il test.
Ogni studente che partecipa al PISA riceve una serie diversa di domande di contesto e difficoltà simili. Ma c'è una variazione casuale nella proporzione di domande a scelta multipla che ogni studente riceve nel proprio libretto di prova.
Ad esempio, nel 2015, alcuni studenti hanno sostenuto un esame composto principalmente da domande a risposta multipla (70%), mentre le prove d'esame di altri studenti contenevano solo il 30% di domande a scelta multipla.
Ho sfruttato questa variazione casuale nella proporzione di domande a scelta multipla per indagare su come variano le differenze di genere nelle prestazioni in matematica.
Cosa ho trovato
Le donne hanno ottenuto risultati peggiori degli uomini nelle domande a scelta multipla, soprattutto quando hanno ricevuto un libretto d'esame con il 60% o più di domande a scelta multipla.
Un aumento della quota di domande a scelta multipla di dieci punti percentuali (ad esempio dal 50% al 60%) ha aumentato il divario di genere nei punteggi di matematica del 50% a favore dei ragazzi.
Perché sta succedendo?
Ho anche analizzato il modo in cui gli studenti si sono avvicinati alle risposte monitorando il tempo impiegato per rispondere a una domanda, così come il numero di domande che ogni studente ha saltato.
I dati PISA mi consentono di identificare gli studenti che rispondono alle domande troppo velocemente (diciamo in meno di tre secondi, che non consente una lettura attenta della domanda).
Rispondere alle domande troppo velocemente o saltarle del tutto può essere visto come un segno di scarso sforzo o disattenzione.
Ho trovato una differenza di genere nell'approccio adottato dagli studenti per rispondere alle domande.
Globale, i ragazzi erano meno impegnati nel test rispetto alle ragazze. Hanno risposto alle domande più velocemente e ne hanno saltate altre. Però, questa differenza ha iniziato a invertire il numero di domande a scelta multipla presenti nel test.
Le ragazze che hanno ricevuto un esame con più domande a scelta multipla avevano maggiori probabilità di mostrare una mancanza di sforzo rispetto a quando c'erano più domande a risposta aperta.
Ricerche precedenti supportano l'idea che le ragazze possano essere meno coinvolte con le domande a scelta multipla. Le ragazze tendono a preferire le domande che richiedono più analisi e soluzioni varie, mentre i ragazzi sono più propensi a dichiarare semplicemente le loro risposte.
Anche la fiducia conta
Anche la fiducia di uno studente nelle sue conoscenze matematiche può avere un ruolo nella sua performance. Per esempio, un livello di confidenza più elevato influisce sulla velocità con cui gli studenti possono escludere risposte errate.
PISA 2015 non ha fornito una misura dei livelli di fiducia degli studenti.
Però, ricerche precedenti hanno mostrato che le ragazze con madri che lavorano nella scienza, tecnologia, le professioni di ingegneria o matematica (STEM) sono più sicure in matematica e hanno meno probabilità di credere agli stereotipi che i ragazzi siano migliori delle ragazze.
Così, Ho usato l'occupazione materna come misura del livello di fiducia e convinzione delle ragazze nelle loro capacità matematiche. Ho scoperto che l'effetto negativo delle domande a scelta multipla sulle prestazioni delle ragazze è effettivamente scomparso nelle ragazze le cui madri hanno lavorato in occupazioni legate alle discipline STEM.
Questi risultati suggeriscono che gli esami a scelta multipla potrebbero non essere gli strumenti più appropriati per misurare i livelli di conoscenza degli studenti.
Questo articolo è stato ripubblicato da The Conversation con una licenza Creative Commons. Leggi l'articolo originale.