Massa di citazioni relativa agli anni dalla prima pubblicazione. Relazione tra la massa di citazioni di un ricercatore e gli anni di log dalla prima pubblicazione peer-reviewed per otto discipline Composto da 60 ricercatori ciascuno in tre diverse fasi di carriera:ricercatore all'inizio della carriera (ECR), ricercatore a metà carriera (MCR), e ricercatore in ritardo di carriera (LCR). Le linee montate corrispondono all'intero campione (nero pieno), solo donne (nero tratteggiato), e solo uomini (tratteggiato in rosso). Credito:Professor Corey Bradshaw della Flinders University, PLOS UNO .
h -indice, G -indice, io 10 indice, m -quoziente, Fattore di impatto del giornale, Altmetrics … è stato a lungo un problema intrattabile che affligge la comunità di ricerca:come valutare i meriti relativi della ricerca in modo oggettivo tra le discipline e fare confronti equi tra i ricercatori all'inizio della carriera e i ricercatori affermati, generi diversi, e anche diverse discipline di ricerca.
Ora, Il professor Corey Bradshaw, ecologista della Flinders University, e colleghi hanno sviluppato uno strumento per valutare le prestazioni della ricerca in modo più equo; uno che livellerà il campo di gioco non solo tra le discipline, ma attraverso generi e percorsi di carriera, appianare le rughe per interruzioni come il congedo di maternità.
chiamato il Indice Epsilon , chiamato per la lettera greca ? usato per simboleggiare i residui nelle statistiche, tiene conto delle molte differenze nello spazio di ricerca per fornire un confronto più equo.
Un confessato esperto di statistica, Il professor Bradshaw ha pubblicato i lavori del -indice nella rivista ad accesso libero PLoS One .
"Una delle sfide durature per i ricercatori è la ricerca di misurare equamente la quantità e la qualità della loro produzione, "dice il professor Bradshaw.
"Non esiste un processo semplice per confrontare i punti di forza relativi dei ricercatori in discipline disparate:alcuni tendono semplicemente ad avere meno citazioni di altri.
«Poi c'è il genere. Le pubblicazioni di ricerca per le donne potrebbero diminuire durante il congedo di maternità, ad esempio, influenzando le prestazioni percepite, anche se la loro abilità - e la loro ricerca - non sono meno brillanti. Anche le donne tendono a non ricevere le stesse opportunità degli uomini anche oggi, quindi sono ingiustamente classificati contro gli uomini per la maggior parte delle metriche esistenti.
Riquadro di sinistra:Distribuzione dei residui all'interno della disciplina del rapporto tra Arel e loge anni di pubblicazione per disciplina (ARC =archeologia, CHM =chimica, ECO =ecologia, EVO =evoluzione e sviluppo, GEO =geologia, MIC =microbiologia, OPH =oftalmologia, PAL =paleontologia), ciascuno composto da 60 ricercatori (30 ♀, 30 ). Pannello di destra:Distribuzione dei residui tra le discipline. Credito:Professor Corey Bradshaw della Flinders University.
"Dove i ricercatori sono nella loro carriera, siano essi entusiasmanti nuovi arrivati o illustri professori, può anche avere un forte effetto sulle metriche attuali.
'Il Indice Epsilon è un nuovo modo per ridurre i pregiudizi sistemici nella valutazione della qualità del ricercatore tramite citazioni fornendo fasi di carriera, Genere, e le correzioni delle opportunità alle metriche delle prestazioni basate sulle citazioni, ' lui dice.
Lo strumento è disponibile gratuitamente come app già pronta:basta inserire alcuni dati per un campione di ricercatori da database open source come Google Scholar, e fa il lavoro pesante per produrre il risultato, consentendo il confronto dei ricercatori in qualsiasi fase della loro carriera e di qualsiasi disciplina sulla stessa scala.
È un vantaggio per chiunque desideri utilizzare una metrica oggettiva per classificare i ricercatori, sia per le domande di sovvenzione, colloquio di lavoro, promozioni e premi, o anche come indicatore delle prestazioni del personale.
Relazione tra massa di citazioni in scala e pubblicazione di anni loge (per 480 ricercatori in otto diverse discipline (ARC =archeologia, CHM =chimica, ECO =ecologia, EVO =evoluzione e sviluppo, GEO =geologia, MIC =microbiologia, OPH =oftalmologia, PAL =paleontologia) composto da 60 ricercatori ciascuno. Credito:Professor Corey Bradshaw della Flinders University.
L'approccio per sviluppare e testare il -indice era esso stesso un esercizio di multidisciplinarietà e specificamente progettato per garantire l'equilibrio di genere.
Lo strumento è stato testato e perfezionato attraverso la collaborazione su dati campione con un archeologo:l'assistente professore Dr. Stefani Crabtree (Utah State University/Santa Fe Institute), una geologa e paleontologa dei vertebrati, la professoressa Kate Trinajstic (Curtin University), un chimico:il professor Justin Chalker, un microbiologo:il professor Bart Eijkelkamp, un paleontologo:il professor John Long, un oftalmologo, la professoressa Justine Smith, e una biologa evoluzionista, la professoressa Vera Weisbecker (tutta la Flinders University).
Il campione comprendeva 480 ricercatori con profili Google Scholar, stratificato uniformemente in otto discipline (archeologia, chimica, ecologia, evoluzione e sviluppo, geologia, microbiologia, oftalmologia, paleontologia), tre fasi di carriera (inizio, a metà, tarda carriera), e due generi.
Professoressa Justine Smith, che è stata una "superstar delle STEM" che promuove attivamente l'impegno delle donne nella scienza, tecnologia, ingegneria e matematica, spera che -indice farà la differenza nel modo in cui vengono percepite le donne nella scienza, e, a sua volta, incoraggiare più donne a entrare nelle scienze.
'Valutare più accuratamente il contributo delle donne alle scienze e celebrare i loro successi è fondamentale per incoraggiare le future generazioni di ragazze alle scienze; come dice il proverbio, "non puoi essere ciò che non vedi". Il -indice dà più equa e maggiore visibilità ai risultati delle donne, e il fatto che lo faccia in una vasta gamma di discipline lo rende particolarmente vantaggioso, "dice il professor Smith.
Grafici del violino dei residui in scala e del quoziente m in tutte e otto le discipline relative alla fase di carriera (ECR =inizio carriera; MCR =metà carriera; LCR =fine carriera). Credito:Professor Corey Bradshaw
Come funziona
Il nuovo indice è un algoritmo di classificazione che può essere standardizzato tra le discipline, può essere corretto per interruzioni di carriera, e fornisce una soglia specifica per il campione che può determinare se la prestazione individuale è maggiore o minore del previsto rispetto agli altri ricercatori in un campione.
Utilizzando il codice R o l'app online, richiede solo quattro informazioni da database pubblici come Google Scholar o Scopus per calcolare un ricercatore ? -indice:
Lo strumento fornisce anche un metodo semplice per scalare l'indice tra le discipline con tendenze di citazione variabili ( ? ′-index) per consentire un confronto più equo dei ricercatori in diverse aree.
Classifica mediana tra le otto discipline esaminate (ARC =archeologia, CHM =chimica, ECO =ecologia, EVO =evoluzione e sviluppo, GEO =geologia, MIC =microbiologia, OPH =oftalmologia, PAL =paleontologia). Credito:Professor Corey Bradshaw
Gradi per genere e fase di carriera (ECR =ricercatore all'inizio della carriera, MCR =ricercatore a metà carriera, LCR =ricercatore di fine carriera); (b) bootstrap debiased (cioè, calcolando separatamente i residui graduati per ogni genere, e quindi classificare il set di dati combinato) ε′ classifica per genere e fase di carriera. Credito:Professor Corey Bradshaw
Il ? -index consente facilmente il benchmarking di sottoinsiemi di ricercatori in solo donne o solo uomini per regolare la soglia in modo che i ranghi siano più comparabili tra questi due sessi. In alternativa, dividendo i generi e confrontandoli separatamente, seguito da una riclassificazione combinata rimuove efficacemente il pregiudizio di genere nel ? -indice, che è difficile o impossibile da fare con altre metriche di ranking.
'Nessuna metrica di classifica è perfetta, ma il -indice è un grande balzo in avanti nel superare i pregiudizi e dare una più chiara, quadro più equo della performance della ricerca su tutta la linea, "dice il professor Bradshaw.
