• Home
  • Chimica
  • Astronomia
  • Energia
  • Natura
  • Biologia
  • Fisica
  • Elettronica
  • I trattini nei titoli degli articoli danneggiano il conteggio delle citazioni e i fattori di impatto delle riviste

    Man mano che compaiono più trattini nel titolo di un documento, le sue citazioni diminuiranno. Questo fenomeno si applica a tutte le principali aree tematiche, indipendentemente dalla qualità della pubblicazione. Credito:@The University of Hong Kong

    Secondo gli ultimi risultati della ricerca, la presenza di semplici trattini nei titoli degli articoli accademici influisce negativamente sulle statistiche delle citazioni, indipendentemente dalla qualità degli articoli. Il fenomeno riguarda tutte le principali aree tematiche. Così, conteggi delle citazioni e fattori di impatto della rivista, comunemente usato per le valutazioni dei professori nelle università di tutto il mondo, sono inaffidabili.

    Questa scoperta rivoluzionaria pone una sfida fondamentale alla regola del gioco nel determinare i contributi di carte, riviste, e professori. È stato svelato in un documento intitolato "Metamorphic Robustness Testing:Exposing Hidden Defects in Citation Statistics and Journal Impact Factors, " di Zhi Quan Zhou, NS. Tse, e Matt Witheridge, recentemente pubblicato in Transazioni IEEE sull'ingegneria del software , la rivista più importante del settore.

    NS. Tse è professore onorario di informatica presso l'Università di Hong Kong (HKU). Zhi Quan Zhou ha ricevuto un dottorato di ricerca. da HKU ed è attualmente professore associato in ingegneria del software presso l'Università di Wollongong, Australia. Matt Witheridge è un dottorato di ricerca. studente presso l'Università di Wollongong.

    Scopus e Web of Science sono i due principali sistemi di indicizzazione delle citazioni. Scopus fornisce le statistiche di citazione per supportare le classifiche della Times Higher Education World University e le classifiche della QS World University. Web of Science fornisce il fattore di impatto della rivista che supporta la classifica delle principali riviste. Data l'importanza di questi due sistemi di indicizzazione, è essenziale assicurare la loro qualità. In particolare, il test di robustezza si riferisce alla verifica della capacità dei sistemi di affrontare input errati o situazioni impreviste. Per esempio, il sistema di indicizzazione può gestire correttamente una citazione se c'è un errore di battitura minore quando si cita il titolo del documento?

    Il professor Tse ei membri del team hanno proposto un metodo innovativo denominato "test di robustezza metamorfica" per verificare Scopus e Web of Science. Lo studio approfondito ha scoperto difetti di robustezza in entrambi i sistemi che potrebbero produrre conteggi di citazioni errati per articoli con trattini nei titoli, in modo che i fattori di impatto del giornale successivamente calcolati siano problematici.

    Già nel 2015, Letchford e colleghi hanno condotto uno studio su larga scala su Scopus, e ha scoperto che gli articoli con titoli più brevi tendevano a essere citati più di quelli con titoli più lunghi.

    Anzi, Il professor Tse e il presente team scoprono che in realtà è il numero di trattini nel titolo che funge da fattore dominante per il conteggio delle citazioni. Generalmente, il numero di trattini è correlato alla lunghezza del titolo di un articolo, dando così l'errata interpretazione che il conteggio delle citazioni dipenda dalla lunghezza del titolo.

    Le pratiche di citazione variano a seconda delle aree tematiche. Le pubblicazioni in alcuni campi possono avere un numero di citazioni sistematicamente più elevato rispetto ad altri campi. Per esempio, si potrebbe obiettare che gli articoli di chimica (dove i titoli dei documenti spesso portano i trattini come parte della nomenclatura chimica) ricevono solo un numero relativamente limitato di citazioni, dando luogo a una falsa correlazione negativa tra trattini e citazioni. Quindi, il team ha svolto studi mirati su riviste in aree tematiche specifiche. I risultati hanno indicato che i trattini influiscono negativamente sul conteggio delle citazioni degli articoli anche se lo studio è limitato solo a una particolare disciplina.

    Per basarsi sui risultati a livello di articolo e disciplina, il team ha studiato l'impatto dei trattini nei titoli degli articoli a livello di rivista. Il fattore di impatto della rivista (JIF) è una metrica comune per determinare la frequenza delle citazioni di una rivista accademica. È spesso usato per rappresentare l'importanza relativa di una rivista nel suo campo. Uno studio sul campo dell'ingegneria del software rivela che le riviste di livello JIF più alte pubblicano una percentuale inferiore di articoli con titoli con trattino.

    Il team ha inoltre condotto un'analisi della validità della ricerca per evitare di cadere nella trappola di equiparare la correlazione alla causalità.

    "I nostri risultati mettono in discussione la credenza comune del mondo accademico, governi, e gli organismi di finanziamento che contano le citazioni sono una misura affidabile dei contributi e dell'importanza dei documenti. Infatti, possono essere distorti semplicemente dalla presenza di trattini nei titoli degli articoli, che non ha alcuna incidenza sulla qualità della ricerca. Allo stesso modo, i nostri risultati sfidano anche la validità dei fattori di impatto delle riviste, ", ha detto il professor Tse.

    "Questi risultati sorprendenti sono di interesse non solo per i professori in cerca di cattedra o promozione, ma anche ad alti dirigenti come presidenti, presidi, e teste. Sono applicabili a tutte le facoltà di qualsiasi università, " Ha aggiunto.


    © Scienza https://it.scienceaq.com