• Home
  • Chimica
  • Astronomia
  • Energia
  • Natura
  • Biologia
  • Fisica
  • Elettronica
  •  science >> Scienza >  >> Natura
    Mirare all'oro:migliorare la riproducibilità negli studi idrologici

    I ricercatori della Utah State University stanno creando strumenti online per aiutare a rendere più riproducibili gli studi di idrologia. Credito:Matt Jensen

    In sei rinomate riviste di idrologia e risorse idriche pubblicate nel 2017, la percentuale stimata di studi i cui risultati potevano essere completamente riprodotti era solo tra lo 0,06 e il 6,8 per cento. Questo basso livello di riproducibilità non è raro negli studi di idrologia, un fatto che molti scienziati riconoscono prontamente. Però, un team di ricercatori della Utah State University potrebbe aver trovato una soluzione per rendere questi studi più riproducibili.

    Nella loro carta, "Valutare la disponibilità dei dati e la riproducibilità della ricerca in idrologia e risorse idriche, " pubblicato il 26 febbraio su Nature's Dati scientifici , I coautori di David Rosenberg hanno sviluppato uno strumento di indagine online per valutare la riproducibilità delle ricerche pubblicate. Il team ha esaminato 360 articoli di sei riviste sulle risorse idriche pubblicate nel 2017. Su 360 articoli, potevano solo riprodurre integralmente i risultati di quattro articoli.

    "Il nostro strumento di indagine scompone il concetto di riproducibilità scientifica in componenti specifici della disponibilità dei dati, riproducibilità dei risultati e replicabilità dei risultati, " disse Rosenberg, professore associato di ingegneria civile e ambientale all'USU. "Quindi suggeriamo come gli autori, riviste, finanziatori e istituzioni possono utilizzare lo strumento di indagine per aumentare i bassi tassi di riproducibilità".

    Gli autori affermano che la riproducibilità può essere suddivisa in tre componenti:

    • sono i dati, Modelli, codice, istruzioni per l'uso e altri artefatti utilizzati nel lavoro disponibile?
    • Gli artefatti possono essere utilizzati per riprodurre i risultati pubblicati?
    • I risultati possono essere replicati con nuovi set di dati?

    Lo strumento di indagine online del team è composto da 15 domande e fornisce un elenco di controllo degli elementi essenziali necessari per la disponibilità degli artefatti e la riproducibilità dei risultati. Artefatti è un termine generico per tutti i dati, Software, Modelli, codice, indicazioni e altri materiali necessari per riprodurre i risultati all'interno di uno studio.

    Il team ha scoperto che circa il 70% degli articoli campionati affermava che alcuni materiali erano disponibili, ma solo il 48% circa dei materiali era accessibile online. Solo il 6% circa degli articoli campionati ha reso pubblicamente disponibili gli artefatti, e solo l'1% degli articoli campionati rendeva disponibili artefatti e poteva essere riprodotto completamente.

    Gli autori hanno affermato che molti articoli mancavano di indicazioni per generare risultati. Se gli autori forniscono indicazioni, dicono, il numero di articoli che potrebbero essere testati per la riproducibilità raddoppierebbe. Gli articoli che rendevano disponibili tutti gli artefatti avevano sei possibilità su 10 di avere alcuni o tutti i loro risultati riprodotti. Due riviste intervistate dal team hanno richiesto articoli per indicare come è possibile accedere agli artefatti, e quattro riviste hanno incoraggiato le dichiarazioni. Nessuna rivista ha richiesto agli autori di rendere disponibili tutti gli artefatti.

    Lo strumento di indagine può aiutare a riconoscere e incoraggiare gli autori a raggiungere determinati livelli di riproducibilità. Per esempio, gli autori possono utilizzare lo strumento di indagine per autovalutare la riproducibilità dei loro risultati. Rosenberg e il suo team raccomandano anche un sistema di medaglie per riconoscere diversi livelli di riproducibilità:

    • Medaglia di bronzo:tutti gli artefatti sono resi disponibili all'interno dell'articolo o in repository aperti
    • Medaglia d'argento:tutti gli artefatti sono disponibili e i risultati sono completamente riproducibili
    • Medaglia d'oro:i risultati sono completamente riproducibili e i risultati complessivi possono essere replicati in contesti diversi con artefatti uguali o diversi

    Rosenberg consiglia di pubblicare le icone delle medaglie accanto agli articoli online per riconoscere gli autori per il loro lavoro di riproducibilità e rendere più facile per i lettori trovare le migliori pratiche di riproducibilità. Rosenberg e il suo team hanno assegnato quattro medaglie d'argento e sei medaglie di bronzo sui 360 articoli che hanno recensito. L'assegnazione di medaglie d'oro per la replicabilità dei risultati rimane un'importante linea di lavoro futuro.

    "Speriamo che lo strumento di indagine aiuti a spingere gli autori, riviste, finanziatori e istituzioni per rendere più riproducibile il lavoro scientifico, " ha detto Rosenberg. "Accogliamo con favore la discussione per migliorare lo strumento di indagine e per migliorare la riproducibilità della nostra scienza".


    © Scienza https://it.scienceaq.com