“Negli ultimi due decenni si è assistito ad una crescita significativa della diffusione di strumenti di classificazione e misurazione delle prestazioni urbane (classifiche, indici, ecc.) tra le istituzioni pubbliche e private che ne fanno uso, in risposta a diversi tipi di pressioni che incoraggiano l'uniformità. Naturalmente, tutti questi strumenti sono utili per orientare e valutare le politiche messe in atto dagli enti locali nei vari campi di azione, e sono particolarmente prolifici nel campo della sostenibilità. Tuttavia, manca la conoscenza dell'effettiva base metodologica che li sostiene e che dovrebbe legittimarne l'uso, " ha spiegato Lucía Sáez-Vegas, dottorato di ricerca titolare presso il Dipartimento di Economia Finanziaria II dell'UPV/EHU.

"Con l'obiettivo di analizzare e valutare la qualità e le buone pratiche nella misurazione e nel monitoraggio urbano, e, pur dedicando particolare attenzione agli aspetti metodologici, abbiamo preso centinaia di strumenti di misurazione e selezionato una serie di 21 classifiche simili, indici e strumenti atti a classificare e monitorare la sostenibilità urbana (intesa in senso molto ampio) in modo da poterli approfondire e quindi adattare e applicare una metodologia di analisi sperimentata in un altro campo, quello delle graduatorie universitarie, " ha aggiunto il dottor Sáez.

Il significato degli aspetti metodologici

In ciascuna delle classifiche simili, indici e strumenti analizzati, i ricercatori hanno esplorato i seguenti quattro principi fondamentali:obiettivo e gruppo target a cui sono orientati; metodologia e ponderazione utilizzati nella loro progettazione; trasparenza relativa alla raccolta dei dati e al trattamento delle informazioni; e infine, la presentazione dei risultati. Come ha spiegato il dottor Saéz, "di questi quattro aspetti le informazioni sul primo e sull'ultimo sono le più accessibili, in altre parole, le informazioni descrittive. Ciò è specificato da tutte le classificazioni analizzate; eppure ciò non accade quando si tratta di accedere a tutte le informazioni sugli aspetti metodologici, raccolta di dati ed elaborazione di informazioni; questo si traduce in quella che è conosciuta come la scatola nera, un manufatto i cui risultati sono studiati e diffusi senza che il suo funzionamento interno venga messo in dubbio."

È così che i ricercatori hanno confermato diverse debolezze metodologiche in tutte le classifiche analizzate. Il ricercatore insiste sul fatto che "strumenti di questo tipo tendono a trascurare causalità complesse e mancano di trasparenza rispetto alla raccolta dei dati, processo di ponderazione e aggregazione nella loro progettazione:tendono ad essere distorti e, di conseguenza, tendono a ignorare le città mal classificate e a rafforzare gli stereotipi esistenti".

"La possibilità di classificare e confrontare città di diverse dimensioni può aiutare a individuare quelle che sembrano funzionare meglio in vari aspetti urbani. Ecco perché questi strumenti vengono utilizzati occasionalmente dai gestori urbani e dai decisori pubblici per sviluppare un piano d'azione, anche se bisogna avere le idee chiare su come è stata redatta la graduatoria o l'indice, e prestare attenzione quando lo si utilizza, soprattutto se vengono fornite informazioni insufficienti sugli aspetti metodologici e sulla robustezza dei suoi risultati. Comprendiamo che questi strumenti dovrebbero essere utilizzati più come fonte di informazioni e persino ispirazione, e meno come una tabella di marcia per l'azione, " lei ha aggiunto.

"Queste graduatorie attirano l'interesse del grande pubblico perché misurano concetti di natura complessa che vengono presentati per mezzo di una graduatoria, generalmente di tipo numerico, che si comprende molto facilmente. Dal nostro punto di vista accademico, il fatto che i risultati siano presentati sotto forma di graduatoria finale con menzione dei principali rilievi, ma con poco o nessun riguardo per gli aspetti metodologici che, alla fine del giorno, sono quelli che sono alla base del punteggio o della classifica, indica una chiara debolezza di questi strumenti quando utilizzati per misurare e monitorare le prestazioni urbane, " disse Saez.