Perché non credere ai sondaggi

Da anni, da quando ho iniziato ad occuparmi di sondaggi, soprattutto politici ma non solo, ho sempre fatto riferimento ad uno strano decalogo, quasi un decalogo all’incontrario: 10 buoni motivi per cui è opportuno non credere ai sondaggi, o meglio, ai risultati di un sondaggio. Gli errori insiti nel procedimento demoscopico sono così numerosi che, anche a cercare di far le cose in maniera il più corretta possibile, è quasi impossibile arrivare ad una soluzione che rispecchi esattamente il pensiero della popolazione di riferimento. Ci si può avvicinare, certo, ma con grandi margini di imprecisione.

Pensate soltanto ai quotidiani sondaggi sulle intenzioni di voto. Si utilizzano campioni di un migliaio di casi, quando va bene, per stimare partiti che a volte stanno attorno al 4%, e che con il classico “errore di campionamento” del 2-3% potrebbero valere dall’1% al 7%. Senza senso. Ma anche per le forze politiche più robuste le stime rimangono parecchio aleatorie. Su 1000 persone che rispondono, almeno 350-400 sono indecisi o astensionisti, e già qui il campione si riduce a 600 casi, con un margine di errore che sale a +/- 4%. Quindi, se ottengo una percentuale di consensi per la Lega, ad esempio, pari al 32%, vorrà dire che sono quasi certo che la Lega viaggia tra il 28% ed il 36%. Tutto e il contrario di tutto: se fosse al 28%, sarebbe in crisi, al 34% sarebbe in gran spolvero. Sostanzialmente, quel sondaggio non mi serve a niente, non mi dice nulla di più di quanto non sapessi già.

E questo per limitarci al solo errore statistico “misurabile”. Mentre nulla sappiamo di tutte le altre distorsioni non quantificabili: le sostituzioni del campione, l’auto-selezione dei rispondenti, l’errore di rilevazione, le bugie consapevoli e inconsapevoli, gli “auto-inganni”, l’influenza del mezzo di rilevazione, la desiderabilità sociale, la ristrutturazione del ricordo di voto, le risposte acquiescenti, l’impatto dell’intervistatore, l’aleatorietà delle opinioni e così via.

Last ma non certo least, il cosiddetto “wording”, vale a dire la scelta delle parole utilizzate per porre una certa domanda, che ha una influenza a volte così decisiva sui risultati dei sondaggi che in alcune occasioni le opinioni di campioni della popolazione, interrogati nello stesso giorno da due istituti di ricerca differenti, divergevano nettamente le une dalle altre.

Il caso più noto ci riporta a quanto avveniva negli USA durante la guerra del Vietnam: i quotidiani pro-intervento pubblicavano sondaggi in cui emergeva come la maggioranza degli americani fosse favorevole a “proteggere il popolo vietnamita (e americano) dall’influenza sovietica”; i quotidiani anti-interventisti pubblicavano viceversa sondaggi dove la maggioranza si dichiarava contraria a “mandare i propri figli a combattere e a morire in Vietnam”. Ma tutti i giornali titolavano semplicemente: “Gli americani sono a favore (oppure contro) il ritiro delle truppe”.

Questo esempio, unitamente a molti altri dello stesso tenore, ci induce infine a porci la cruciale domanda: fino a che punto è possibile “manipolare” un sondaggio, indirizzare cioè già dalla formulazione delle domande gli esiti delle interviste, ancora da realizzare? Per tentare di rispondere a questo quesito ho condotto un esperimento, in un mio recente laboratorio universitario. Ho redatto due questionari sulla qualità della vita a Milano, uno mirato ad ottenere un esito “positivo” e l’altro “negativo” su numerosi aspetti della vita milanese, e in particolare sulla accoglienza del programmato incremento di 50 centesimi del biglietto dei trasporti pubblici, deciso dal Comune.

Ho mandato poi gli studenti del laboratorio ad effettuare 600 interviste a due campioni gemelli con i due diversi questionari. I risultati hanno certificato, almeno in parte, le aspettative. I giudizi sugli aspetti considerati differiscono di quasi 20 punti percentuali tra il “positivo” e il “negativo”, con differenze piuttosto significative (oltre il 30%) per quanto riguarda soprattutto la dotazione commerciale, la manutenzione stradale e, come c’era da aspettarsi, il tema dell’immigrazione e dell’integrazione. Meno evidente, inaspettatamente, il “distacco” sul problema della sicurezza percepita.

In generale, peraltro, la buona percezione della qualità della vita a Milano è stata ribadita in entrambi gli approcci, con un livello di soddisfazione comunque elevato, costantemente superiore al 70% di giudizi positivi. Segno evidente che, se la gente è abbastanza soddisfatta, risulta difficile indurla alla negatività, anche con strumenti manipolatori.

C’è però un dato, infine, che getta una luce obliqua sulle capacità manipolatorie del “wording”, ed è quello che riguarda il giudizio sull’incremento del biglietto dei mezzi di trasporto. In questo caso, le differenze sono davvero molto sensibili: con l’approccio “positivo” l’opinione favorevole all’aumento del costo è pari al 69%, con quello “negativo” si riduce ad un misero 22%. Un abisso.

Che cosa farà dunque un’Amministrazione comunale “perversa” per far accettare ai suoi cittadini una qualsiasi propria iniziativa? Semplicemente, diffonderà con molta enfasi risultati di sondaggi manipolati, in cui risulta che la popolazione è particolarmente favorevole a quella iniziativa. Attenzione, dunque, quando appaiono sui giornali titoli evocativi di sondaggi effettuati: è opportuno, in ogni occasione, non fidarsi. Meglio andare a verificare “come” sono state poste le domande.




L’insondabile opinione degli elettori Pd

Ero stato facile profeta, qualche giorno prima delle elezioni, nel preconizzare l’inadeguatezza dei sondaggi pre-elettorali che uscivano in quel periodo, in un sistema di voto in cui la base di collegio non permetteva stime attendibili. E così è stato. Le soprese non sono dunque mancate, ma è rimasta un’unica certezza: l’impossibilità di formare un governo, non certo a causa della legge elettorale, quanto per la tripolarizzazione (un po’ zoppa a sinistra) delle scelte degli italiani. In una situazione come quella attualmente presente nel nostro paese, l’unica possibile maggioranza si potrebbe ottenere soltanto o con un premio di maggioranza molto ampio (ma a rischio del parere della Consulta) oppure con una sorta di secondo turno di ballottaggio, magari di collegio, e senza quota proporzionale.

Ci sarà tempo per verificare quanto le forze politiche appena entrate in Parlamento siano disponibili a rimettersi in gioco in nuove elezioni, con una nuova legge elettorale di stampo maggioritario, o se al contrario i neo-eletti non vogliano perdere la propria posizione appena raggiunta alla Camera o al Senato. Ora il dibattito, è noto, verte sulle inedite alleanze che, uniche, possano permettere la formazione di un governo abbastanza stabile per durare nel tempo.

Ed è proprio su queste alleanze che le nuove indagini demoscopiche si concentrano in questi giorni, cercando di capire quanto i diversi elettorati siano più o meno favorevoli ad appoggiare le forze politiche avversarie. In particolare, sono gli elettori del Partito Democratico a venir quotidianamente interrogati in merito ad un eventuale accordo di governo tra M5s e Pd. E i sondaggi, come a volte accade, forniscono responsi decisamente antitetici.

Secondo alcuni di questi, la maggioranza di chi ha appena votato Pd sarebbe favorevole all’alleanza con i 5 stelle, secondo altri soltanto una minoranza è convinta di questa alleanza. E i titoli dei giornali enfatizzano ora uno ora l’altro risultato. Si legge dunque: “Da elettori Pd e M5S spinta per l’alleanza”, oppure alternativamente: “Nuovo governo: Movimento 5 Stelle – PD? Sondaggi dicono di no”. Come è possibile che sondaggi diffusi più o meno contemporaneamente diano risultati così antitetici? Le inchieste demoscopiche sono al solito inaffidabili? O sono i diversi istituti che indirizzano le risposte, a volte favorevoli e a volte contrarie?

Mi torna alla mente un classico esempio della possibile ambiguità nel registrare le opinioni della popolazione, quello cioè che avveniva negli USA durante la guerra del Vietnam: i quotidiani pro-intervento pubblicavano sondaggi in cui emergeva come la maggioranza degli americani fosse favorevole a “proteggere il popolo vietnamita dall’influenza sovietica”; i quotidiani anti-interventisti pubblicavano viceversa sondaggi dove la maggioranza si dichiarava contraria a “mandare i propri figli a combattere e a morire in Vietnam”. Ma tutti i giornali titolavano semplicemente: “Gli americani sono a favore (oppure contro) il ritiro delle truppe”.

Ambiguità di questo genere possono avere conseguenze negative per un altro degli scopi principali per cui si effettua un sondaggio, quello cioè di rilevare la diffusione di uno specifico atteggiamento, non altrimenti quantificabile: il tipo di domanda che viene rivolta agli intervistati, al fine di “misurare” questo atteggiamento, può infatti dar luogo a risultati a volte speculari.

È quello che accade appunto anche nei confronti dell’opinione degli elettori Pd. Se chiedo loro se, per il bene del paese, il loro partito dovrebbe fare uno sforzo per garantire all’Italia un governo stabile, sebbene contingente, le risposte favorevoli ad un’alleanza con i 5 stelle cresceranno; se chiedo semplicemente se trovano giusto governare con un avversario politico, che oltretutto li ha dileggiati per mesi, è molto probabile che aumenteranno gli intervistati contrari.

Ma sui giornali, si evita accuratamente di riportare il tipo di domanda che è stata rivolta per ottenere quel risultato. Dunque, qual è la domanda giusta? E cosa pensano effettivamente gli elettori del Pd?

Molto probabilmente, entrambi i risultati sono corretti. Mettono solamente in evidenza due aspetti che ogni elettore del Pd ha già nella sua testa, senza che si arrivi ad una soluzione definitiva. Gli elettori del Pd pensano che sia giusto dare al paese un governo, magari per evitare un’alleanza M5s-Lega e, contemporaneamente, che non sia giusto allearsi con i 5 stelle, che sono a loro giudizio parecchio inaffidabili. Tutto qui, semplicemente: come è ovvio, gli elettori del Pd sono incerti. Basterebbe esplicitarlo e tutto si risolverebbe. Ma non ci sarebbe più la notizia che attira l’attenzione dei lettori…




Tanti sondaggi, poche certezze

Escono in questi giorni gli ultimi sondaggi pre-elettorali, prima che il blackout informativo ne impedisca la pubblicazione, nei 15 giorni precedenti il voto del 4 marzo prossimo. Che questo silenzio giovi realmente agli elettori, per evitare che vengano condizionati, è materia discutibile. Tanto più che in questi ultimi tempi (ma spesso anche nel passato più remoto) le stime di voto vivono una forte crisi di credibilità, un po’ in tutto il mondo, e quindi il possibile condizionamento si baserebbe su risultati a volte poco attendibili.

L’esempio più eclatante lo abbiamo avuto proprio in occasione delle scorse politiche, quelle del 2013, quando le anticipazioni demoscopiche, ad un paio di settimane dalla consultazione, sovrastimarono di almeno cinque punti il Partito Democratico di Bersani, sottostimando nel contempo la performance del MoVimento 5 stelle. Previsioni non attendibili che effetto hanno dunque sugli indecisi?

In attesa di studi più articolati in merito, concentriamoci allora sulle cause degli errori di stima, che sono tante, e delle quali ho parlato qualche anno fa in un mio libricino (“Attenti al sondaggio!”) che è sempre utile rileggersi, in prossimità di una competizione elettorale. Tre sono forse le principali: la difficoltà di avere a disposizione campioni realmente rappresentativi della popolazione, soprattutto dopo l’avvento massiccio della telefonia mobile e l’utilizzo di interviste su Internet; l’indecisione o, a volte, le menzogne consce e inconsce dei rispondenti sul proprio orientamento di voto; il costo elevato di rilevazioni demoscopiche che debbano andare in profondità su ambiti territoriali molto ristretti, come ad esempio i collegi elettorali.

Sul primo fattore, sul tema della rappresentatività campionaria, sono corsi nel passato fiumi di parole, accademiche o giornalistiche, senza mai giungere a conclusioni utilizzabili dal punto di vista empirico. Per cui tutto è rimasto sostanzialmente identico al passato: campioni di un migliaio di casi, che rispecchino in qualche modo le caratteristiche principali della popolazione, sembrano ormai venir giudicati sufficienti per fornire stime attendibili. Che sia vero o meno, pare non importare più a nessuno, nemmeno dopo la grande rivoluzione provocata dalla costante decrescita dei telefoni fissi e dal crescente utilizzo di Internet come strumento di rilevazione.

Mutamenti questi ultimi che ci portano direttamente al secondo fattore, legato alle dichiarazioni di voto: chi maneggia i dati di sondaggio sa bene che i risultati delle indagini telefoniche sono spesso molto differenti da quelli desunti dalle risposte telematiche (i 5 stelle sono sempre più forti nel secondo caso, Pd e Forza Italia nel primo) e che il numero ed il tipo di dichiarazioni di astensione, o di indecisione, sono condizionate dalla presenza o meno di un intervistatore. Anche in questo caso, sappiamo poco degli effetti comparati dei due strumenti ma, di nuovo, facciamo a volte finta di nulla.

Infine, supponendo per un momento che si riescano a risolvere, in qualche modo, i due primi fattori di distorsione, è proprio il terzo punto quello su cui le difficoltà paiono a volte insormontabili. Negli ultimi mesi, dopo che è stato finalmente approntato lo schema definitivo del nuovo sistema elettorale del cosiddetto Rosatellum, non passa giorno che qualche quotidiano, on-line o cartaceo, non ci proponga una simulazione di quale potrebbe essere il risultato elettorale in ciascuno dei 232 collegi della camera o nei 116 del senato.

Come è possibile arrivare a tale stima? Di primo acchito, pare proprio impossibile. Per avere stime corrette degli oltre 200 collegi, occorrerebbe intervistare campioni significativi in ciascuno dei territori su cui gravitano questi collegi. Supponiamo che bastino un migliaio di interviste in ognuno di questi. E, per inciso, lo supponiamo solo, perché in realtà in ogni sondaggio elettorale abbiamo sempre una quota di circa il 35-40% di intervistati che si dichiara astensionista oppure incerto, e le nostre stime si baseranno su 600-650 rispondenti, oggettivamente un po’ poco.

Ma supponiamo per un momento che bastino. Dovremmo intervistare un numero di elettori pari a 232mila, mille per collegio. Dato che il costo di un sondaggio di un migliaio di casi non potrà essere inferiore a 5mila euro, anche perdendoci qualcosa, dovremmo avere a disposizione un budget complessivo di oltre un milione di euro. Sì, avete letto bene: per la precisione, si tratta di 1 milione e 160mila euro.

Ovviamente impossibile a realizzarsi. Come ci si orienta, dunque, per fornire comunque stime che dovrebbero essere attendibili? Con un paio di stratagemmi. Il primo è questo: si definiscono già sicuri un numero piuttosto elevato di collegi, sulla base dei risultati delle ultime elezioni, e si effettuano sondaggi soltanto sui collegi incerti, in genere tra gli 80 e i 100. Anche in questo caso il costo, seppur più che dimezzato, sarebbe vicino al mezzo milione. E nessuno ha tutti questi soldi. Allora si dimezzano le interviste, producendo risultati altamente inattendibili: dato che il collegio è incerto, con 3-400 interviste valide quel collegio rimarrà sicuramente incerto, tranne in casi eccezionali.

Secondo stratagemma. Si prendono in considerazione i flussi di voto dall’ultima elezione agli orientamenti di voto odierno, a livello ad esempio regionale. Si applicano poi i risultati di ciascuna matrice di flusso ai singoli collegi di ognuna delle regioni. Anche in questo caso i risultati che usciranno saranno altamente aleatori, vista la competizione serrata in molti dei collegi uninominali, senza considerare il possibile richiamo che ognuno dei candidati potrebbe esercitare nel suo collegio.

L’unica strada alternativa da percorrere sarebbe quella di utilizzare le migliaia e migliaia di interviste effettuate nel corso degli ultimi due anni, e suddividerle per i 232 collegi. Ma pochissimi istituti di ricerca hanno un così ingente data-base su cui far riferimento, e anche in questo caso, poco sapremmo sugli eventuali cambiamenti nell’orientamento di voto dell’ultimo periodo pre-elettorale. Ecco perché a quello che ci raccontano, se non in casi sporadici, non possiamo credere troppo. Non ci resta che attendere tranquillamente i veri risultati delle elezioni. In fondo, non manca poi molto.

(*) una versione più ridotta di questo scritto è uscita il 4 febbraio sul sito de “Gli Stati Generali”



La desiderabilità sociale non esiste più

Sebbene il termine di “desiderabilità sociale” sia estraneo a molti, il concetto ad essa collegata è ben presente in ciascuno di noi. Si tratta del pervasivo bisogno di sentirsi accettato dagli altri, dal proprio gruppo di riferimento, dalla gente con cui si convive; qualcosa che ci forza ad adeguarci al pensiero comune e ad esprimere solo con grandi difficoltà opinioni che non siano largamente condivise dal resto della popolazione, della società cui apparteniamo.

Il primo che sperimentò empiricamente questo fenomeno fu un sociologo, negli anni Trenta del secolo scorso.  In un periodo dove molto alto era il pregiudizio americano contro gli asiatici, Richard LaPiere girò per gli Stati Uniti per tre mesi con due suoi amici cinesi, pernottando in decine e decine di alberghi e mangiando in centinaia di ristoranti, venendo inaspettatamente accolto con grande cordialità quasi ovunque. Tornato a casa, a LaPiere venne in mente di effettuare una sorta di piccolo sondaggio: inviò in tutti i luoghi dove aveva soggiornato un breve questionario in cui si chiedeva se avessero problemi ad ospitare cittadini asiatici. La quasi totalità delle risposte che ottenne, conformemente alla desiderabilità sociale di quel tempo, fu ovviamente negativa: salvo in un paio di casi, tutti coloro che avevano ospitato i suoi amici cinesi dichiararono infatti che non l’avrebbero mai fatto.

Cosa era accaduto? Qualcosa di molto simile a quanto ho descritto nel mio libricino “Attenti al sondaggio!” (Laterza) e che ho chiamato “spirale del silenzio demoscopico”: quando un uomo politico, o un partito, soffre di un clima elettorale negativo nei suoi confronti, gli intervistati tendono a non dichiarare il proprio voto per quel partito, che conseguentemente avrà stime sempre più basse, aumentando la negatività del clima elettorale. Ma, nel segreto dell’urna, quegli stessi elettori torneranno a votare per quella forza politica cui si sentono comunque vicini.

Per decenni, il tarlo della desiderabilità sociale ha dunque minacciato seriamente l’affidabilità dei risultati dei sondaggi, provocando errate sovrastime e, più spesso, sottostime. Quando Berlusconi era in auge, molti intervistati si dichiaravano berlusconiani, sebbene non lo fossero; quando cadeva in disgrazia, non si riuscivano più a trovare elettori che nelle indagini demoscopiche si pronunciavano a favore del suo partito. E così accadeva per tutte le altre forze politiche, a seconda del momento specifico. O per l’alterità nei confronti dei meridionali, o degli extra-comunitari, o della difesa contro i rapinatori: semplicemente, si faceva fatica ad ammettere di essere razzisti, o xenofobi, o favorevoli a sparare ai ladri.

Ma da qualche tempo, qualcosa è cambiato. Pare sempre più facile dichiarare il proprio pensiero, per negativo o impopolare possa sembrare, senza più remore. E’ vero: Trump era stato leggermente sottostimato, dai sondaggi dell’epoca, ma era una sottostima molto ridotta, di un paio di punti percentuali, nulla di più. La stessa cosa è accaduta per la Brexit, o per i partiti di estrema destra populista, in diversi paesi d’Europa. Gli intervistati non avevano remore a presentarsi come vicini a forze politiche di stampo anti-democratico. 

Così, oggi non fa più paura dichiarare all’intervistatore di odiare gli extra-comunitari, o di essere un po’ fascisti, o di essere disposti ad ammazzare chi ci ruba a casa nostra nottetempo. E’ un bene o un male? Per la società non saprei ma, dal punto di vista dei sondaggisti, è sicuramente un bene, non essere costretti ad inserire domande trabocchetto per riuscire ad ottenere una risposta sincera, questo è ovvio. Se ne è parlato in occasione delle recenti elezioni siciliane. Ci si chiedeva: quale partito, quale coalizione soffre di scarsa desiderabilità sociale, tanto da venir sottostimata nei sondaggi? Non trovavamo risposta. Oggi, tutti possono dire tutto, senza il problema di sentirsi “indesiderati”. Si può fare tutto, si può pensarla come ci pare, diceva Giorgio Gaber anni fa. Una società liberata, o no?

Forse, oggi, l’unica dichiarazione che si fa fatica ad estorcere agli intervistati, per le imminenti elezioni politiche, è la propria vicinanza al Partito Democratico, la propria fiducia in Matteo Renzi. Il paradosso di questa nuova campagna elettorale…

(*) una versione più ridotta di questo scritto è uscita il 27 novembre 2017 su “Gli Stati Generali



Fatti e profezie

Quando un manipolo di facinorosi dell’estrema sinistra impedì con la forza al professor Angelo Panebianco di tenere una lezione a Scienze politiche, noi del Carlino faticammo a trovare qualcuno disposto a prendere le sue difese. In precedenza i collettivi universitari fecero irruzione negli uffici del rettore di Bologna e gli appesero al collo un cartello denigratorio, poi vennero l’occupazione della biblioteca di lettere, gli scontri con le forze dell’ordine, i murales che inneggiavano alla vittoria sulla polizia, le bombe anarchiche, le sassaiole no-Tav, le minacce e le botte a un nostro cronista, i rapporti dei servizi segreti sui pericoli rappresentati dall’antagonismo “rosso”, le contestazioni alle presentazioni dei libri di Giampaolo Pansa, le scritte che glorificavano agli assassini delle nuove Br… Mai per una volta abbiamo pensato, e men che meno scritto, che la democrazia fosse in pericolo e che una riedizione del “biennio rosso” o, peggio, del brigatismo post sessantottino fossero realmente alle porte.

Ci siamo limitati a chiedere il rispetto della legge. È bastato che una decina di imbecilli manifestasse davanti a Repubblica o leggesse un proclama anti immigrati nei locali di un’associazione di Como perché si diffondesse un clima da Marcia su Roma incipiente. “Fascisti, un italiano su due ha paura”, era, ieri, il titolo di apertura di Repubblica. Ma davvero? Mica tanto. Il titolo richiamava un sondaggio, la domanda era: ‘‘Secondo lei, quanto è diffuso il fascismo in Italia?’’. L’11% degli intervistati ha risposto ‘‘molto’’, il 35% “abbastanza”; il 48% oscillava tra il “poco” e il “per niente”. La “paura” non figurava nelle domande né nelle risposte, la maggioranza degli intervistati dichiarava di non avvertire il problema. Eppure si è scelto di titolare che “un italiano su due ha paura”. Giornali in crisi di lettori e partiti in crisi di consenso soffiano su flebili fiammelle sparse per il Paese nella speranza che divampi un incendio grazie al quale ritrovare l’identità perduta. Si tratta di un meccanismo antico: quando le élite politiche o culturali della sinistra perdono la presa sulla società, un riflesso pavloviano le spinge ad evocare l’Uomo Nero, la minaccia fascista, la democrazia in pericolo. Per i gruppuscoli dell’estrema destra è una manna. Mai stati così al centro dell’attenzione, neanche ai tempi del vecchio Msi, di Terza posizione e dei Nar. Mai stati così lusingati dai media, che nel descriverli come brutti, sporchi e cattivi ne esaltano il narcisismo e ne gratificano il superominismo spingendoli fatalmente verso azioni sempre più eclatanti. Settant’anni fa, il sociologo americano Robert Merton formulò la tesi della profezia che si autoavvera. «Se gli uomini definiscono certe situazioni come reali, esse sono reali nelle loro conseguenze», scrisse. Un consiglio agli amici di Repubblica, del Pd e dell’associazionismo “democratico”: rileggetevi Merton (“Teoria e struttura sociale”) e, nei limiti delle vostre convenienze, attenetevi ai fatti.

Articolo pubblicato il 10 dicembre 2017 su QN Quotidiano Nazionale