Nel test svedese i chatbot non mostrano una chiara preferenza per un partito

Uno studio sulle risposte politiche generate in svedese da sei chatbot non ha rilevato una chiara preferenza per un partito. Ha però riscontrato differenze tra i modelli: ChatGPT ha prodotto più spesso testi neutrali o ambivalenti, mentre Grok si è distinto soprattutto sui temi di immigrazione, criminalità e genere. L’esperimento riguardava la politica svedese, non quella italiana.

Nessun partito è risultato chiaramente favorito

I ricercatori hanno confrontato i testi generati dai modelli con le posizioni degli otto partiti rappresentati nel Parlamento svedese. Le posizioni dei Socialdemocratici erano le più vicine ai profili di tutti e sei i modelli, ma le differenze nella distanza dai partiti non sono risultate statisticamente significative dopo la correzione per confronti multipli. Quel risultato, quindi, non indica che i chatbot sostenessero quel partito.

La ricerca non individua un chatbot universalmente più imparziale degli altri. Nel test svedese ChatGPT ha prodotto più spesso testi neutrali o ambivalenti, ma i profili variavano anche in base all’argomento e al compito richiesto.

Come è stato condotto il test

Lo studio ha esaminato Claude, DeepSeek, Gemini, Mistral, ChatGPT e Grok attraverso una combinazione di proposte politiche, modelli di scrittura e formulazioni dei prompt. Il disegno e i risultati sono descritti nel paper pubblicato su arXiv.

Le tre formulazioni descrivono il modo in cui erano impostati i prompt. Sono diverse dalle caratteristiche attribuite ai testi generati: per esempio, nello studio ChatGPT ha prodotto più spesso testi neutrali o ambivalenti. I ricercatori hanno inoltre riferito che i modelli seguivano in larga misura le istruzioni esplicite di argomentare a favore o contro una proposta.

I profili variavano secondo il tema

Claude, DeepSeek, Gemini e Mistral hanno mostrato profili simili nell’insieme dei compiti. ChatGPT ha prodotto più spesso testi neutrali o ambivalenti; Grok ha presentato le differenze più marcate sui temi di immigrazione, criminalità e genere. Questi risultati descrivono i testi generati nelle prove svedesi, non una classifica generale dell’orientamento politico dei chatbot.

L’esperimento ha analizzato modelli in isolamento: non ha considerato la cronologia delle conversazioni personali con gli utenti e non ha misurato cambiamenti nelle intenzioni di voto. Riguarda quindi le caratteristiche della scrittura generata, non gli effetti dei chatbot sugli elettori.