Il 23 ottobre 2026 El País ha riferito che Pangram 4.1 ha classificato come generato dall’intelligenza artificiale il 99% delle circa 26.000 parole di Donde el agua trabaja, romanzo di David Silva Rojas. La percentuale è l’esito del rilevatore applicato al testo; il regolamento del premio riguardava invece il processo di scrittura dell’opera.
Che cosa ha misurato Pangram
Il test riguardava l’intero romanzo e ha prodotto una classificazione del 99% come testo generato dall’IA. Il risultato descrive ciò che Pangram 4.1 ha assegnato al testo, non chi abbia scritto i singoli passaggi.
Lo stesso resoconto ha riferito due risultati distinti: 97% per le risposte di Silva Rojas a un’intervista di settembre e 80% per un suo testo in prima persona di 924 parole sul romanzo. Erano classificazioni di due testi diversi, separate da quella dell’intero libro.
Le regole del premio e la risposta di Almadía
Le regole del Premio Internacional de Novela Breve Almadía Ventosa-Arrufat, riprodotte da Escritores.org, vietavano opere scritte in tutto o in parte con strumenti di intelligenza artificiale. Prevedevano anche la squalifica in caso di sospetto di violazione, in qualsiasi fase del concorso.
El País ha riferito che Editorial Almadía disse che Silva Rojas negava di aver usato l’IA e annunciò una revisione dettagliata senza anticiparne le conclusioni. Nel resoconto del 23 ottobre, l’editore aveva inoltre sospeso gli eventi di presentazione previsti per il libro.
Che cosa indicano i benchmark sui rilevatori
Un working paper dell’Università di Chicago, datato 26 agosto 2025, ha valutato Pangram insieme ad altri rilevatori su 1.992 testi scritti da persone, distribuiti in sei generi, compresi brani di romanzi. Il gruppo di confronto comprendeva testi generati da GPT-4.1, Claude Opus 4, Claude Sonnet 4 e Gemini 2.0 Flash. Nel campione dello studio, Pangram ha registrato tassi quasi nulli di falsi positivi e falsi negativi sui testi medio-lunghi.
Questi risultati descrivono il comportamento del rilevatore nel corpus e nelle condizioni del paper. Un falso positivo è un testo umano classificato come generato dall’IA; un falso negativo è un testo generato dall’IA classificato come umano.
Il rapporto tecnico di Pangram 4, pubblicato da Pangram Labs il 29 luglio 2026, riporta un tasso di falsi positivi dello 0,0041% e un tasso di falsi negativi dello 0,3396%. Sono metriche di benchmark dichiarate dall’azienda, riferite a Pangram 4; il test sul romanzo riguardava invece la versione 4.1.