El País meldde op 23 oktober 2026 dat Pangram 4.1 99% van de circa 26.000 woorden van Donde el agua trabaja als AI-gegenereerd classificeerde. Die score geeft weer hoe de detector de tekst indeelde; hij stelt niet vast wie de roman schreef.
David Silva Rojas won met de roman in juli 2026 het eerste Premio Internacional de Novela Breve Almadía Ventosa-Arrufat. De wedstrijdregels verboden inzendingen die geheel of gedeeltelijk met AI waren geschreven. De uitslag van Pangram is een classificatie, geen vaststelling dat Silva Rojas die regels heeft overtreden.
Wat Pangram 4.1 classificeerde
Volgens El País werd de volledige roman, ongeveer 26.000 woorden, met Pangram 4.1 gecontroleerd. De 99% slaat op de classificatie van die tekst door de detector. Het percentage vertelt niet wie welke passages schreef of hoe de roman tot stand kwam.
El País meldde ook twee scores voor andere teksten van Silva Rojas: Pangram classificeerde zijn antwoorden in een tijdschriftinterview uit september 2026 voor 97% als AI-gegenereerd en een persoonlijk verslag van 924 woorden over de roman voor 80%. Dat zijn uitkomsten voor afzonderlijke teksten, niet voor de roman zelf.
De wedstrijdregels en de reactie van Almadía
De wedstrijdvoorwaarden, zoals weergegeven door Escritores.org, verboden teksten die geheel of gedeeltelijk met AI waren geschreven. El País meldde dat Almadía zei dat Silva Rojas AI-gebruik ontkende. De uitgever kondigde een zorgvuldige beoordeling aan en schortte geplande presentatiebijeenkomsten voor het boek op.
De roman verscheen in september 2026 en won de prijs uit 2.204 inzendingen. Daarmee draait de kwestie om twee verschillende zaken: de wedstrijd had een expliciet verbod op AI-geschreven tekst, terwijl Pangram een classificatie van het manuscript gaf.
Wat detectoronderzoek over deze score zegt
Een werkdocument van de University of Chicago, gedateerd 26 augustus 2025, onderzocht Pangram en andere detectoren met 1.992 menselijke tekstfragmenten uit zes genres, waaronder romans. De onderzoekers vergeleken die met AI-teksten die met vier taalmodellen waren gemaakt. Binnen die test vond het onderzoek bij middellange en lange teksten bijna geen fout-positieve of fout-negatieve classificaties voor Pangram.
Een fout-positieve uitslag betekent dat menselijke tekst als AI-tekst wordt ingedeeld; bij een fout-negatieve uitslag krijgt AI-tekst juist een menselijke classificatie. De onderzoeksresultaten gelden voor de teksten en omstandigheden in die benchmark. Het onderzoek onderzocht Donde el agua trabaja niet.
Pangram Labs rapporteerde in het technische rapport voor Pangram 4 een AUROC-score van 0,9916, een fout-positiefpercentage van 0,0041% en een fout-negatiefpercentage van 0,3396%. Dat zijn door het bedrijf gerapporteerde benchmarkcijfers voor Pangram 4, geen kansberekening voor de classificatie van deze roman.
