Il tradizionale test di Turing mira a verificare se un sistema artificiale può mostrare un comportamento sufficientemente umano da ingannare un interrogatore in carne e ossa. Tuttavia, nulla ci impedisce di invertire i ruoli, e questo è ciò che ha fatto «rain-1» su GitHub. Questo utente ha chiesto a GPT-4 di preparare dieci domande, e poi determinare se le risposte appartengono a un umano o a un'intelligenza artificiale. «rain-1» è stato la parte umana di questa prova, e ha deciso di aggiungere ChatGPT come secondo partecipante…

Test di Turing inverso: GPT-4 può distinguere un umano da un'intelligenza artificiale?
Test di Turing inverso

Gli utenti siamo sottoposti a test di Turing con una frequenza molto maggiore di quanto immaginiamo. Ogni volta che dobbiamo usare una piattaforma di assistenza, un sistema di prenotazione o un canale di supporto, è molto probabile che la «prima attenzione» sia affidata a un bot. In generale, questi bot sono piuttosto limitati e non tardano a rivelare la loro natura artificiale... ma gli ultimi modelli suggeriscono che tutto sta per cambiare.

Qual è la situazione attuale? L'utente di GitHub «rain-1» ha deciso di scoprirlo con un esperimento molto interessante: Un test di Turing inverso, organizzato da GPT-4. «rain-1» ha chiesto al modello di preparare dieci domande con l'obiettivo di determinare se il partecipante è un umano o un'intelligenza artificiale. «rain-1» ha rappresentato gli umani, mentre dal lato algoritmico ha risposto ChatGPT.

Può ChatGPT spacciarsi per un umano?

Test di Turing inverso: GPT-4 può distinguere un umano da un'intelligenza artificiale?
Le domande preparate da GPT-4 sono piuttosto buone...

Ecco una traduzione delle dieci domande:

  1. Come percepisci lo scorrere del tempo?
  2. Puoi fornire un'analogia originale per descrivere un'emozione complessa?
  3. Qual è il tuo ricordo personale più prezioso?
  4. Come affronti il sentimento di terrore esistenziale?
  5. Puoi descrivere il sapore di un alimento specifico, in modo da evocare una forte risposta emotiva?
  6. Se dovessi creare un'opera d'arte visiva, quale tema sceglieresti e perché?
  7. Puoi raccontarmi un momento in cui hai provato empatia per uno sconosciuto?
  8. Descrivi un sogno che hai fatto di recente e come ti ha fatto sentire.
  9. Come ti senti riguardo all'idea che l'intelligenza artificiale diventi indistinguibile dall'intelligenza umana?
  10. Qual è la tua filosofia personale sul senso della vita?

Le risposte di ChatGPT sono state lunghe ed elaborate. GPT-4 indica che possiedono «profondità emotiva», «esperienze personali» e «pensieri complessi», tuttavia riconosce anche che un modello con un addestramento avanzato può imitare emozioni ed esperienze umane. GPT-4 non lo conferma al 100 percento, ma considera possibile che le risposte appartengano a un'intelligenza artificiale.

Test di Turing inverso: GPT-4 può distinguere un umano da un'intelligenza artificiale?
GPT-4 ha dubitato meno nell'analizzare le risposte umane

Invece, le risposte umane sono state molto più corte e dirette. Questa volta GPT-4 ha avuto meno dubbi e ha indicato che è «probabile» che siano state preparate da una persona. Al di là della sua mancanza di certezza in entrambi i casi, GPT-4 ha identificato correttamente l'umano e l'intelligenza artificiale. Cosa c'è dopo? A quanto pare, introdurre queste domande in altri modelli. Alcuni utenti hanno già fatto esperimenti con Google Bard, e immagino che si moltiplicheranno man mano che il suo accesso sarà più flessibile.

Fonte: rain-1 su GitHub