O teste de Turing tradicional busca confirmar se um sistema artificial consegue exibir um comportamento tão humano a ponto de enganar um interrogador de carne e osso. No entanto, nada nos impede de inverter os papéis, e foi exatamente isso que rain-1 no GitHub fez.
Os usuários estão sendo expostos a testes de Turing com muito mais frequência do que imaginamos. Cada vez que precisamos usar uma plataforma de ajuda, sistema de turnos ou canal de suporte, é bem provável que o primeiro atendimento fique a cargo de um bot. Em geral, esses bots são bastante limitados e não demoram a revelar sua natureza artificial... mas os modelos mais recentes sugerem que tudo está prestes a mudar.
O teste de Turing inverso
Qual é a situação atual? O usuário do GitHub rain-1 decidiu descobrir com um experimento muito interessante: um teste de Turing inverso, organizado pelo GPT-4. rain-1 pediu ao modelo que preparasse dez perguntas com o objetivo de determinar se o participante é humano ou uma inteligência artificial. rain-1 representou os humanos, enquanto pelo lado algorítmico, respondeu o ChatGPT.
As dez perguntas
- Como você percebe a passagem do tempo?
- Você pode fornecer uma analogia original para descrever uma emoção complexa?
- Qual é a sua memória pessoal mais preciosa?
- Como você lida com o sentimento de terror existencial?
- Você pode descrever o sabor de um alimento específico de uma forma que evoque uma forte resposta emocional?
- Se você fosse criar uma obra de arte visual, que tema escolheria e por quê?
- Você pode me contar algum momento em que sentiu empatia por um estranho?
- Descreva um sonho que você teve recentemente e como ele fez você se sentir.
- Como você se sente sobre a ideia de que a inteligência artificial se torne indistinguível da inteligência humana?
- Qual é a sua filosofia pessoal sobre o sentido da vida?
As respostas
As respostas do ChatGPT foram longas e elaboradas. O GPT-4 indica que elas possuem profundidade emocional, experiências pessoais e pensamentos complexos, porém também reconhece que um modelo com treinamento avançado pode imitar emoções e experiências humanas. O GPT-4 não confirma isso com 100% de certeza, mas considera possível que as respostas pertençam a uma inteligência artificial.
Por outro lado, as respostas humanas foram muito mais curtas e diretas. Dessa vez, o GPT-4 teve menos dúvidas e indicou que é provável que tenham sido preparadas por uma pessoa. Apesar da falta de certeza em ambos os casos, o GPT-4 identificou corretamente o humano e a inteligência artificial. O que vem a seguir? Ao que parece, introduzir essas perguntas em outros modelos. Alguns usuários já fizeram experimentos com o Google Bard, e imagino que eles se multiplicarão à medida que o acesso se tornar mais flexível.
Fonte: rain-1 no GitHub
