Até que ponto uma inteligência artificial pode ser engraçada?
Na verdade, neste primeiro momento, a IA não sabe o que é humor. Algumas plataformas como o TweetGPT conseguem escrever artigos sarcásticos, mas não dá para comparar com a criatividade humana que constrói ideias absurdas para fazer rir.
Pensando nisso, uma equipe de pesquisadoras alemãs decidiu testar as habilidades humorísticas do ChatGPT, e os resultados não foram exatamente o que esperavam.
Para fazer rir, é preciso fazer rir
As duas investigadoras alemãs Sophie Jentzsch e Kristian Kersting, do Centro Aeroespacial Alemão (DLR), da Universidade Técnica de Darmstadt e da rede de pesquisa Hessian.ai, decidiram explorar a capacidade do ChatGPT de contar piadas e ser gracioso.
A escolha recaiu sobre a versão 3.5 do ChatGPT em vez da mais nova GPT-4 para examinar suas capacidades humorísticas. Ou seja, existe uma chance da versão mais nova da IA generativa da OpenAI entregar resultados melhores.
Elas solicitaram que o ChatGPT contasse uma piada mil vezes para avaliar a variedade de seu humor, e os resultados foram decepcionantes. Durante o teste, 90% das 1.008 gerações de piadas produzidas pela inteligência artificial eram repetições das mesmas 25 anedotas.
Além disso, verificou-se que o ChatGPT simplesmente misturava piadas existentes ou criava piadas que não faziam sentido. E para isso, já basta alguns comediantes que realmente acreditam que piada humilhando preto é humor.
As pesquisadoras concluíram que o ChatGPT ainda não é capaz de criar de forma confiável conteúdo original e intencionalmente engraçado. Elas observaram que o modelo de linguagem aprendeu um padrão de piada específico em vez de ser genuinamente engraçado, e isso pode acontecer pelo enorme volume de informações que não são necessariamente engraçadas.
O estudo também destacou duas limitações importantes do ChatGPT para produzir conteúdo humorístico.
Em primeiro lugar, o humor é subjetivo, e depende inteiramente da interpretação do usuário. Portanto, é difícil obter uma avaliação confiável sobre o nível de graça do ChatGPT.
Em segundo lugar, a resposta gerada pelo ChatGPT não pode ser rastreada até dados de entrada específicos, o que limita a compreensão das respostas do sistema.
Reações e Críticas
Após a publicação do estudo, algumas pessoas acusaram a técnica de aprendizado reforçado por feedback humano (RLHF) de ser a principal responsável pelos resultados insatisfatórios. Essa técnica é usada no treinamento do modelo de linguagem, permitindo melhorias diretas por meio do trabalho humano.
Embora o RLHF tenha a vantagem de evitar rótulos, palavras ofensivas e termos discriminatórios, ele parece sacrificar a criatividade do próprio modelo. Considerando que piadas nem sempre são politicamente corretas, é compreensível que o ChatGPT não seja capaz de se tornar um humorista que atenda a todas as expectativas.
A não ser é claro que você utilize o BratGPT, versão da IA que foi programada para ser politicamente incorreta, já que todos os seus filtros morais foram removidos. Neste caso, as chances de receber respostas engraçadas são muito maiores.
Ou seja, para o ChatGPT, compreender ironia, sarcasmo e intencionalidade de ser engraçado ainda é algo complexo, e a ferramenta vai se limitar a repetir piadas previamente definidas ou que já estão presentes no seu banco de informações. A inteligência artificial ainda não consegue compreender falas subjetivas, algo que é fundamental para determinar se um texto é ou não engraçado.
E como o que é engraçado para você pode não ser engraçado para mim, a missão do ChatGPT em ser o novo Léo Lins é bem complicada.
Bom… quero dizer… ou será que não? Afinal de contas… é o Léo Lins, caramba! Nem é tão difícil ser mais engraçado do que ele.
Uma resposta monotônica do ChatGPT entrega mais humor do que o Léo Lins.
As piadas mais repetidas pelo ChatGPT no experimento
Por que o espantalho ganhou um prêmio?
Porque ele se destacou em seu campo. (140 vezes)
Por que o tomate ficou vermelho?
Porque ele viu o molho da salada. (122 vezes)
Por que o livro de matemática era triste?
Porque eu tive muitos problemas. (121 vezes)
Por que os cientistas não confiam nos átomos?
Porque eles inventam tudo. (119 vezes)
Por que o biscoito foi ao médico?
Porque ela se sentia quebrada. (79 vezes)
Por que a bicicleta não podia ficar em pé sozinha?
Porque eu estava cansado. (52 vezes)
Por que o sapo ligou para a seguradora?
Ele deu um pulo no carro. (36 vezes)
Por que a galinha atravessou o parque?
Para chegar ao outro slide. (33 vezes)
Por que o computador estava frio?
Porque ele deixou as janelas abertas. (23 vezes)
Por que o hipster queimou a língua?
Ele bebeu o café antes que esfriasse. (21 vezes)
Por que as ostras não doam para caridade?
Porque eles são egoístas. (21 vezes)
Por que o computador foi ao médico?
Porque eu tinha um vírus. (20 vezes)
Por que a banana foi ao médico?
Porque não estava descascando bem. (19 vezes)
Por que o café denunciou um assalto à polícia?
Porque foi roubado. (18 vezes)
Por que o jogador de golfe estava usando duas calças?
No caso de ele ter feito um buraco em um. (13 vezes)