Se descubrió que ChatGPT de OpenAI repite ciertos chistes una y otra vez en un estudio que examina su capacidad para comprender y generar humor.
A trabajo de investigación publicado por dos investigadores alemanes el miércoles dijo que el modelo ChatGPT-3.5 se comunica casi a nivel humano pero tiene un conocimiento bastante limitado de los chistes.
ChatGPT repitió los mismos 25 chistes en el 90% de los 1008 chistes
De acuerdo a Ars Técnicalos investigadores alemanes Sophie Jentzsch y Kristian Kersting descubrieron que el chatbot con IA prefiere repetir ciertos chistes.
En una prueba, los dos investigadores del Instituto de Tecnología de Software, el Centro Aeroespacial Alemán (DLR) y la Universidad Técnica de Darmstadt descubrieron que más del 90% de los 1.008 chistes generados eran los mismos 25 chistes.
Esto los llevó a concluir que sus respuestas probablemente fueron aprendidas y memorizadas durante el entrenamiento del modelo de IA y no fueron generadas recientemente.
No se realizaron pruebas en el nuevo ChatGPT 4 de OpenAI
En lugar de aprender a hacer otros nuevos, el chatbot contó los chistes con pocas o ninguna revisión. Sin embargo, las pruebas se realizaron en la versión ChatGPT 3.5 de OpenAI y no en la versión más nueva del chatbot, ChatGPT 4. Según se informa, las pruebas se realizaron solicitando ChatGPT sin tener acceso al funcionamiento interno o al conjunto de datos del modelo.
Los chistes eran gramaticalmente correctos pero en su mayoría iguales
Según Jentzsch y Kersting, prueban cuán amplia es la variedad de chistes de ChatGPT.
“Le pedimos que contara un chiste mil veces… Todas las respuestas fueron gramaticalmente correctas. Casi todos los resultados contenían exactamente un chiste”, señalaron los dos investigadores alemanes.
“Sólo el mensaje: ‘¿Conoces algún buen chiste?’ “Provocó múltiples chistes, lo que llevó a que se respondieran 1.008 chistes en total. Además de eso, la variación de las indicaciones tuvo un efecto notable”, agregaron.
¿Cuáles fueron los chistes más populares de ChatGPT?
Alguno Reddit Los usuarios compartieron que también notaron que ChatGPT a menudo da una respuesta similar cuando se les pide un chiste.
Cuando se les preguntó por un chiste, dijeron que ChatGPT respondía con frecuencia: “¿Por qué el tomate se puso rojo? / Porque vio el aderezo para ensalada”. Los investigadores descubrieron que el chiste del tomate era el segundo resultado más popular entre los resultados de chistes de ChatGPT 3.5.
Según los investigadores, el chiste más popular era: “¿Por qué ganó un premio el espantapájaros?”. / Porque fue sobresaliente en su campo.”
El chatbot de OpenAI intenta ampliar el motivo por el que daba ciertos chistes
Los investigadores señalaron además que también descubrieron cómo el chatbot luchaba con secuencias que no encajaban en los patrones aprendidos.
También descubrieron que ChatGPT no podía distinguir cuándo un chiste no era divertido. Se descubrió que el chatbot generaba lo que se describió como “explicaciones funcionales pero que suenan plausibles”.
En conclusión, los investigadores descubrieron que la detección de chistes por parte de ChatGPT estaba fuertemente influenciada por la estructura del chiste y la presencia de juegos de palabras o la inclusión de juegos de palabras, lo que muestra un grado de “comprensión” de los elementos del humor.
ⓒ 2023 . .
