En la era de la inteligencia artificial, no sorprende que las máquinas se estén volviendo rápidamente más inteligentes y avanzadas. Sin embargo, un estudio reciente muestra que cuando se trata de contabilidad, los humanos todavía reinan.
El estudio, realizado por la Universidad Brigham Young y otras 186 universidades, enfrentó a ChatGPT con estudiantes universitarios de contabilidad reales. Los investigadores querían ver cómo le iría a la IA frente a seres humanos reales, y los resultados fueron reveladores.
ChatGPT necesita más trabajo
Si bien ChatGPT ciertamente ha causado sensación desde su debut en noviembre de 2022, con la impresionante cifra de 100 millones de usuarios en menos de dos meses, parece que sus habilidades contables podrían necesitar algo de trabajo.
De hecho, según el estudio, los estudiantes obtuvieron mejores resultados que ChatGPT en general, con una puntuación media del 76,7% en comparación con la puntuación del bot del 47,4%.
Por supuesto, ChatGPT tuvo algunos momentos de gloria. Tuvo un desempeño particularmente bueno en sistemas de información contable (AIS) y preguntas de auditoría, obteniendo una puntuación superior al promedio de los estudiantes en el 11,3% de las preguntas.
Sin embargo, cuando se trataba de evaluaciones fiscales, financieras y administrativas, ChatGPT tuvo problemas con los procesos matemáticos necesarios para este tipo de preguntas.
ChatGPT también tuvo problemas con ciertos tipos de preguntas. Obtuvo mejores resultados en preguntas de verdadero/falso y preguntas de opción múltiple, pero tropezó con preguntas de respuesta corta.
De hecho, las preguntas de orden superior resultaron ser más difíciles de responder para el chatbot. Los investigadores también notaron que ChatGPT a veces proporcionaba respuestas incorrectas junto con descripciones escritas autorizadas, o proporcionaba descripciones precisas pero seleccionaba la respuesta de opción múltiple incorrecta.
A pesar de estas deficiencias, los investigadores detrás del estudio ven un gran potencial para ChatGPT en el futuro. Creen que podría utilizarse para mejorar la enseñanza y el aprendizaje y para ayudar a diseñar y probar tareas.
“Tarea de bobo”
Si bien ChatGPT puede no ser perfecto, está claro que la tecnología avanza rápidamente y seguramente mejorará exponencialmente en los próximos años.
El autor principal del estudio, David Wood, enfatiza que los investigadores no intentan centrarse en los aspectos negativos del rendimiento de ChatGPT. En cambio, quieren resaltar lo que la tecnología puede hacer ahora y que antes no podía hacer.
“Estamos tratando de centrarnos en lo que podemos hacer con esta tecnología para mejorar el proceso de enseñanza para los profesores y el proceso de aprendizaje para los estudiantes”, dijo en un comunicado de prensa.
Al final, parece que si bien ChatGPT puede tener que ponerse al día en el ámbito de la contabilidad, no se puede negar que es un punto de inflexión que cambiará la forma en que enseñamos y aprendemos. Como dice Jessica Wood, una de las estudiantes que participó en el estudio, “Tratar de aprender únicamente usando ChatGPT es una tontería”.
A pesar de los desafíos descubiertos en el estudio, los autores siguen siendo optimistas de que GPT-4 mejorará significativamente su desempeño en cuestiones contables y abordará las preocupaciones que mencionaron.
Se sienten particularmente alentados por el potencial del chatbot para mejorar la experiencia educativa, como facilitar la creación y evaluación de tareas o ayudar potencialmente en la creación de borradores de proyectos.
Los hallazgos del estudio fueron publicado en la revista Issues in Accounting Education.
ⓒ 2023 . .
