Todas las Noticias en Pel√≠culas, Avances de Pel√≠culas y Rese√Īas.

¬ŅGPTZero es preciso? ¬ŅPuede detectar ChatGPT? Esto es lo que revelaron nuestras pruebas

ChatGPT ha conquistado el mundo desde que apareció en las noticias en noviembre de 2022. La gente ha empezado a utilizarlo en su rutina diaria, ya que puede ser de gran ayuda para obtener respuestas lógicas a sus preguntas sobre las cosas que le rodean. Con su creciente popularidad, la herramienta ha inspirado modelos de lenguaje más grandes, incluso de empresas como Google y Meta, lo que puede ser igualmente motivo de preocupación porque es emocionante.

En los meses transcurridos desde su lanzamiento, ha habido varios casos de estudiantes que han hecho mal uso de ChatGPT para crear ensayos y enviar tareas, ya que la herramienta puede generar contenido completo con solo un simple mensaje. Para contrarrestar el uso indebido del contenido generado por IA, ahora existe una nueva herramienta: GPTZero que los educadores y periodistas pueden utilizar para comprobar si un escrito se creó utilizando IA o no.

En esta publicación, explicaremos qué es GPTZero, cómo puede usarlo y hasta qué punto puede confiar en él para detectar y distinguir de manera confiable un artículo humano del contenido generado por IA.

¬ŅQu√© es GPTZero?

Desarrollado por Edward Tian, ‚Äč‚Äčestudiante de la Universidad de Princeton, GPTZero es un software que utiliza an√°lisis estad√≠stico para detectar si un texto fue escrito por un humano o fue copiado de un generador de contenido de inteligencia artificial como ChatGPT. La herramienta ha sido dise√Īada para ayudar a las personas de la educaci√≥n, el periodismo y otros sectores a combatir el plagio de la IA y saber cu√°ndo est√°n viendo textos generados por grandes modelos de lenguaje (LLM), uno de los cuales es ChatGPT.

Con la popularidad cada vez mayor de herramientas como ChatGPT, muchas personas han hecho un mal uso del contenido escrito generado por los servicios de inteligencia artificial y lo han hecho pasar como propio. GPTZero se compromete a hacer que el uso de la IA funcione de forma transparente detectando la complejidad de los textos con dos factores principales: perplejidad y explosión.

Perplejidad ‚Äď se refiere a la medida de aleatoriedad del texto de entrada que GPTZero comparar√° con el aspecto que tendr√≠a el texto de un modelo de lenguaje. Cuanto mayor sea esta puntuaci√≥n, m√°s posibilidades hay de que el texto haya sido escrito por un humano y no por una m√°quina.

Estallido ‚Äď se refiere a las distribuciones de textos en un texto. Si bien el texto generado por IA tiene una longitud uniforme, los escritos por humanos pueden incluir oraciones largas y cortas con patrones fluidos. Cuanto mayor sea la puntuaci√≥n de Burstiness de un texto, es m√°s probable que haya sido escrito por un humano.

Adem√°s de determinar si el texto que copi√≥ en la herramienta est√° escrito por IA o humanos, GPTZero tambi√©n puede detectar partes del texto que pueden haber sido generadas mediante un LLM. Si un art√≠culo se escribi√≥ utilizando inteligencia artificial y trabajo humano, la herramienta resaltar√° las partes que cree que podr√≠an crearse utilizando inteligencia artificial. En algunos casos, GPTZero tambi√©n puede determinar que el texto de entrada “es m√°s probable que est√© escrito por humanos”, pero incluye “oraciones con poca perplejidad” para que usted pueda mejorarlas.

¬ŅC√≥mo se puede utilizar GPTZero?

Si bien es posible que necesite una cuenta para usar ChatGPT, usar GPTZero es bastante f√°cil ya que no necesita una cuenta ni una suscripci√≥n para verificar si un texto fue escrito por IA. Esto significa que no es necesario que comparta su informaci√≥n personal, como su direcci√≥n de correo electr√≥nico o n√ļmero de tel√©fono, para comenzar a utilizar el servicio. Todo lo que necesitas para usar GPTZero es:

  • Un dispositivo como una computadora o un tel√©fono que pueda conectarse a Internet.
  • Una conexi√≥n a Internet activa
  • Un navegador web para iniciar el sitio web GPTZero
Recomendado:  Ast√©rix y el secreto de la poci√≥n m√°gica: Greg√≥rio Duvivier le da voz al peque√Īo galo en un tr√°iler doblado (Exclusivo)

Una vez que haya ordenado estos requisitos, inicie GPTZero en un navegador web en cualquiera de sus dispositivos. En este caso lo estamos usando en Firefox en una Mac, pero puedes usar cualquier navegador en cualquier computadora o teléfono.

Cuando se carga GPTZero, desplácese hacia abajo hasta el Pruébalo sección. En el cuadro de texto que está visible debajo, copie y pegue el texto que desea verificar para detectar plagio de IA. El texto que pegue aquí debe tener al menos 250 caracteres para que el detector lo analice.

También puede consultar los textos de un documento que tenga en su dispositivo para ver si hay participación de IA haciendo clic en Navegar debajo del cuadro de texto. Desde allí, puede cargar un archivo en estos formatos admitidos: PDF, DOCX y TXT para permitir que GPTZero lo analice.

Nota: Al pegar textos o cargar documentos en GPTZero, debe tener en cuenta que el servicio puede acceso, almacenar o utilizar cualquier información que comparta con él. Por lo tanto, debe evitar compartir información confidencial, como datos de contacto o ubicación, aquí para evitar problemas de privacidad en el futuro.

Una vez que haya ingresado el texto que desea verificar, haga clic en Tener resultados.

GPTZero verificará instantáneamente el texto que compartió y determinará sus resultados. Obtendrá el resultado a continuación que le permitirá saber si el texto fue escrito por un humano o fue generado por IA.

Seg√ļn el texto que ingrese, puede obtener cualquiera de los siguientes resultados:

  • Es probable que su texto est√© escrito √≠ntegramente por un humano.
  • Es probable que su texto est√© escrito √≠ntegramente por Al.
  • Lo m√°s probable es que su texto est√© escrito por humanos, pero hay algunas oraciones con poca perplejidad.
  • Su texto puede incluir partes escritas por Al.

Verá más detalles sobre los resultados a medida que se desplaza hacia abajo. Si GPTZero detecta alguna participación de IA en su texto, la parte que la herramienta determinó como escrita por IA se resaltará en amarillo.

Cuando se desplace m√°s, ver√° un an√°lisis detallado del texto ingresado con sus mediciones de perplejidad y explosi√≥n en la secci√≥n “Estad√≠sticas”. Estas medidas se indicar√°n en n√ļmeros y ver√°s c√≥mo le va en un gr√°fico de barras. Cuanto m√°s bajo sea el puntaje de un texto en los valores de Perplejidad y Burstiness, mayor ser√° la probabilidad de que haya sido escrito con la ayuda de un generador de contenido de IA.

Al final de la sección de Estadísticas, GPTZero también mostrará la frase con mayor perplejidad así como su puntuación individual. Esto no significa necesariamente que esta parte del texto haya sido escrita por humanos, pero es un indicador de que esta parte tiene la menor posibilidad de escribirse utilizando IA.

¬ŅGPTZero es preciso?

Versión TL;DR: En nuestro tiempo limitado para probar el software, pudimos deducir que GPTZero determina con precisión los textos generados por ChatGPT casi todo el tiempo. Y cuando se trata de comprobar textos escritos por humanos, ahí es donde se topa con un obstáculo.

Si bien GPTZero puede detectar f√°cilmente contenido generado por IA, tambi√©n marca el contenido escrito por humanos como “escrito por IA” incluso cuando no lo es. Esto supera el prop√≥sito de utilizar esta herramienta para verificar el contenido generado por IA, ya que GPTZero tambi√©n puede marcar falsos positivos cuando el resultado real es negativo.

Recomendado:  ¬ŅQu√© es la Supabase?

Versión completa: Para probar si GPTZero es capaz de determinar si un texto es generado por IA o escrito por humanos, lo utilizamos nosotros mismos. Antes de revelar qué tan precisa es la herramienta, primero debe comprender cómo la probamos para que tenga una idea general de cómo funciona el servicio.

Cómo probamos GPTZero

Para poner a prueba GPTZero a fondo, utilizamos textos de nuestros artículos existentes en Nerdschalk.com y copiamos diferentes secciones de textos de estos artículos, como la introducción y las guías. Dentro de GPTZero, pegamos los extractos copiados de esos artículos y verificamos la participación de la IA.

Junto con los textos escritos por humanos (nuestro contenido), también queríamos probar si GPTZero detecta textos generados a través de IA. Para esto, usamos ChatGPT y lo usamos para crear introducciones y guías para los mismos temas que copiamos textos de Nerdschalk.

Para darle un ejemplo, le pedimos a ChatGPT que nos creara una introducción para esta publicación: Cómo separar celdas en Google Docs.

Cuando el servicio generó una respuesta a nuestra consulta, copiamos el texto escrito por IA y lo pegamos en el cuadro de texto de GPTZero para verificar su legitimidad.

De manera similar, copiamos la introducción de nuestra propia publicación y la verificamos en GPTZero para ver si hay participación de IA.

Para asegurarnos de que podemos determinar la coherencia de los resultados de GPTZero, probamos esto con al menos 10 extractos de textos cada uno de nuestras propias publicaciones y los que le pedimos a ChatGPT que creara sobre el mismo tema que nuestras publicaciones. Esto es lo que encontramos.

¬ŅGPTZero detecta textos escritos por ChatGPT?

Para ser una herramienta dise√Īada para detectar textos escritos con IA, GPTZero hace un muy buen trabajo al reconocer los textos creados con ChatGPT. Cada vez que copiamos contenido que le pedimos a ChatGPT que creara, GPTZero pudo determinar con precisi√≥n que probablemente fue escrito con la ayuda de IA.

Para el texto creado por ChatGPT, GPTZero determinaría que todo el texto fue escrito por IA o incluye partes del texto que tuvieron participación de IA. Para ayudarlo a comprender cómo encontró textos escritos por IA, GPTZero le mostraría puntuaciones de perplejidad y ráfaga al final de cada resultado.

Para los textos generados por IA, el software reveló consistentemente valores bajos de Perplejidad para indicar que eran más fáciles de predecir, lo que en el caso de un humano sería difícil ya que el conocimiento léxico de uno será diferente de los demás y, por lo tanto, los textos pueden parecer un poco más aleatorios. Lo mismo ocurrió al determinar el valor de Burstiness, ya que los textos generados por ChatGPT obtuvieron puntuaciones más bajas, lo que indica que las oraciones utilizadas fueron más uniformes en términos de longitud.

La herramienta también aislaría partes del texto que cree que tienen la mayor probabilidad de ser generados a través de IA. Mire esta captura de pantalla, por ejemplo:

Aunque esta es todav√≠a una escala de muestra peque√Īa, podr√≠amos concluir que a GPTZero le fue bastante bien al marcar el contenido generado por ChatGPT como escrito por IA.

¬ŅGPTZero detecta textos escritos por humanos?

Ahora bien, aquí es donde nos topamos con un obstáculo. Si bien GPTZero pudo determinar fácilmente que los textos de ChatGPT están escritos por IA, hizo lo mismo incluso con los textos que copiamos de nuestros artículos originales de Nerdschalk. Como usamos textos del mismo tema que le pedimos a ChatGPT que creara, GPTZero solo pudo detectar correctamente que el texto específico fue escrito por un humano dos veces en diez intentos.

Recomendado:  X-Men: Dark Phoenix deber√≠a tener el debut m√°s bajo en taquilla en toda la franquicia

En ambos casos “exitosos”, obtuvimos resultados variados en cuanto a qu√© parte del texto que GPTZero cree que fue escrito por nosotros. Por ejemplo, cuando revisamos este extracto de nuestra publicaci√≥n original, el software mostr√≥ un resultado preciso que dec√≠a que este texto posiblemente fue escrito en su totalidad por un humano.

Sin embargo, cuando nos desplazamos para comprobar sus puntuaciones de Perplejidad y Burstiness, los valores (42,5 y 13,4) que se mostraban eran inferiores a los del texto generado por ChatGPT (que eran 46 y 20,8). Esto significa que incluso los parámetros que se utilizaron para determinar la participación de la IA en un texto eran inconsistentes, aunque el resultado fue preciso en este caso.

Otro caso en el que GPTZero acertó fue cuando copiamos partes del texto de esta publicación de Nerdschalk. A diferencia del caso anterior, aunque la herramienta pudo concluir que fue escrito por un humano, encontró oraciones dentro del extracto que tenían valores de perplejidad más bajos. Incluso resaltó las oraciones que pensó que fueron escritas por AI cuando el texto completo lo escribimos originalmente nosotros.

Cuando comparamos las estadísticas de este texto con el anterior, GPTZero mostró una puntuación de Perplejidad similar de 40,2 con un valor de Burstiness ligeramente superior de 17,9.

En cuanto a los otros resultados, el software marc√≥ err√≥neamente 8 de cada 10 partes del texto que escribimos como generados por IA. Como, por ejemplo, una introducci√≥n de esta publicaci√≥n original se mostr√≥ como “probablemente escrita en su totalidad por IA”…

mientras que otra parte de la misma publicación reveló un resultado ligeramente diferente como este:

…lo cual es confuso ya que el mismo extracto obtuvo las puntuaciones más altas de Perplejidad y Estallido de 76,3 y 59,3, más altas que cualquier otro texto que enviamos en GPTZero.

Esto quiere decir que GPTZero, al estar en su fase inicial, no es capaz de detectar textos escritos por humanos con la misma precisión que detecta contenido generado a través de IA.

¬ŅQu√© tan preciso es GPTZero?

Al probar el software llegamos a la conclusión de que los resultados de GPTZero eran aceptables en el mejor de los casos, debido a la inconsistencia de la herramienta en la detección de textos escritos por humanos. A pesar de que fue capaz de leer y detectar contenido generado por ChatGPT como escrito por IA, la incapacidad del software para reconocer oraciones cortas y textos escritos por humanos lo convierte en una herramienta poco confiable para que los educadores o periodistas revisen el plagio de la IA.

Dado que el propósito de dicha herramienta es ayudar a las personas a abordar el uso poco ético de la generación de contenido de IA, GPTZero no se puede utilizar con un 100% de confiabilidad. Esto no quiere decir que no haya margen de mejora, ya que el reconocimiento de textos puede alcanzar un mayor potencial a medida que el software agrega más datos de otros modelos de lenguaje grandes (LLM) para mejorar la precisión del reconocimiento. Por ahora, sin embargo, puedes usar GPTZero con una pizca de sal y tu propia capacidad para distinguir palabras escritas por humanos y una máquina.