Guía completa para detectar el plagio de chatbot de IA

Los chatbots de IA como ChatGPT no se limitan a responder a sus preguntas. Pueden escribir correos electrónicos similares a los humanos, cartas de presentación, ensayos, poesía, entradas de blog y mucho más.

La escritura con AI es como un camaleón: puede mezclarse con cualquier otro tipo de escritura tan bien que le costará distinguirla.

Por desgracia, esto hace que a los humanos nos resulte increíblemente difícil detectar cuándo ha escrito algo una IA en lugar de una persona. Claro, todos podríamos seguir el consejo de Sherlock Holmes y "eliminar lo imposible", pero ¿quién tiene tiempo para eso?

¿Y si le digo que el párrafo anterior está escrito por una IA? Sí, le pedí a YouWrite que escribiera una introducción rápida para este post, y esto es lo que se le ocurrió. Bastante convincente, ¿verdad? Ese es el problema, es demasiado convincente para que cualquiera pueda presentarlo como su propio trabajo y beneficiarse de ello.

Las IA no se limitan a reformular el contenido, sino que aprenden el tema y lo presentan en un lenguaje natural utilizando RLHF. Esto significa que el contenido generado no parecerá robótico al leerlo ni podrá compararse con los datos disponibles en línea para detectar plagios.

Detectar el contenido generado por la IA no es fácil, y no voy a darle falsas esperanzas de que pueda detectarlo con una precisión del 100%. Sin embargo, con un poco de trabajo detectivesco y algo de ayuda de las herramientas de detección de escritos de IA, podrá atrapar la mayoría de las obras de IA.

A continuación encontrará formas manuales de detectar el plagio de IA y también algunas herramientas automáticas.

Herramientas para detectar el plagio de IA

Hay un montón de herramientas disponibles que pueden detectar contenidos escritos con IA. Sin embargo, su precisión es diferente entre sí y pueden fallar en función del tipo de contenido y de su longitud.

He probado estas herramientas utilizando diferentes tipos de contenidos generados por ChatGPT, GPT-3 Parque infantil, WriteSonic, Rytr y YouWrite. Consiguieron detectar todos los tipos de contenido generados por ChatGPT y GPT-3 Playground.

Aunque obtuvieron resultados dispares para las herramientas dedicadas a la escritura, curiosamente todas ellas no detectaron YouWrite; supongo que se debe a que YouWrite comete errores similares a los humanos a propósito para evitar ser detectado.

Le recomendaré que utilice estas herramientas junto con la comprobación manual del contenido. En primer lugar, analice el contenido con una de estas herramientas y después compruebe manualmente si hay alguna pista que confirme aún más la sospecha.

A continuación enumero las que ofrecieron los mejores resultados y son las más fáciles de utilizar:

Nota: Para la demostración, voy a utilizar el texto generado por WriteSonic sobre los "Beneficios de los mangos".

#1. IA de originalidad

Escanear contenidos generados por la IA a gran escala puede suponer un reto importante para muchos editores web. Sin embargo, tengo la solución perfecta para usted. Originalidad AI puede comprobar todo su contenido y evaluar el riesgo de que todo su sitio web se vea afectado por futuras actualizaciones de IA de Google.

También me gustaría destacar una característica que aprecio especialmente de Originality AI es su capacidad de detección de IA multilingüe. Esta característica elimina las barreras lingüísticas a escala mundial, ya que admite 15 idiomas.

#2. Contenido a escala

El detector de contenidos AI de Contenido At Scale me pareció el más preciso en la mayoría de las pruebas que realicé. Le permite escanear hasta 2500 caracteres por escaneado y realiza una predicción porcentual que muestra la densidad de contenido real o falso.

Si el contenido es falso en más de un 60%, es seguro suponer que está escrito por IA, al menos en su mayor parte. En la siguiente captura de pantalla, puede ver dice que el 96% del contenido es falso, que he generado totalmente con IA.

#3. GPTZero

Si quiere ver exactamente qué contenido está generado por IA, entonces GPTZero es una buena opción. GPTZero no puntúa el contenido. En su lugar, destaca el contenido exacto que probablemente ha sido generado por IA.

Aunque sí muestra puntuaciones de perplejidad y explosividad para hacerse una idea de la aleatoriedad del texto, lo más importante es que admite 5000 caracteres por escaneado y también puede cargar archivos. Escanear contenidos de gran tamaño ayuda mucho a mejorar la precisión.

#4. Detector de salida GPT-2

Los creadores de ChatGPT también ofrecen un bot para detectar su propio trabajo. Como GPT-2 y GPT-3 sólo se diferencian en el total de datos utilizados para el entrenamiento, este detector de GPT-2 también funciona bien para las IAs basadas en GPT-3.

No hay límite en la cantidad de contenidos que puede escanear, por lo que es perfecto para detectar contenidos muy largos generados por la IA. Su precisión también me pareció buena, especialmente para los contenidos generados por ChatGPT. Sin embargo, es un poco flojo en las predicciones, así que sólo considere sus resultados cuando muestre más del 50% del contenido como falso.

#5. Detector de contenidos Writer AI

Los resultados de Writer AIContenido Los detectores son cuestionables cuando detectan contenido de herramientas de escritura de IA, pero funciona muy bien para el contenido generado por ChatGPT. Puede escanear 1500 caracteres por escaneo e incluso añadir la URL del contenido si ya está publicado.

Para mi texto de prueba generado por IA, dijo que el 94% del contenido es generado por humanos, lo que está bastante lejos en comparación con otras herramientas. No obstante, sigue mereciendo la pena utilizarla para detectar contenidos ChatGPT, sobre todo si ya están publicados.

#6. Borrador y meta

Una herramienta de detección de escritura AI sencilla pero potente. En mi experiencia, Borrador & Goal ofreció resultados similares a Content At Scale, pero no tiene un límite de recuento de palabras para que pueda escanear escritos largos. Sin embargo, su tiempo de escaneado aumenta en función de la cantidad de contenido que escanee.

Para mi texto de ejemplo, dice que el 94% del texto está generado por IA.

Detecte manualmente el plagio de IA 🕵️

ChatGPT ni siquiera es un gran problema cuando se trata de plagio de IA. Hay muchos herramientas alternativas que se basan en la misma tecnología GPT-3 y están construidas para la escritura. Éstas son muy avanzadas y están hechas específicamente para crear contenidos similares a los humanos que son difíciles de atrapar.

Las herramientas de detección automática fallan un poco dependiendo del tipo de contenido, la longitud y la complejidad. Así que, al menos en la actualidad, conectar manualmente los puntos para averiguar si la redacción está generada por IA o no es la mejor manera.

A continuación he enumerado algunas pistas comunes que podría buscar para detectar contenidos generados por IA.

#1. Información obsoleta

ChatGPT y otras IA basadas en GPT-3 vieron sus conocimientos recortados a finales de 2021. Aunque algunos robots de IA tienen un motor de búsqueda incorporados para buscar la información más reciente, siguen basándose en datos antiguos para escribir contenidos de formato largo como ensayos o entradas de blog.

Si observa que la redacción habla constantemente de datos obsoletos, concretamente anteriores a 2021, entonces podría tratarse de datos generados por IA.

En la siguiente captura de pantalla, le pedí a YouWrite que me hablara de la reciente Copa Mundial de la FIFA, y esto es lo que se me ocurrió.

Habla del Mundial de 2018 en lugar del reciente de 2022. Aunque la herramienta está actualizada para hablar de acontecimientos recientes como el Mundial de 2022, para escribir posts largos sigue utilizando los datos obsoletos en los que se basa.

#2. Utiliza la misma estructura de frases para las descripciones

Al escribir descripciones de varios productos/aplicaciones, la AI suele utilizar la misma estructura de frases que edita para adaptarla a la descripción de un producto. Las descripciones suelen empezar con la misma palabra, como El, Ello, A, o el nombre del producto. Las descripciones también tienen un enfoque específico que repite.

Por ejemplo, a continuación, le pedí a ChatGPT que me hablara de "sitios web de trabajos de entrada de datos". Puede ver que todas las descripciones empiezan por "A" y tienen un enfoque estricto.

También le hice la misma pregunta a YouChat, que hizo lo mismo y repitió el nombre de cada sitio web al principio, y las propias descripciones parecen una versión reformulada de cada una.

Si la redacción que está analizando tiene una descripción de naturaleza similar, es una buena forma de detectar la escritura de IA.

#3. Utiliza frases cortas

En la mayoría de los escritos, la IA utilizará frases de una sola línea con una sola coma como máximo. Quizá intenten minimizar la posibilidad de error, pero evitan escribir frases largas que puedan requerir el uso de dos puntos, punto y coma o líneas horizontales gruesas.

Sé que ésta no es la mejor pista para detectar la escritura con IA, pero vale la pena tenerla en cuenta para probar aún más su sospecha.

#4. Puede proporcionar información incorrecta

En el caso de preguntas complejas que suelen implicar algún tipo de instrucción, la IA puede no entender la intención y proporcionar información incorrecta. No estoy hablando aquí de información obsoleta, simplemente le dicen con confianza la información incorrecta cuando no comprenden el tema.

Por ejemplo, le pedí a YouWrite que me dijera "cómo hacer root a un teléfono Android sin un PC". Aún así me mostró métodos que implican el uso de un PC en algún momento de la instrucción.

#5. No añade una opinión personal

Cuando habla de algo, la IA se limita a hablar de hechos conocidos. A diferencia de los humanos, no hablará de su experiencia personal con ello. Aunque se puede instruir a las IA para que creen una redacción práctica, tienden a evitar hacerlo por defecto.

Si observa que la redacción sólo habla de hechos conocidos, es muy probable que esté escrita por una IA. Por ejemplo, al hablar de una aplicación, hablará de sus características en lugar de lo fluida que es la navegación o de cómo utilizar realmente la aplicación.

#6. Breves explicaciones

Como las IA están limitadas por los conocimientos de que disponen en ese momento, tienden a escribir explicaciones y descripciones breves. En mi experiencia, si hablan de un tema concreto -como el rooting de Android- mantienen la explicación en 2-3 párrafos como máximo. Y para cosas como aplicaciones o productos, la descripción no suele superar 1 párrafo.

Los humanos pueden escribir en profundidad sobre algo, incluyendo características, limitaciones, experiencia personal, precios, etc. Por otro lado, la IA suele centrarse en las características principales o más destacadas, por lo que la redacción también es breve. Si el instructor pide más detalles, la posibilidad de que la información sea incorrecta aumenta considerablemente.

#7. Compruebe el historial del escritor

Como profesor o webmaster, si tiene acceso a los trabajos o tareas anteriores del escritor, puede ser una buena idea compararlos con el escrito del que sospecha. Es muy poco probable que el escritor tenga un estilo de escritura similar al de una IA. Aunque la IA puede cambiar el tono de la escritura, los estilos que elige son más bien genéricos y no puede copiar su tono.

Tomemos el ejemplo del párrafo generado por la IA en la introducción de este post. Cualquiera que haya leído mis anteriores posts puede ver fácilmente que mi estilo de escritura es totalmente diferente en comparación con él.

Basta con leer 2-3 trabajos anteriores del escritor y ver si coincide con el estilo de redacción del sospechoso escrito.

Mis pensamientos 💭

Personalmente, creo que la ayuda de la AI es una forma estupenda de eliminar el bloqueo del escritor, obtener toda la información en un solo lugar y encontrar inspiración. Sin embargo, nunca debería sustituir a la escritura humana, ya que la AI se limita a los conocimientos ya conocidos.

También puede explorar algunas de las mejores herramientas de comprobación de plagio para evitar las copias.