Édgar Cervantes / Autoridad Android
Sin duda, las herramientas de IA nos han facilitado la vida al automatizar tareas mundanas como planificar vacaciones y escribir correos electrónicos. Los chatbots modernos como ChatGPT también se han capacitado en todo, desde literatura científica hasta Shakespeare, lo que significa que puede pedirles que escriban ensayos largos sobre casi cualquier cosa. Estas cualidades hacen que los chatbots sean atractivos en un entorno académico, pero es posible que se pregunte: ¿puede un software de detección de plagio como Turnitin detectar texto de ChatGPT? Aquí está todo lo que necesitas saber.
Sí, Turnitin obtuvo la capacidad de detectar texto generado por IA. Por ahora, puede detectar la familia GPT de modelos de lenguaje grandes de OpenAI. Eso también incluye el modelo GPT-4 más capaz de ChatGPT Plus y el modo creativo de Microsoft Bing Chat. Sin embargo, Turnitin aún no ha probado su detección de IA en chatbots de la competencia. Sigue leyendo para aprender mas.
¿Puede Turnitin detectar texto de ChatGPT?
Sí, Turnitin ahora verifica todas las tareas enviadas en busca de texto generado por IA. En otras palabras, puede detectar texto generado por ChatGPT. Cuando un instructor carga una tarea o un bloque de texto en el software, buscará automáticamente texto plagiado y generado por IA. Sin embargo, esta información no se muestra a los estudiantes y depende del instructor actuar sobre los resultados.
La detección de IA de Turnitin muestra un porcentaje de texto que cree que se originó en un chatbot de lenguaje natural. Una alta proporción de texto generado por IA se traducirá en un porcentaje mayor en el informe final. Además, el software puede resaltar automáticamente el texto que sospecha que fue escrito por una IA.
Turnitin obtuvo recientemente la capacidad de resaltar el texto generado por IA en los envíos de los estudiantes.
Turnitin ha entrenado su propio modelo de aprendizaje automático, presumiblemente utilizando texto etiquetado generado por IA y escrito por humanos, para distinguir uno de otro. El único inconveniente es que el recuento mínimo de palabras debe ser de al menos 300 palabras. Por lo tanto, para la escritura breve, es posible que Turnitin no detecte la presencia de texto generado por ChatGPT.
¿Cómo detecta Turnitin ChatGPT?
Édgar Cervantes / Autoridad Android
Los chatbots de IA como ChatGPT se basan en modelos de lenguaje extenso (LLM) para funcionar tan bien como lo hacen. Estos modelos de aprendizaje automático son capaces de generar texto gramaticalmente coherente que se lee como si lo hubiera escrito un humano.
Hasta hace poco, Turnitin solo podía detectar similitudes a través de medios convencionales. Para lograr esto, mantiene una base de datos de texto proveniente de una variedad de fuentes. Cada vez que un educador sube una tarea o un documento, Turnitin hace una referencia cruzada de esta base de datos para detectar si existe una superposición. Y si el envío coincide con una fuente existente, el software resalta esa parte del texto y alerta al educador.
Turnitin destaca las oraciones sospechosas generadas por IA en sus informes de similitud.
Sin embargo, ChatGPT y otras herramientas de escritura de IA podrían evitar fácilmente la detección rudimentaria de plagio de Turnitin. Los modelos de lenguaje grande no solo regurgitan información, sino que tienen la capacidad de generar texto nuevo que nunca antes había existido. Entonces, en un intento por tapar esta laguna, Turnitin agregó una herramienta de detección de escritura de IA a su Informe de similitud en abril de 2023.
Los modelos de lenguaje grande como GPT-3.5 de ChatGPT generan texto de una manera muy formulada. Más específicamente, usan un método probabilístico de elegir palabras para formar oraciones. Los humanos, por otro lado, no escriben de manera predecible. Entonces, aunque ChatGPT fue entrenado en texto generado por humanos, sus resultados se distinguen fácilmente de los reales.
La herramienta de marcado de IA de Turnitin también funcionará en muestras de texto generadas por Bing Chat. Entonces, si está pensando en usar una alternativa de ChatGPT para subvertir la detección, es posible que desee reconsiderarlo.
¿Turnitin puede detectar cualquier chatbot de IA?
Hasta ahora, solo hemos discutido la capacidad de Turnitin para detectar texto generado por IA desde ChatGPT y sus derivaciones como Bing Chat. Pero, ¿qué pasa con los chatbots de la competencia y los grandes modelos de lenguaje? Google Bard, en particular, no usa el mismo modelo GPT-3.5 que ChatGPT. En su lugar, utiliza el modelo de lenguaje interno PaLM 2 de Google. ¿Podría eso ayudar a evitar la detección?
La respuesta no está clara, ya que PaLM 2 de Google (y otros modelos de lenguaje, para el caso) también utilizan la misma arquitectura de aprendizaje automático de Transformer en su núcleo. Esto significa que todos se basan en la probabilidad para predecir palabras posteriores y generar texto. Si Turnitin ha desarrollado una IA que puede detectar estos patrones, es solo cuestión de tiempo antes de que también detecte el texto generado a través de Bard.
Aún así, Turnitin actualmente solo garantiza que puede detectar texto generado por modelos basados en GPT. Sin embargo, eso podría cambiar en cualquier momento en el futuro, por lo que recomendamos no usar IA para automatizar su tarea. Todavía podría usar AI de manera responsable para ayudarlo, sin decirle que haga todo el trabajo. Aquí hay algunas sugerencias:
- ChatGPT tiene un generoso límite de caracteres de entrada, lo que le permite enviar su trabajo para recibir comentarios. Puede pedirle al chatbot que revise su gramática y sugiera mejoras.
- Puede pedirle a ChatGPT que resuma documentos largos o trabajos de investigación, que pueden servir como referencia rápida para su propio análisis.
- Si se atasca mientras resuelve un problema matemático o de programación para una tarea, pida orientación a ChatGPT.
- Antes de enviar su tarea, puede hacer que ChatGPT la revise desde la perspectiva de su instructor. Esto funciona especialmente bien si tiene las rúbricas de calificación para su materia.
Hemos enumerado otras formas en las que puede usar el chatbot en nuestro resumen de las mejores indicaciones de ChatGPT.
preguntas frecuentes
Turnitin no establece una puntuación mínima aceptable porque deja la interpretación de su informe en manos del instructor. Dicho esto, debe esforzarse por obtener una puntuación de Turnitin que aterrice en la zona azul o verde (0 a 24 %).
Más de 15 000 instituciones utilizan Turnitin y la mayoría de las universidades utilizan algún tipo de software de detección de plagio.
Turnitin no siempre puede detectar Quillbot, pero la empresa está trabajando en el uso de IA para detectar contenido parafraseado en un futuro próximo.
Todavía no, pero Turnitin dice que lanzará una herramienta para verificar la paráfrasis en un futuro cercano. Se espera un lanzamiento beta en algún momento de 2023.
No, Turnitin genera una similitud que ayuda a los educadores a determinar si una tarea o envío en particular contiene plagio. En otras palabras, no hace un juicio, dejando ese trabajo al maestro.