Las universidades australianas están divididas sobre si adoptar una nueva herramienta que pretende detectar el plagio generado por IA con una tasa de éxito casi perfecta, citando preocupaciones sobre modelos desactualizados y el aviso mínimo que se le dio al sector para evaluar el problema.
La herramienta de detección de Turnitin, lanzada este mes, cita una tasa de eficacia del 98 % para detectar la «alta probabilidad» de IA.
id=»2c1ce56d-7e12-48e1-a86a-a027796304d3″ data-spacefinder-role=»richLink» data-spacefinder-type=»model.dotcomrendering.pageElements.RichLinkBlockElement» class=» dcr-11ra563″>
De casi una docena de universidades que respondieron a Guardian Australia, la Universidad de Melbourne, la Universidad de Nueva Gales del Sur y la Universidad de Western Sydney adoptaron la herramienta y varias estaban considerando integrarla en sus programas de detección.
Pero otros dijeron que la herramienta Turnitin se apresuró y expresaron inquietudes sobre su eficacia.
La profesora asociada de aprendizaje digital de la Universidad de Deakin, Trish McCluskey, dijo que a pesar de la supuesta alta tasa de eficiencia de Turnitin, no había tenido la oportunidad de probar la afirmación antes del lanzamiento público de la herramienta.
“A los proveedores de educación… también les preocupa que la herramienta haya sido entrenada utilizando modelos de generación de texto de IA desactualizados”, dijo McCluskey.
«Esto pasa por alto el hecho de que los generadores de texto de IA evolucionan constantemente en la complejidad de sus resultados, como se informó ampliamente con la implementación reciente de ChatGPT 4».
La Universidad de Sydney también se ha negado a adoptar la función de detección de IA sin «pruebas o visibilidad adecuadas».
“Nuestros estudiantes nos han dicho claramente que tenemos la responsabilidad de enseñarles cómo usar las herramientas de IA correctamente y… desarrollar su razonamiento crítico; reconocer que su futuro requerirá esta habilidad”, dijo un portavoz.
«La IA puede ayudar a los estudiantes a aprender y se usará en los trabajos del futuro… necesitamos enseñar a nuestros estudiantes cómo usarla de manera efectiva y legítima».
La universidad ha optado por revisar las evaluaciones para evitar las trampas, incluidas más evaluaciones orales, borradores y reemplazando algunos exámenes presenciales o en papel.
La Universidad de Wollongong dijo que las herramientas de Turnitin se lanzaron con un «aviso mínimo» y que era necesario resolver «varios problemas» antes de comprometerse a integrar el servicio.
“Necesitaríamos confianza en su efectividad, incluso estar satisfechos de que no está detectando incorrectamente el uso de chatbots generativos de IA a un ritmo significativo”, dijo un portavoz.
La UoW ha actualizado su política de integridad académica para permitir que los estudiantes usen ChatGPT con reconocimiento, dando a los académicos luz verde para integrar la IA en la enseñanza y la evaluación.
La Universidad de Griffith ha hecho lo mismo, incorporando la tecnología en el aprendizaje y la evaluación y actualizando sus políticas de mala conducta estudiantil para reconocer la tecnología emergente, incluida la forma de atribuir adecuadamente las fuentes de IA.
La Universidad de Monash, RMIT, UWA y ANU también han decidido no usar la herramienta mientras estaba en sus inicios.
Eric Wang, jefe global del equipo de inteligencia artificial de Turnitin, dijo que la herramienta proporcionó un grado de detección para los educadores en función de la forma en que los sistemas de escritura de inteligencia artificial tienden a usar «palabras de alta probabilidad» de manera similar al texto predicho en los teléfonos.
data-spacefinder-role=»inline» data-spacefinder-type=»model.dotcomrendering.pageElements.NewsletterSignupBlockElement» class=» dcr-173mewl»>saltar la promoción del boletín anterior
después de la promoción del boletín
“Sentimos firmemente que lo logramos”, dijo.
“No pretende ser una herramienta punitiva… en la que se toman decisiones importantes sobre el futuro de un estudiante… pretende ser una demostración de hacia dónde nos dirigimos”.
La Universidad de Melbourne, que ya utiliza Turnitin, adoptó la herramienta como una de las muchas que podrían actuar como una «bandera» para futuras investigaciones.
La Universidad de Western Sydney también ha adoptado la herramienta con fines educativos, en lugar de punitivos.
“Los avances en inteligencia artificial continúan cambiando la naturaleza de las prácticas laborales, habilidades y… necesidades educativas actuales y futuras de los graduados”, dijo un portavoz.
“No debemos asumir que la IA es siempre una amenaza… como parte de nuestro enfoque del uso ético de la IA generativa”.
id=»ecffb23f-4df9-4302-9bff-140ef4b99354″ data-spacefinder-role=»richLink» data-spacefinder-type=»model.dotcomrendering.pageElements.RichLinkBlockElement» class=» dcr-11ra563″>
UNSW ha brindado acceso al personal a la herramienta Turnitin como un método para detectar el uso no autorizado sospechoso de IA, pero dijo que cambiar el diseño de las evaluaciones sigue siendo la forma más efectiva de limitar su uso.
“Reconocemos que los estudiantes no deben depender demasiado de la tecnología, y el pensamiento y el conocimiento independientes siguen siendo esenciales”.
Un experto en inteligencia artificial, el profesor Toby Walsh, dijo que era correcto que las universidades fueran cautelosas, ya que la herramienta solo proporcionaba que las evaluaciones de probabilidad fueran escritas por inteligencia artificial en lugar del plagio tradicional, que podría vincularse a sitios web específicos.
“No va a ser adecuado para proteger las universidades”, dijo. “Hay formas más constructivas de adoptar las herramientas porque será una carrera armamentista y la IA se integrará en todo lo que usemos”.