Saltar al contenido

Se acerca la época de exámenes. ¿Los estudiantes pueden aprobar con ChatGPT?

14 de mayo de 2023

Da un paseo por cualquier campus universitario y seguramente escucharás aparecer ‘ChatGPT’. La IA generativa ya ha conquistado el mundo con su capacidad para escribir ensayos bien elaborados sobre casi cualquier cosa. Los estudiantes, por supuesto, estaban obligados a tomar nota de ello.

Los estudiantes no solo son más inteligentes y están más interesados ​​en adoptar nuevas tecnologías, sino que ChatGPT y sus pares brindan servicios que son extremadamente interesantes para alguien que busca, por ejemplo, aprobar un examen o escribir un ensayo. Las universidades también han tomado nota de esto y han tratado de prepararse. Sin embargo, es poco probable que tengan éxito.

Nuestros bots aún no están al nivel de Star Wars. Pero estamos llegando. Créditos de la imagen: Kenny Eliason.

los bots son buenos

En una pequeña encuesta, más de la mitad de los estudiantes encuestados dijeron que creen que usar ChatGPT para la escuela es hacer trampa, lo que, sorprendentemente, deja a una gran parte de los estudiantes que cree que no lo es. Presumiblemente, incluso entre aquellos que creen que es trampa, habrá una proporción significativa que todavía intentará usarlo.

En estas circunstancias, con la temporada de exámenes a la vuelta de la esquina, las tarjetas de crédito para estudiantes pronto pueden convertirse en un nuevo gasto recurrente. La (posiblemente) mejor IA generativa de texto, GPT-4, cuesta $20 al mes, y es significativamente mejor que la versión gratuita de ChatGPT-3.5. Puede generar ensayos, responder preguntas complejas; diablos, básicamente aprobó el examen de licencia médica de EE. UU.

Pero, ¿puede descifrar los exámenes universitarios? Algunos profesores no están realmente convencidos.

Recomendado:  Los robots pueden usarse para evaluar el bienestar mental de los niños

La BBC habló con académicos de la Universidad de Bath y, según ellos, las IA tienen resultados mixtos cuando se trata de aprobar los exámenes de la universidad.

“Nuestra primera pregunta fue: ‘¿Podrían los estudiantes usar esto para responder nuestras preguntas de evaluación?’”, dice James Fern sobre ChatGPT. “Preguntas de opción múltiple, por ejemplo, las manejará muy bien. Definitivamente no esperábamos que funcionara tan bien como lo hizo… se estaba acercando al 100% correcto».

Pero cuando se trataba de preguntas más complejas, no le fue tan bien. Sus respuestas fueron demasiado simples, no ofreció fuentes, no proporcionó evidencia y carecía de las habilidades críticas que esperarías de un estudiante universitario. Las respuestas pareció ser muy buenos en la superficie, pero no había mucha sustancia en ellos. Además, las IA parecen inventar muchas cosas.

“Se ven perfectos, tienen los nombres correctos de los autores, tienen los nombres correctos de las revistas, todos los títulos suenan muy sensatos, simplemente no existen”, dice James. «Si no está al tanto de cómo funcionan los modelos de lenguaje grandes, sería muy fácil engañarlo y pensar que se trata de referencias genuinas».

Sin embargo, parece depender mucho del tipo de examen que le pidas aprobar.

En un nuevo estudio, los investigadores describen cómo el chatbot de IA aprobó cuatro exámenes de derecho en la Universidad de Minnesota y otro examen en la Escuela de Negocios Wharton de la Universidad de Pensilvania.

La nueva y poderosa herramienta de chatbot de IA aprobó recientemente los exámenes de derecho en cuatro cursos según los profesores de las escuelas.

«Más de 95 preguntas de opción múltiple y 12 preguntas de ensayo, ChatGPT se desempeñó en promedio al nivel de un estudiante C+, logrando una calificación baja pero aprobatoria en los cuatro cursos».

Hacer trampa, exámenes y conjuntos de habilidades

estudiantes aprendiendo

Créditos de la imagen: Annie Spratt.
Recomendado:  Cómo la optimización de MLOps puede revolucionar la IA empresarial

Pero no todo son trampas. Para los estudiantes, la IA es una herramienta importante que seguramente será un activo cuando lleguen al mercado laboral. De hecho, en el Reino Unido, la secretaria de Educación, Gillian Keegan, dijo en un discurso reciente que la IA ya estaba «marcando la diferencia en las escuelas y universidades», y sugirió que podría ayudar a los maestros de escuela con los planes de lecciones y la calificación. Un nuevo consejo de la Agencia de Garantía de Calidad, que revisa los estándares en las universidades del Reino Unido, insta a las universidades a equipar a los estudiantes con conjuntos de habilidades de IA.

Algunos profesores ya están implementando esto en sus cursos, instruyendo a los estudiantes para que usen la IA para diversas tareas. Pero es importante que los estudiantes usen la IA como una herramienta que se adapte a su propio pensamiento crítico, y no al revés.

“Es importante enfatizar que esta es una herramienta de asistencia: su principal valor es que puede transformar la estructura y la forma del texto mientras mantiene y estabiliza el significado. Los educadores deben ser conscientes de esto y resaltar sus limitaciones como fuente de conocimiento”, dice Steve Watson, académico de la Universidad de Cambridge y coorganizador del grupo de investigación de Conocimiento, Poder y Política de la Facultad.

Pero estos son todavía casos un tanto aislados. En última instancia, las universidades en su conjunto no están preparadas para hacer frente tanto a las amenazas como a las oportunidades que brindan las IA como ChatGPT y GPT-4. Los temores de hacer trampa en las tareas y los exámenes son reales, pero el potencial de estas IA como herramientas educativas puede superar los riesgos.

Recomendado:  Un mapa para ayudar a tu equipo a aceptar la IA

Como sucede tan a menudo, es un caso de tecnología que supera a la sociedad. Casi de la noche a la mañana, nos entregaron estas increíbles herramientas y no estamos muy seguros de qué hacer con ellas. Con suerte, las universidades, los estudiantes y la sociedad lo descubrirán pronto.

¡Gracias por tus comentarios!