Las mayores señales de que una IA escribió un artículo, según un profesor

Mark Massaro ha impartido clases de Composición en Inglés en el Florida Southwestern State College durante años, pero su trabajo se complicó considerablemente en 2023. Poco después de que aplicaciones de IA como ChatGPT se volvieran gratuitas, la educación superior en todo Estados Unidos se vio afectada por una oleada de trampas automatizadas. Los estudiantes han estado usando IA para escribir ensayos, y la tendencia parece estar empeorando con el paso del tiempo. Massaro comentó que, de 25 estudiantes en sus clases, no es inusual que hasta cinco entreguen trabajos que parecen estar escritos por IA.

Cuando se lanzó ChatGPT y se hizo evidente que los estudiantes lo usaban para hacer trampa, Massaro comenta que solía pasar trabajos por varios escáneres de IA al día. Si la mayoría etiquetaba la prosa como generada por IA, les creía. Ahora, sin embargo, la universidad no les permite subir los trabajos de los estudiantes a dichas aplicaciones porque podría considerarse una violación de su privacidad. Tampoco ayuda que la precisión de los detectores de IA sea poco fiable .

En cambio, Massaro afirma que debe confiar en su propio ingenio para evaluar si un trabajo fue creado ilegítimamente o no. Para ello, ha elaborado una lista de señales reveladoras de que un trabajo es IA. Cada vez que se entrega un trabajo, consulta esa lista. Compartió algunas de estas señales de alerta con Gizmodo, creando una imagen más clara de las condiciones infernales que la IA ha impuesto a los educadores estadounidenses.

Demasiados guiones largos

Una pista de que un trabajo podría generarse es la abundancia de guiones largos. Por alguna razón, aplicaciones como ChatGPT suelen incluir muchos de estos pequeños guiones. Ahora, Massaro realiza una prueba. Si sospecha que un estudiante ha generado su ensayo con IA, lo llama a su escritorio y le pide que escriba un guion largo en la computadora. Con frecuencia, el estudiante ni siquiera sabe cómo hacerlo, comentó. "Les digo: 'Tu trabajo está lleno de guiones largos, solo enséñame cómo lo hiciste'", dijo. Si el estudiante tiene dificultades, es obvio lo que ha sucedido.

Sin sangrías

Massaro afirma que, a diferencia de las estipulaciones de estilo del ensayo universitario tradicional, es común que el texto copiado y pegado de un chatbot no tenga sangría. Cabe destacar que el resultado de ChatGPT y similares no necesita sangría. Si el trabajo de un estudiante se define por grandes bloques de texto, es muy probable que lo haya escrito un robot.

Gramática perfecta y contenido superficial

Si un estudiante entrega un trabajo perfectamente redactado pero sin mucho que decir, esto podría ser otro indicio de generación algorítmica, afirmó Massaro. Si bien muchos estudiantes pueden ser buenos escritores, pero no tener muchas ideas originales, la escritura autogenerada presenta varias señales que se hacen evidentes con el tiempo. Massaro describe el estilo de IA como caracterizado por una "extensión uniforme de oraciones y párrafos", en el que cada "párrafo tiene aproximadamente el mismo tamaño, con una sensación rítmica y mecánica". La escritura también puede tener un "tono hiperformal", explicó, que a menudo se caracteriza por una "voz académica excesivamente refinada, poco común en el trabajo estudiantil".

Sin historial de reclutamiento

Otra señal de alerta es la ausencia total de participación en el proceso de redacción en clase, afirmó Massaro. Como parte de sus clases de composición, Massaro organiza revisiones entre pares y conferencias. Un estudiante también puede afirmar que se reunió con el Centro de Escritura de la escuela para redactar el ensayo, pero, en realidad, tampoco lo hizo. Al entregar estos ensayos, los estudiantes también pueden incluir "vocabulario inusual para el estudiante" que se caracteriza por "súbitos saltos de sofisticación no vistos en trabajos anteriores ni en debates en clase".

Escritura impersonal

Massaro comentó que ocasionalmente reparte trabajos de reflexión personal. Un estudiante que escribe el trabajo basándose, por ejemplo, en sus experiencias trabajando en el 7-Eleven local, incluirá todo tipo de detalles personales extraños que una IA jamás pensaría en inventar, dijo Massaro. Por otro lado, si el trabajo se genera automáticamente, puede extenderse de forma muy abstracta sobre la importancia de la "amistad" para la humanidad, dijo entre risas.

Entradas de indicaciones sobrantes

Sorprendentemente, algunos estudiantes han sido tan descuidados con sus trampas que incluso han dejado entradas puntuales de sus interacciones con un chatbot en el ensayo final que entregaron, dice Massaro.

Citas tonterías

Es bien sabido que la IA tiene la costumbre de "alucinar" la información. En el trabajo de un estudiante, estas referencias generadas por la IA se manifiestan de diversas formas, incluyendo información claramente incorrecta o inventada y citas falsas. Esto puede generar horas de trabajo adicional para Massaro, quien se ve obligado a investigar si un hecho poco claro en un ensayo es real o no. Esto a veces implica examinar minuciosamente revistas académicas y libros reales que se citaron en los trabajos del estudiante, pero que podrían no incluir las citas incluidas en la bibliografía del estudiante (porque son falsas).

Confrontar a un estudiante por hacer trampa puede ser incómodo y difícil, dijo Massaro, aunque suele ser fácil darse cuenta de lo que ha sucedido de inmediato, añadió. Con frecuencia, un estudiante culpable admitirá haber usado IA o simplemente no responderá al correo electrónico de Massaro (muchos de sus estudiantes son a distancia). Los estudiantes inocentes suelen protestar, y Massaro dijo que tiende a creerles.

La mayor decepción del auge de la escritura con IA es que les está robando a los estudiantes la capacidad de cultivar su propia identidad intelectual y creativa, afirmó. «Este es el momento en que deberían estar encontrando su voz», añadió. En cambio, la IA habla (y piensa) por ellos.