Revistes Publicacions URV: Revista Internacional de Lenguas Extranjeras = International Journal of Foreign Languages 2025

Experiències d'estudiants principiants d'espanyol amb feedback del professor i basat en IA: un estudi exploratori

  • Identification data

    Identifier:  RP:5747
    Authors:  Sánchez Gutiérrez, Claudia; Garabaya-Casado, Erik; Ruiz Alonso-Bartol, Ana
    Abstract:
    Este estudio explora la integración de herramientas de Inteligencia Artificial en el currículo de un curso universitario de español para principiantes, con especial atención al uso de ChatGPT-3.5 como apoyo en tareas de escritura. Este proyecto piloto se centró en comparar la recepción del feedback generado por IA frente a la retroalimentación basada en Written Corrective Feedback (WCF) aportada por el profesor. Los estudiantes se dividieron en tres secciones: (a) un grupo de control que recibía comentarios del instructor siguiendo un sistema de codificación por colores basado en el enfoque Dynamic WCF (Hartshorn et al., 2010); (b) un grupo experimental que empleaba en su lugar ChatGPT con una prompt diseñada tras un proceso iterativo para imitar las categorías del grupo de control; y (c) un segundo grupo experimental que utilizaba una prompt que requería una menor categorización. Los resultados, recogidos a través de encuestas pre y post-trimestre con escalas Likert y preguntas abiertas, sugieren que únicamente cuando la IA opera bajo instrucciones detalladas y específicas, la percepción de calidad, claridad y utilidad del feedback se acerca a la del profesor. Además, estos estudiantes experimentaron una reducción en la ansiedad de escritura comparable al grupo de control. En contraste, la falta de control en la formulación de la prompt resultó en menor satisfacción y mayor desconfianza hacia la IA como herramienta de apoyo. Este estudio preliminar sugiere que el diseño cuidadoso de las instrucciones dirigidas a modelos de IA es un factor clave para garantizar su eficacia pedagógica en el aula de lenguas y controlar su ansiedad.
  • Others:

    Author, as appears in the article.: Sánchez Gutiérrez, Claudia; Garabaya-Casado, Erik; Ruiz Alonso-Bartol, Ana
    Keywords: Intel·ligència Artificial
    Abstract: Este estudio explora la integración de herramientas de Inteligencia Artificial en el currículo de un curso universitario de español para principiantes, con especial atención al uso de ChatGPT-3.5 como apoyo en tareas de escritura. Este proyecto piloto se centró en comparar la recepción del feedback generado por IA frente a la retroalimentación basada en Written Corrective Feedback (WCF) aportada por el profesor. Los estudiantes se dividieron en tres secciones: (a) un grupo de control que recibía comentarios del instructor siguiendo un sistema de codificación por colores basado en el enfoque Dynamic WCF (Hartshorn et al., 2010); (b) un grupo experimental que empleaba en su lugar ChatGPT con una prompt diseñada tras un proceso iterativo para imitar las categorías del grupo de control; y (c) un segundo grupo experimental que utilizaba una prompt que requería una menor categorización. Los resultados, recogidos a través de encuestas pre y post-trimestre con escalas Likert y preguntas abiertas, sugieren que únicamente cuando la IA opera bajo instrucciones detalladas y específicas, la percepción de calidad, claridad y utilidad del feedback se acerca a la del profesor. Además, estos estudiantes experimentaron una reducción en la ansiedad de escritura comparable al grupo de control. En contraste, la falta de control en la formulación de la prompt resultó en menor satisfacción y mayor desconfianza hacia la IA como herramienta de apoyo. Este estudio preliminar sugiere que el diseño cuidadoso de las instrucciones dirigidas a modelos de IA es un factor clave para garantizar su eficacia pedagógica en el aula de lenguas y controlar su ansiedad.; This study explores the integration of Artificial Intelligence tools into the curriculum of a beginner-level college Spanish course, focusing on the use of ChatGPT-3.5 to support writing tasks. This pilot aimed to compare the reception of AI-generated feedback against the more instructor-led written corrective feedback (WCF). Students were divided into three sections: (a) a control group that received instructor feedback following a color-coded system based on the Dynamic WCF (Hartshorn et al., 2010) approach; (b) an experimental group that used ChatGPT instead, following a prompt created through an iterative process to mimic the same categorization of errors as the control group; and (c) a second experimental ChatGPT group whose prompt entailed less error categorization. Results, collected through pre-/post-quarter surveys that included Likert scales and open-ended questions, suggest that only when AI operates under detailed instructions and supported approach do students perceive the quality, clarity, and usefulness of the feedback as comparable to that of the instructor. Additionally, students in that categorized feedback section experienced a reduction in writing anxiety almost similar to the control group. In contrast, a prompt designed to elicit less categorized feedback led to lower levels of satisfaction and greater distrust toward AI as a feedback tool. This preliminary study highlights that careful AI prompt engineering and teacher support is a key factor in ensuring its pedagogical effectiveness in the language classroom and manage writing anxiety.; Aquest estudi explora la integració d'eines d'Intel·ligència Artificial al currículum d'un curs universitari d'espanyol per a principiants, amb una atenció especial a l'ús de ChatGPT-3.5 com a suport en tasques d'escriptura. Aquest projecte pilot es va centrar a comparar la recepció del feedback generat per IA davant de la retroalimentació basada en Written Corrective Feedback (WCF) aportada pel professor. Els estudiants es van dividir en tres seccions: (a) un grup de control que rebia comentaris de l'instructor seguint un sistema de codificació per colors basat en l'enfocament Dynamic WCF (Hartshorn et al., 2010); (b) un grup experimental que utilitzava al seu lloc ChatGPT amb una prompt dissenyada després d'un procés iteratiu per imitar les categories del grup de control; i (c) un segon grup experimental que utilitzava una prompt que requeria una menor categorització. Els resultats, recollits a través d'enquestes pretrimestre i posttrimestre amb escales Likert i preguntes obertes, suggereixen que únicament quan la IA opera sota instruccions detallades i específiques, la percepció de qualitat, claredat i utilitat del feedback s'acosta a la del professor. A més, aquests estudiants van experimentar una reducció de l'ansietat d'escriptura comparable al grup de control. En contrast, la manca de control en la formulació de la prompt va resultar en menor satisfacció i més desconfiança cap a la IA com a eina de suport. Aquest estudi preliminar suggereix que el disseny acurat de les instruccions dirigides a models d'IA és un factor clau per garantir-ne l'eficàcia pedagògica a l'aula de llengües i controlar-ne l'ansietat.
    Journal publication year: 2025
    Publication Type: info:eu-repo/semantics/publishedVersion; info:eu-repo/semantics/article