검색 상세

Metacognitive Engagement in Writing Feedback through Interactions with ChatGPT in an EFL Context

EFL 환경에서의 ChatGPT와의 상호작용을 통한 메타인지적 피드백 참여 양상

초록/요약

Nowadays, with the prevalent usage of AI tool, ChatGPT has emerged in educational field, in particular, functioning as a writing feedback in the field. Considering that writing feedback has been recognized as a key factors in improving learners’ writing performance, little is known about how EFL learners engage with AI-generated feedback metacognitively in their writing process in order to make the most of the merits of ChatGPT and to avoid potential risks of it. In this light, the study delves into the learners’ metacognitive engagement in their writing activities, by considering that higher-order thinking is essential for effectively evaluating and utilizing ChatGPT feedback while mitigating its limitation, such as inaccuracy and over-reliance. Therefore, the study analyzed data from three graduate students at a university in South Korea with screen-recording and semi-structure interviews. The findings reveal that metacognitive knowledge and regulation of metacognition are interconnected during these interactions. Moreover, participants utilized ChatGPT’s feedback so as to preserve and regulate the logical coherence and original academic tone of their writing through metacognitive strategies. In particular, the study found that both their self-awareness and perceptions of the tool guided feedback regulation and reinforced their metacognitive knowledge. In other words, declarative knowledge of the self and the tool facilitated the participants’ procedural strategies and conditional judgement toward ChatGPT’s feedback through learners’ monitoring and evaluation. Notably, participants actively employed their metacognitive processes when they have relatively low trust in the AI tool. As a result, participants’ careful utilization of ChatGPT’s feedback, including lexical suggestions, contributed to improvements in overall writing quality. In sum, the findings suggest the importance of metacognitive engagement in AI-mediated academic writing and inform pedagogical approaches to the use of ChatGPT-based feedback.

more

초록/요약

오늘날, AI 도구의 보편화된 사용과 함께 챗지피티가 교육적 분야에 등장하였으며, 특히 학습자들 사이에서 글쓰기 피드백으로 서의 기능이 두드러진다. 이미 글쓰기 피드백이 학습자의 글쓰기 성과 향상에 주요 요인으로 인식 되어지고 있음을 고려한다면, 어떻게 EFL 환경에서 학습자들이 그들의 글쓰기 과정에서 AI를 기반으로 한 피드백에 메타인지적으로 관여하는지에 대한 연구가 필요하다. 메타인지적인 참여는 학습자들이 챗지피티의 피드백을 효과적으로 평가하기 위한 고등사고력을 요구하며, 피드백의 부정확함, 지나친 의존성 같은 한계점을 완화시킬 수 있다. 따라서 이를 바탕으로, 본 연구는 세명의 한국의 대학원생들을 대상으로 질적 연구를 수행하였다. 참가자들의 메타인지적 특성을 고려하여 화면 녹화와 반 구조화 인터뷰를 함께 진행하였으며, 그 결과 참가자들이 글쓰기 과제에서 챗지피티의 피드백을 활용하는 과정에서 그들의 메타인지적 지식과 조절 전략의 사용함이 드러났다. 또한 참가자들은 그들의 글쓰기에서 논리적 일관성과 학문적인 톤을 유지하기 위해 챗지피티의 제안을 전면적으로 수용하기보다는 선택적으로 활용하여 메타인지적 전략을 발휘하였다. 특히, 학습자 스스로에 대한 인식과 AI도구에 대한 인식이 피드백 조절을 이끌고, 이 조절 경험이 다시 학습자의 메타인지 지식을 강화하였다. 이러한 연구 결과는 챗지피티의 피드백을 통한 L2 학술 글쓰기에서 학습자의 메타인지 과정 조절 능력의 훈련을 제시하며, AI 리터러시의 필요성을 함께 언급한다. 또한, 챗지피티를 포함한 인공지능 기반 피드백의 효과적 활용을 위한 교수 학습 방안을 제시하는데 기여할 수 있다.

more

목차

ABSTRACT i
국문 초록 ⅲ
ACKNOWLEDGMENTS v
TABLE OF CONTENTS vi
LIST OF TABLES viii
LIST OF FIGURES ix
CHAPTER 1. INTRODUCTION 1
CHAPTER 2. LITERATURE REVIEW 5
2.1 Advances of ChatGPT in Education 5
2.2 L2 Writing Feedback: Human-based Feedback and AI-mediated Feedback 9
2.2.1 Transition from Human-based Feedback to Automated Tool as Feedback 9
2.2.2 ChatGPT for L2 Writing Feedback 14
2.3 Feedback Engagement in L2 Writing 17
2.4 Metacognition and Its Role in L2 writing 22
CHAPTER 3. METHODOLOGY 29
3.1 Participants 29
3.2 Instruments 32
3.3 Procedures 34
3.4 Data Analysis 36
CHAPTER 4. RESULTS 40
4.1 Kim, Reflective Engagement Beyond Surface-Level Feedback 40
4.2 Lee, Strategic but Intuitive Engagement with ChatGPT Feedback 50
4.3 Kwon, Critical but Deliberate Engagement with ChatGPT Feedback 63
CHAPTER 5. DISCUSSION 75
5.1 Learners' Differential Engagement with ChatGPT Feedback 75
5.2 Pedagogical Implications 80
5.3 Limitations 83
CHAPTER 6. CONCLUSION 84
REFERENCES 86
APPENDICES 107
A. Supplementary material 107
B. Writing prompts 109
C. Sample of modified version of Metacognitive Awareness Inventory (MAI) 110

more