AI 튜터도 '페르소나'가 중요하다

ChatGPT와 같은 AI가 교육 현장에서 활용되고 있는 가운데, 일리노이대 어바나-샴페인 연구진이 흥미로운 실험 결과를 발표했다. 연구진은 동일한 ChatGPT를 기반으로 서로 다른 '페르소나'를 가진 AI 튜터들을 만들어 농인 학습자들과의 상호작용을 연구했다. 여기서 페르소나란 AI에게 부여한 가상의 정체성을 의미한다.

AI 튜터와 농인 학습자 간 상호작용 연구의 배경

지능형 교육 시스템(Intelligent Tutoring Systems, ITS)은 인공지능 기술을 활용해 다양한 능력을 가진 학습자들을 지원하는데 큰 가능성을 보여왔다. 그러나 기존의 시스템들은 농인 학습자들의 특수한 의사소통 요구와 문화적 특성을 충분히 반영하지 못했다. 대규모 언어 모델(Large Language Models, LLMs)이 AI 튜터에 페르소나를 통합하고 역동적인 대화를 지원할 수 있는 새로운 기회를 제공함에 따라, 일리노이대 어바나-샴페인 연구진은 농인 학습자들이 다양한 페르소나를 가진 LLM 기반 AI 튜터를 어떻게 인식하는지 연구했다.

같은 ChatGPT여도 '경험'에 따라 신뢰도가 달라진다

연구진은 ChatGPT에 세 가지 다른 페르소나를 부여했다. 갈로뎃대학교(미국의 농인 중심 대학) 출신 교육 조교 'Jamie', 농인 교육 전문가 'Casey', 일반 교육자 'Alex'다. 16명의 농인 학습자들은 증강현실(AR) 기술에 대한 교육 영상을 보면서 이들 AI 튜터들과 대화를 나눴다.

흥미로운 점은 모두 같은 ChatGPT 기반임에도 농인 교육 경험이 있는 Jamie와 Casey가 훨씬 더 신뢰를 받았다는 것이다. 특히 Casey는 7점 만점에 5.9점으로 ChatGPT(4.8점)보다 훨씬 높은 신뢰도를 기록했다. 참가자들은 "실제 사람과 대화하는 것 같다"고 평가했다.

연구 결과는 농인 교육 경험이 있는 AI 튜터들이 더 인간적이고 신뢰할 만한 것으로 인식됨을 보여주었다. 특히 갈로뎃대학교 출신의 Jamie와의 대화는 실제 사람과 대화하는 것 같다는 평가를 받았다. 참가자들은 이들 AI 튜터가 농인 커뮤니티에 대한 문화적 지식을 갖추고 있어 더 신뢰할 수 있다고 응답했다. 관련 질문을 하고 개인적인 피드백을 제공하는 AI 튜터의 특성이 긍정적으로 평가되었다. 참가자들은 이러한 상호작용이 더 연결된 느낌을 주고 사고를 자극한다고 언급했다.

AI의 한계를 인정하는 것도 신뢰도를 높인다

연구 과정에서 발견된 또 다른 흥미로운 점은 AI가 자신의 한계를 인정할 때 오히려 신뢰도가 올라간다는 것이다. 참가자들은 AI 튜터가 비디오의 특정 내용에 대해 "잘 모르겠다"고 정직하게 답변하거나, 답변에 구체적인 영상 타임스탬프를 인용할 때 더 신뢰감을 느꼈다고 답했다.

개선이 필요한 영역

하지만 현재의 AI 기술은 여전히 한계가 있다. 연구 참가자들은 현재 AI 튜터들의 여러 한계점을 지적했다. 가장 두드러진 것은 수어 지원 부족이었다. 일부 참가자들은 AI 튜터에게 수어로 개념을 설명해달라고 요청했으나, 현재 시스템은 텍스트 설명만 제공할 수 있었다.

언어 스타일에 대한 선호도도 다양했다. 일부 참가자들은 더 자세한 설명을 선호한 반면, 다른 참가자들은 더 간단하고 명확한 응답을 원했다. 특히 미국 수어(ASL)를 사용하는 참가자들은 ASL의 문법 구조를 반영한 더 간결한 응답을 기대했다.

AI 튜터의 배경 정보에 대한 투명성도 개선이 필요한 것으로 나타났다. 참가자들은 단순히 농인 교육 경험이 있다는 설명보다 더 구체적인 배경 정보가 필요하다고 지적했다. 또한 AI 튜터의 응답에 대한 출처 표시와 인용의 필요성도 제기되었다.

연구의 시사점과 한계

이 연구는 농인 학습자를 위한 AI 튜터 개발에 있어 문화적 이해와 다양한 의사소통 방식의 중요성을 보여주었다. 그러나 동시에 현재 LLM 기술의 한계도 드러냈다. 특히 수어와 같은 시각적 의사소통 지원의 부재는 큰 과제로 남아있다. 연구진은 향후 LLM 기반 시스템 개발에서 수어의 다중양식성 지원, 사용자 선호도에 따른 응답 스타일 조정, 그리고 능력 관련 특성을 고려한 페르소나 설계의 중요성을 강조했다.

본 연구는 AI가 교육 현장에서 더 효과적으로 활용되기 위해서는 단순한 지식 전달을 넘어 학습자의 문화적 배경과 특성을 이해하는 것이 중요하다는 것을 보여준다. 특히 AI에게 부여하는 '경험'과 '페르소나'가 신뢰도와 학습 효과에 큰 영향을 미친다는 점은 향후 AI 교육 시스템 개발에 중요한 시사점을 제공한다. 이 연구는 농인 학습자들의 다양한 교육적 요구를 반영한 AI 튜터 개발의 중요성을 제시했으며, 더 포용적인 교육 기술 발전을 위한 기초 연구로서 의의를 가진다.

기사에 인용한 논문의 자세한 내용은 링크에서 확인할 수 있다.

기사는 클로드 3.5 Sonnet과 챗GPT-4o를 활용해 작성되었습니다.