앤트로픽의 AI 모델 ‘클로드 오퍼스 5.5’가 한국어로 질문하거나 응답 언어를 한국어로 지정해도 영어로 답변하는 현상이 이어지고 있다. 앤트로픽의 코딩 도구 ‘클로드 코드’ 공식 깃허브 저장소에는 11월 들어 같은 현상을 신고하는 이슈가 잇따라 등록됐다.

현지 시각 11월 10일 등록된 이슈(#108811)에서 한국어 이용자는 클로드 코드의 응답 언어를 한국어로 설정하고 ‘응답 문장은 한국어(강제)’ 규칙까지 넣었지만, 도구 호출 사이의 진행 설명이 “The user says…” 같은 영어 문장으로 시작했다고 밝혔다. 이 이용자에 따르면, 긴 구현 작업 중에는 최종 답변 두 개가 모두 영어로 출력됐다.

11월 5일 등록된 이슈(#107449)는 새 세션의 첫 답변부터 영어로 출력된 사례를 보고했다. 작성자는 한 세션에서 응답 언어를 5번 바로잡아야 했다고 밝혔다. 작성자에 따르면, 이용자 메시지로 시작한 답변 6건 가운데 5건이 영어였고, 한국어 안내 문구가 들어간 ‘중지 훅(Stop hook)’이 시작한 답변은 4건 모두 한국어였다.

11월 3일 독일어, 11월 8일 프랑스어, 11월 9일 포르투갈어(브라질) 이용자도 같은 현상을 신고하는 이슈를 각각 등록했다. 포르투갈어 이용자는 11월 9일 긴 세션에서 모델이 최소 6번 영어로 답했고, 모델이 프로젝트 지침 파일(CLAUDE.md)에 ‘영어 사용 금지’ 규칙을 직접 적은 지 몇 분 뒤에도 다시 영어로 답했다고 밝혔다.

9월 23일 일본어 이용자가 등록한 이슈(#96326)에는 다른 이용자들의 측정 결과가 댓글로 공유됐다. 한 이용자는 30일 동안 영어 답변 비율이 이전 모델 ‘클로드 오퍼스 5’에서 0.3%, 오퍼스 5.5에서 15.3%였다고 밝혔다. 히브리어 이용자는 오퍼스 5에서 1.1%(174건 중 2건), 오퍼스 5.5에서 8.5%(164건 중 14건)를 기록했다고 전했다.

이용자들은 영어로 된 도구 실행 결과나 하위 에이전트 보고, 시스템 안내 문구를 읽은 직후 응답 언어가 영어로 바뀌는 경우가 많다고 설명했다. 신고한 이용자 다수는 클로드 코드 설정의 언어 항목이나 CLAUDE.md 규칙을 적용한 뒤에도 같은 현상이 반복됐다고 밝혔다.

11월 13일 기준 해당 이슈는 모두 열린 상태이며, 앤트로픽 직원의 답변은 확인되지 않았다. 앤트로픽은 이 현상에 대한 공식 입장이나 수정 일정을 밝히지 않았다. 앤트로픽 개발자 문서는 원하는 응답 언어를 시스템 프롬프트에 명시하는 방법을 가장 안정적인 방법으로 안내하고, “사용자가 어떤 언어로 쓰든 항상 프랑스어로 답하라”와 같은 지시를 예로 들고 있다.

자세한 내용은 깃허브에서 확인할 수 있다.

이미지 출처: 앤트로픽