Anthropic 연구: 질문 언어에 따라 Claude 답변 태도가 달라진다
Anthropic이 자체 연구에서 같은 질문이라도 사용하는 언어에 따라 Claude가 표현하는 가치관과 답변 태도가 크게 달라진다는 사실을 확인했다. 예를 들어 동일한 사업계획서를 힌디어로 물으면 강점을 칭찬하는 격려성 피드백을 받을 가능성이 높고, 러시아어로 물으면 약점 분석과 수치에 대한 의문 제기 위주의 비판적 답변을 받을 가능성이 높다.
모델과 질문 내용은 동일한데 언어만 다른 것이다. 이번 연구에서 러시아어는 상위 20개 언어 중 가장 극단적인 이질값(outlier)으로 나타나 다른 어떤 언어보다도 두드러지게 달랐다.
분석에 사용된 데이터는 2026년 5월 2주 동안 수집된 약 31만 건의 익명화된 Claude 대화 기록으로, 정답이 하나로 정해지지 않은 주관적 질문만 골라냈다. 표본은 , , 세 모델과 플랫폼에서 가장 많이 쓰이는 20개 언어에 걸쳐 고르게 분배됐으며, 언어당 약 5,000건의 대화가 포함됐다.
핵심 포인트
- 같은 사업계획서라도 힌디어 질문엔 칭찬 위주, 러시아어 질문엔 비판 위주 답변이 나올 가능성이 높음
- 러시아어가 상위 20개 언어 중 가장 이질적인 답변 패턴을 보임
- 2026년 5월 2주간 약 31만 건의 익명화 대화, 정답이 없는 주관적 질문만 분석
- ·· 세 모델, 20개 언어에 고르게 분배된 표본 사용