클로드 코드가 최근 갑자기 이전만 못하다는 사용자 불만
데이터 분석 작업에 를 써온 한 사용자가 약 일주일 전부터 성능이 눈에 띄게 나빠졌다고 보고했다. 이전에는 여러 데이터셋을 오가며 문맥을 잃지 않고, 긴 대화에서도 앞서 나눈 내용을 정확히 기억하며, 내용에 근거해 답하고, 여러 단계를 거치는 분석도 별다른 지시 없이 안정적으로 수행했다.
그런데 최근에는 1~2분 전에 논의한 내용도 잊어버리고, 관련 파일을 직접 읽는 대신 추측이나 가정으로 답하며, 대신 사전 학습 지식에 의존해 답하고, 요청하지 않은 작업을 제멋대로 시작하는 문제가 나타난다. 파일이나 이전 대화 내용을 계속 다시 짚어줘야 할 정도다.
이는 이 사용자가 클로드로 넘어오기 전 ChatGPT에서 겪었던 것과 똑같은 문제라고 한다. 워크플로우나 프롬프트를 바꾸지 않았는데도 변화는 점진적이 아니라 일주일 전쯤 갑자기 일어났다고 하며, 모델이 업데이트된 것인지, 다른 사람도 같은 현상을 겪고 있는지 묻고 있다.
핵심 포인트
- 약 일주일 전부터 의 데이터 분석 성능이 체감상 급격히 나빠졌다는 보고
- 증상: 방금 전 대화 내용 망각, 파일을 읽지 않고 추측, 대신 사전 지식에 의존, 요청 안 한 작업 임의 수행
- 워크플로우나 프롬프트는 바꾸지 않았고 변화는 점진적이 아니라 갑작스러웠다고 함
- 작성자는 이전에 ChatGPT에서 겪었던 것과 동일한 문제라고 언급
- 모델 업데이트 여부와 다른 사용자의 유사 경험 여부를 묻는 글