과학 발견 예측 시험서 Fable 5 1위, GPT-5.6은 응답률 우세
벤치마크는 AI의 이후에 발표된 획기적인 과학적 발견을 미리 추론할 수 있는지 시험한다. Fable 5가 현재 가장 높은 성능을 보였지만, 이전 버전은 전체 문제의 45%에 답했고 최신 버전은 39%에만 답했다.
최신 버전은 답변 거부가 늘었을 뿐 아니라, 실제로 답한 문제의 성능도 조금 낮아졌다. 공개된 Fable 5 점수는 두 버전이 모두 답한 문제만 대상으로 계산됐다.
은 보다 향상됐으며 을 넘어 비슷한 등급과 가격대에서 가장 높은 점수를 기록했다. Fable 5에는 근소하게 뒤졌지만, 전체 문제에 답한 비율이 100%여서 최신 Fable 5의 39%보다 일상적인 사용에는 더 실용적일 수 있다.
핵심 포인트
- 는 이후 나온 과학적 발견을 AI가 미리 추론할 수 있는지 시험한다.
- Fable 5가 가장 높은 성능을 기록했다.
- Fable 5의 문제 응답률은 이전 버전 45%에서 최신 버전 39%로 낮아졌다.
- Fable 5 점수는 두 버전이 모두 답한 문제만 대상으로 계산됐다.
- 은 Fable 5보다 점수는 조금 낮지만 모든 문제에 답했다.