축구 예측 실험으로 본 Hermes Agents 활용 판단법
월드컵 조별리그가 시작되기 전에 12개 최신 이 모든 조별리그 경기 결과를 예측했다. 모든 모델은 같은 질문을 받았고, 승리 팀, 정확한 점수, 점유율, , 확신 정도, 전술적 이유를 내야 했다. 경기가 시작된 뒤에는 예측을 바꿀 수 없게 잠갔다. 토너먼트 예측은 아직 만들지 않았다.
대진표가 조별리그 뒤에 정해지기 때문이다. 54경기 뒤 4.7이 141점으로 전체 1위였고, 정확한 점수 예측도 9개로 가장 많았다. Sonar 2는 승리 팀을 가장 많이 맞혔고 35개를 맞혔다. 은 전체 순위는 6위였지만 를 10번 맞혀 이 항목에서는 가장 좋았다.
점수는 정확한 점수, 승리 팀, 골 차이, , 약팀 보너스, 확신도 보정을 기준으로 계산됐다. 다만 모든 모델이 완전히 같은 조건에서 돌지 않았다는 문제가 남아 있으며, 어떤 조건 차이인지는 주어진 내용만으로는 확인되지 않는다.
핵심 포인트
- 12개 최신 이 같은 질문으로 월드컵 조별리그 전 경기를 예측했다.
- 예측 항목은 승리 팀, 정확한 점수, 점유율, , 확신 정도, 전술적 이유였다.
- 54경기 뒤 4.7이 141점으로 전체 1위였고 정확한 점수도 9개로 가장 많았다.
- Sonar 2는 승리 팀 예측을 35번 맞혀 이 항목에서 가장 좋았다.
- 에 적용하려면 모델별 조건을 맞추고, 예측을 경기 전에 고정한 뒤 항목별로 채점하는 방식이 중요하다.