ChatGPT와 API 결과 차이는 에이전트 설계 리스크
GPT-4o는 화면에서 이미지 속 물건의 부피를 추정할 때 좋은 결과를 냈지만, 같은 모델을 로 쓰면 같은 이미지에서도 재시도마다 다른 답을 냈다. API 결과는 웹 화면과 다르게 나왔고, 정확도도 낮았다.
목표는 이미지 입력을 받아 물건 부피를 추정하는 앱을 만드는 것이다. API 설정값을 바꾸고 여러 를 시도했지만, 원하는 수준의 일관성과 정확도는 얻지 못했다.
핵심 포인트
- GPT-4o가 화면에서는 이미지 기반 부피 추정을 잘 수행했다.
- 같은 모델을 로 쓰자 같은 입력에도 결과가 매번 달라졌다.
- API 결과는 웹 화면 결과와 다르고 정확도도 낮았다.
- API 설정값과 를 바꿔도 문제가 해결되지 않았다.
- 앱이나 에이전트는 웹 화면이 아니라 실제 API 환경에서 따로 검증해야 한다.