AI 코딩 도구 비용을 줄이는 opencode 플러그인 실험
Warden.ai는 에서 쓰는 AI 비용을 줄이기 위한 플러그인이다. 비교용 벤치마크가 공개됐고, 여러 플러그인이 실제로 얼마나 비용을 아끼는지 확인하려는 목적이다. AI 응답은 같은 요청에도 매번 달라질 수 있어서, 결과를 믿기 쉽게 만들기 위해 60번 테스트를 돌려 평균을 냈다.
테스트에는 .7 Max와 로컬 모델인 .5 9B가 쓰였다. 도 시험했지만 여러 작업에서 실패해 비교에서 사실상 도움이 되지 않았다. 일부 테스트에서는 모든 플러그인이 오히려 크레딧을 3배 이상 더 쓰는 이상한 결과가 나왔다.
이는 플러그인 자체 문제라기보다 AI가 다른 풀이 경로로 빠지거나 끝나지 않는 반복에 들어갔을 가능성이 크다. 현재 벤치마크는 완성본이 아니며, 더 많은 테스트와 기준을 추가할 계획이다.
핵심 포인트
- Warden.ai는 용 AI 비용 절감 플러그인이다.
- 벤치마크는 60번 테스트를 돌려 평균을 내는 방식으로 진행됐다.
- .7 Max와 로컬 모델 .5 9B가 주요 테스트에 쓰였다.
- 일부 결과에서는 모든 플러그인이 크레딧을 3배 이상 더 쓰는 이상 현상이 있었다.
- AI가 다른 경로로 작업하거나 반복에 빠지면 비용 절감 측정이 크게 흔들릴 수 있다.