Midas, BEAM 메모리 벤치마크에서 LLM 호출 없이 성능 측정
Midas가 의 성능을 재는 에서 첫 성능 측정을 했다. BEAM 100K에서는 0.56, BEAM 500K에서는 0.51을 기록했다. 이 결과는 0회, 0달러, 외부 데이터 전송 0건으로 나왔다.
다음 목표는 100만과 1,000만 규모의 더 큰 단계에서 같은 방식으로 성능을 확인하는 것이다. 방향은 로컬 우선 구조를 유지하면서 비용을 0달러에 가깝게 두고, 과거 결과와 다른 프로젝트에서 배운 점으로 Midas를 개선하는 것이다.
핵심 포인트
- Midas는 BEAM 100K에서 0.56을 기록했다.
- BEAM 500K에서는 0.51을 기록했다.
- 성능 측정에 , , 외부 데이터 전송이 없었다.
- 다음 단계는 100만과 1,000만 규모의 벤치마크다.
- 목표는 로컬 우선 방식으로 비용을 낮게 유지하는 것이다.