Hermes agent로 PDF 추출 도구를 비교한 실험
개인 실험 기준으로, 를 에 연결해 PDF 24개의 실제 내용을 먼저 읽게 한 뒤, 에서 여러 도구와 을 비교했다. 문서는 무작위로 골랐고, 일부만 같은 형식이었으며, 긴 감열지 영수증처럼 읽기 어려운 자료도 많았다. 는 기준 답안을 만들고, 에서 여러 도구를 돌리는 시험 환경을 만드는 데 쓰였다.
도구마다 장점이 달랐다. Nemotron Parse는 모든 파일을 읽었고 속도도 빨라 전체 성능이 가장 좋았다. 다만 광학 문자 인식 도구처럼 작은 오독은 있었다.
olmOCR은 O와 0을 헷갈리는 흔한 문제를 잘 잡아 정확도가 가장 돋보였지만, 처리 속도가 꽤 느렸다.
핵심 포인트
- 를 에 연결해 PDF 24개의 기준 내용을 먼저 확인했다.
- 에서 여러 도구와 을 같은 자료로 비교했다.
- Nemotron Parse는 모든 파일을 읽었고 속도도 빨라 전체 평가가 가장 좋았다.
- olmOCR은 O와 0 같은 헷갈리는 글자를 잘 구분해 정확도가 좋았지만 느렸다.
- 실무에서는 로 기준 답안을 만든 뒤 후보 도구를 비교하는 방식이 쓸 만하다.