표가 많은 자료에서 RAG 검색이 흔들리는 문제
서비스에 를 붙이는 과정에서 안에 표가 많이 들어가 있다. 현재는 으로 청킹을 하고 있지만, 필요한 표 데이터가 제대로 골라지지 않고 불필요한 정보처럼 밀려나는 일이 자주 생긴다.
그 결과 답 갑자기 흐름을 잃거나 엉뚱하게 나오는 문제가 있다. 핵심 고민은 표처럼 가 있는 자료를 가 더 잘 찾아 쓰게 하려면 어떻게 처리해야 하는지다.
핵심 포인트
- 서비스용 를 만들고 있으며 자료 안에 표가 많다.
- 현재 자료 분할에는 을 사용하고 있다.
- 필요한 표 데이터가 검색에서 잘 선택되지 않는 문제가 있다.
- 검색 실패가 답변 품질 저하로 이어지고 있다.
- 구축에서는 표 데이터 처리 방식이 비용과 품질에 영향을 줄 수 있다.