오래 운영한 RAG에서 낡은 검색 자료를 어떻게 찾아낼까
를 오래 운영하면 와 원본 자료가 조금씩 어긋날 수 있다. 문서를 고쳐도 예전 조각이 남고, 원본 행을 삭제해도 이 지워지지 않을 수 있다. 자료를 다시 넣는 과정에서는 거의 같은 사본이 생겨 검색 결과에서 서로 경쟁하기도 한다.
특히 에서 삭제한 자료가 실제 검색 결과에서도 사라졌는지 따로 확인해야 한다. 이를 발견하고 수치로 측정하는 방법, 정기 대조 작업의 필요성, 삭제 여부를 검증하는 운영 방식이 핵심 과제로 제시된다.
핵심 포인트
- 원본 문서를 수정해도 에는 예전 이 남을 수 있다.
- 원본 에서 행을 지워도 해당 은 별도로 남을 수 있다.
- 자료를 다시 넣으면 거의 같은 사본이 생겨 검색 결과의 품질을 떨어뜨릴 수 있다.
- 삭제 작업은 와 실제 검색 결과 양쪽에서 확인해야 한다.
- 사용자 신고에 의존하지 않도록 정기 대조와 자동 검사가 필요하다.