인스타그램 영상 검색용 RAG에서 오탐을 줄이는 문제
인스타그램 짧은 영상을 바탕으로, 검색어에 맞는 크리에이터를 찾아주는 이 필요하다. 예를 들어 “엄마 크리에이터”나 “곱슬머리 크리에이터” 같은 조건에 맞는 사람을 찾아야 한다.
현재 방식은 Lite로 각 영상을 요약하고, BAAI/bge-small-en-1.5 모델로 384차원 임베딩을 만든 뒤, 에서 여러 검색문으로 벡터 검색을 돌리는 구조다. 그다음 조건을 넘긴 영상이 많은지, 기준 점수를 넘겼는지를 보고 크리에이터 순위를 매긴다.
핵심 문제는 조건에 맞지 않는 크리에이터가 많이 잡히는 오탐이다. 평가 기준도 아직 잘 잡히지 않아, 어떤 방식으로 성능을 점검하고 개선해야 할지 정리된 접근이 필요하다.
핵심 포인트
- 목표는 인스타그램 영상에서 조건에 맞는 크리에이터를 찾는 이다.
- 현재는 Lite로 영상 요약을 만들고 있다.
- BAAI/bge-small-en-1.5로 384차원 임베딩을 만든 뒤 벡터 검색을 사용한다.
- 크리에이터 순위는 기준 점수를 넘긴 영상의 수와 신뢰도를 바탕으로 매긴다.
- 가장 큰 문제는 조건에 맞지 않는 크리에이터가 검색되는 오탐이다.