영수증 인식에 시각 언어 모델을 쓸 때의 비용 고민
모바일 도구의 목표는 장보기 후 무엇을 해 먹을지 정하는 부담을 줄이고, 집에 있는 식재료 낭비를 줄이는 것이다. 흐름은 먼저 장보기 영수증을 사진으로 찍고, 로 품목을 뽑아 구조화된 목록으로 바꾸는 방식이다. 식품 종류에 따라 대략적인 보관 가능 기간도 자동으로 붙인다.
저장한 레시피 주소에서는 앞부분의 긴 설명을 걷어내고, 재료와 조리 순서를 에 맞춰 가져온다. 마지막에는 곧 상할 재료와 저장된 레시피의 필요 재료를 비교해, 가장 알맞은 한 가지 식사를 추천한다. 핵심 고민은 복잡하고 제각각인 영수증 레이아웃을 이 안정적으로 처리할 수 있는지, 아니면 이 더 나은지다.
또 시각 모델은 영수증 한 장을 처리할 때 이 커질 수 있어, 실제 서비스로 키울 때 비용이 부담이 될 수 있다. 면에서는 선택지를 많이 보여주기보다 ‘한 가지 추천’만 주는 방식이 결정 피로를 줄일지, 아니면 사용자가 필터와 탐색 기능을 원할지도 검토 대상이다.
핵심 포인트
- 영수증 사진에서 식재료 목록을 뽑아 냉장고 재고처럼 관리하려는 구조다.
- 레시피 주소에서 재료와 조리 순서를 정리해 저장하는 파서가 포함된다.
- 곧 상할 재료와 레시피 재료를 비교해 한 가지 식사만 추천한다.
- 은 유연하지만 영수증 처리 비용과 오류가 문제가 될 수 있다.
- 같은 전용 인식 방식이 더 싸고 안정적일 수 있다.