프롬프트가 실패할 가능성을 미리 점수화하는 무료 도구

프롬프트에는 모델에게 한 번에 얼마나 많은 생각, 도구 사용, 규칙 확인, 출력 형식을 요구하는지를 나타내는 인지 부하가 있다. 인지 부하가 높으면 모델이 거절하지 않아도 일부 단계를 빠뜨리거나, 지시를 섞어 이해하거나, 그럴듯하지만 틀린 결과를 낼 수 있다. 이 도구는 거대 언어 모델을 다시 호출하지 않고, 로컬에서 정해진 규칙으로 프롬프트의 실패 가능성을 점수화한다.

판단 기준은 9가지로 나뉘며, 공개된 내용에는 작업 수, 추론 깊이, 도구 복잡도, 제약 밀도, 출력 복잡도가 포함된다. 작업 수는 서로 다른 행동 지시가 몇 개인지 보고, 4개를 넘으면 모델이 순서를 놓치기 쉽다고 본다. 추론 깊이는 조건문과 갈래가 얼마나 많은지 보며, 도구 복잡도는 참조한 도구나 응용 프로그램 인터페이스 수가 많을수록 선택 실수가 늘어난다고 본다.

제약 밀도는 전체 길이 대비 금지·필수 조건이 얼마나 많은지 보고, 출력 복잡도는 요구하는 결과 형식이 얼마나 많은지 본다.