우리 회사 질문으로 고른 모델만 남겨서 라우팅합니다
우리가 실제로 쓰는 질문을 여러 모델에 똑같이 던지고 같은 기준으로 채점합니다. 채점 결과로 우리 회사에 맞는 모델만 남기면, 요청마다 그 안에서 알맞은 모델이 선택됩니다.
평가할 수 있는 업무
- 질의응답: 문의에 얼마나 정확하고 친절하게 답하는지 봅니다.
- 캐릭터 대화: 캐릭터와 관계를 유지하며 몰입도 높은 대화를 이어가는지 봅니다.
- 요약: 빠뜨린 내용 없이 짧게 줄이는지 봅니다.
- 문서 기반 답변(RAG): 주어진 문서 안에서만 답하는지, 지어내지 않는지 봅니다.