과거 대화를 더 많이 검색해 넣으면 캐릭터가 더 잘 기억할 것이라고 기대할 수 있습니다. 하지만 필요한 근거를 찾는 일과 모델이 그 근거를 올바른 답변에 사용하는 일은 다릅니다. 요약이 어떤 정보를 잃는지, 검색이 그 손실을 메우는지, 길어진 입력이 응답에 어떤 영향을 주는지를 나눠 확인할 필요가 있었습니다.
DearMate의 평가 자료에는 같은 질문에 압축 맥락만 제공한 조건과 검색을 추가한 조건, 입력 길이를 통제한 장문 실험이 있습니다. 이 글에서는 실험의 결과를 보여주면서, 지표가 측정하는 범위와 실제 서비스 정책으로 옮길 때 필요한 판단을 함께 설명합니다.
세부 본문과 사례는 준비 중입니다.