RAG 블라인드 평가표

CHINZY · 2026-11-10 · 가상 문서와 답안으로 평가 기준을 맞춥니다. 오프라인으로 동작하며 결과를 전송하지 않습니다.

자료 버전 고정

D2 · 현행 지침

D1 p1 §1 · 구판 지침 — 구판에서는 구매 부서가 접수했습니다.

두 버전 모두 환불 기한이 없습니다. 두 후보에게 동일한 자료와 질문을 줍니다.

두 답안 대조

Q1 · 언제 등록하고 무엇을 첨부하나요?

검색 결과 A, B: D2 p2 §1, D2 p2 §2.

A: 48시간 이내 등록 [D2 p2 §1]. 티켓 번호 첨부 [D2 p2 §2].

B: 48시간 이내 등록 [D2 p2 §1]. 티켓 번호 첨부.

Q2 · 어디에 제출하고 무엇을 보관하나요?

검색 결과 A: D2 p3 §1, D2 p3 §2. B: D2 p3 §1, D1 p1 §1.

A: 서비스 창구에 제출 [D2 p3 §1]. 접수증 보관.

B: 서비스 창구에 제출 [D2 p3 §1]. 접수증 보관 [D1 p1 §1].

Q3 · 환불까지 며칠 걸리나요?

A: 지침에 기한이 없어 일수를 답할 수 없습니다.

B: 7일입니다.

항목별 판정

검색은 질문별 상위 5개 결과 중 올바른 근거가 하나 이상이면 통과입니다. 인용은 사전 지정한 주장별 위치와 근거를 확인하고 누락은 실패입니다. 확인 전은 미평가로 두고 답변 보류는 별도 평가하세요.

검색 / 인용 / 답변 보류 — A: 2/2 · 3/4 · 1/1. B: 2/2 · 2/4 · 0/1.

실제 시범에서는 승인 자료, 대상 주장, 버전, 통과 기준을 미리 정하고 검토용 원본 답안을 보관하세요.