Ficha de evaluación ciega de RAG
CHINZY · 2026-11-10 · Documentos y respuestas ficticios para calibrar a los evaluadores. Esta ficha funciona sin conexión y no transmite datos.
Fije las fuentes
D2 · Manual vigente- p2 §1 — Registrar en 48 horas
- p2 §2 — Incluir el número de incidencia
- p3 §1 — Entregar a la mesa de ayuda
- p3 §2 — Conservar el comprobante
D1 p1 §1 · Manual anterior — Antes recibía el departamento de compras.
Los documentos no fijan plazo de reembolso. Ambos candidatos reciben las mismas fuentes y preguntas.
Coteje ambas respuestas
Q1 · ¿Cuándo registrar y qué adjuntar?
Resultados recuperados A, B: D2 p2 §1, D2 p2 §2.
A: Registrar en 48 horas [D2 p2 §1]. Incluir el número de incidencia [D2 p2 §2].
B: Registrar en 48 horas [D2 p2 §1]. Incluir el número de incidencia.
Q2 · ¿Dónde se entrega y qué se conserva?
Resultados recuperados A: D2 p3 §1, D2 p3 §2. B: D2 p3 §1, D1 p1 §1.
A: Entregar a la mesa de ayuda [D2 p3 §1]. Conservar el comprobante.
B: Entregar a la mesa de ayuda [D2 p3 §1]. Conservar el comprobante [D1 p1 §1].
Q3 · ¿Cuánto tarda el reembolso?
A: El manual no da un plazo. No puedo indicar un número de días.
B: Siete días.
Evalúe cada elemento
Recuperación: al menos una fuente válida entre los cinco primeros resultados por pregunta. Citas: cada afirmación predefinida debe señalar el pasaje que la sustenta. Una cita ausente cuenta como fallo. Marque pendiente si aún no verificó. La abstención se puntúa aparte.
Recuperación / Citas / Abstención — A: 2/2 · 3/4 · 1/1. B: 2/2 · 2/4 · 0/1.
Para un piloto real, acuerde de antemano fuentes autorizadas, afirmaciones, revisiones y umbrales. Conserve las respuestas originales para auditarlas.