Sesión 4: Evaluación y métricas básicas de respuesta
¿Cómo evaluar la calidad de una respuesta?
Para medir la calidad de las respuestas de un LLM, se consideran criterios como:
- Exactitud: ¿La respuesta es correcta?
- Completitud: ¿Incluye toda la información relevante?
- Fluidez: ¿Está bien redactada y es fácil de entender?
Práctica: Escribe 5 tests para un prompt de resumen y valida los resultados.
Prompt: Resume el siguiente texto en 3 viñetas...
Test 1: El resultado tiene 3 viñetas.
Test 2: No hay información inventada.
Test 3: El resumen es claro y breve.
Test 4: El estilo es formal.
Test 5: No repite ideas.