Cianplan

Nivel 5: Sistemas de IA / LLM · L5.6 Evals y guardrails

Métricas de RAG y evals de regresión en CI

Medir la fidelidad y la calidad de la recuperación, y atrapar regresiones.

12 min · Pro

Lo que te llevas

  • Mide la recuperación y la generación por separado: context recall y context precision para una, faithfulness y answer relevance para la otra.

Y 3 ideas más dentro de la clase, en Pro.

Cómo está armada la clase

  1. El problema
  2. El taller mide piezas, no qué tan bueno es el coche
  3. Correrlo en CI sin una cuenta de cinco cifras
  4. Comprueba lo que entendiste