Nivel 5: Sistemas de IA / LLM · L5.8 IA generativa en AWS: Bedrock en la práctica (AIP-C01)
Evaluar, monitorear y diagnosticar en Bedrock
Configurar evaluaciones de Bedrock (programáticas, LLM como juez, humanas, de RAG), el registro de invocaciones y las métricas de CloudWatch, y diagnosticar las fallas comunes de IA generativa a partir de la evidencia.
13 min · Pro
Lo que te llevas
Bedrock Evaluations empaqueta L5.6 como jobs: métricas programáticas, un modelo juez, un equipo humano de trabajo y la evaluación de RAG, que califica la recuperación y la generación por separado.
Y 3 ideas más dentro de la clase, en Pro.
Cómo está armada la clase
El problema
El panel de cata y la cámara en el pase
Evaluaciones: L5.6 con nombres de AWS
Monitoreo: el span de LLM de L4.2.4, con otro nombre