AWS Certified AI Practitioner
¿El modelo cumple el objetivo de negocio?
Aprobar un trabajo de evaluación no es lo mismo que cumplir un objetivo de negocio. Esta lección cubre los tres objetivos que nombra el examen, los umbrales de aceptación que fijas antes de construir, y cómo AWS mantiene la evaluación viva después del lanzamiento.
Intermedio 19 minutos 5 Objetivos de aprendizaje
- Separar la evaluación offline de la calidad de salida de la evidencia de que se cumplió un objetivo de negocio
- Definir productividad, engagement de usuarios y task engineering como los encuadra el examen, y nombrar una métrica para cada uno
- Fijar umbrales de aceptación y construir un dataset de ground truth con muestreo estratificado
- Explicar cómo la retroalimentación de usuarios aporta señal de evaluación sin ground truth
- Describir cómo la guía de AWS mantiene la evaluación corriendo tras el lanzamiento y detecta drift